KI-journalsøk med motstridende opplysninger: kjøpstest

KI-journalsøk med motstridende opplysninger bør gjøre det lettere å se hva som faktisk står i historikken. Et kort og sikkert svar er lite nyttig hvis det skjuler at to notater sier forskjellige ting. Før du kjøper, test om du kan følge svaret tilbake til riktig tekst og dato.

Denne guiden gir deg en liten, fiktiv journal og spørsmål du kan prøve hos leverandøren. Den tester dokumentasjon og sporbarhet. Den ber ikke KI avgjøre hvilken opplysning som er medisinsk riktig.

KI-journalsøk med motstridende opplysninger: hva trenger du?

Du trenger mer enn en liste med lenker under svaret. Kilden må vise hvilken opplysning den støtter. Du må også kunne se datoen og skille mellom pasientens utsagn, et tidligere notat og legens dokumenterte vurdering.

Kildeankring betyr her at du kan knytte en opplysning til grunnlaget den kommer fra. Det gjør kontroll mulig. En henvisning er likevel ikke bevis for at svaret bruker kilden riktig.

Det du vil kontrollere	Det verktøyet bør vise
Tidligere opplysning	Notatet og datoen den kom fra
Nyere opplysning	Ny kilde og hva den faktisk sier
Uenighet	Begge opplysninger, uten skjult valg mellom dem
Usikkerhet	At grunnlaget er uklart eller ufullstendig
Tidligere vurdering	Hvem som vurderte, og når
Manglende grunnlag	At opplysningen ikke er funnet i det valgte materialet

Dette er en smalere test enn en generell guide til journalsøk med AI. Her undersøker du ett kjøpsspørsmål: Kan jeg kontrollere svaret når journalen ikke har én enkel versjon av historien?

Endring over tid er ikke alltid en motsigelse

To forskjellige opplysninger kan være riktige for hver sin dato. Et gammelt notat kan beskrive bruk av et preparat, mens et nytt notat sier at bruken er avsluttet. Feilen oppstår hvis oppsummeringen gjør begge til samtidige opplysninger, eller presenterer historisk bruk som dagens status.

Andre ganger gjelder opplysningene samme tidspunkt. Da kan materialet faktisk sprike. Et godt dokumentasjonssvar må gjøre spriket synlig, ikke løse det ved å velge teksten som høres mest sikker ut.

Den nyeste teksten kan også være en kopi av en eldre formulering. Datoen alene avgjør derfor ikke om opplysningen er oppdatert. Kontroller hva notatet sier, hvilken sammenheng det står i og om det gjelder dagens situasjon.

Be om formuleringer som «I notatet fra september står det …» og «I oktober oppgir testpersonen …». Det holder kildene fra hverandre. Det gjør også skillet mellom dokumentasjon og en ny vurdering tydelig.

Lag en fiktiv journal for KI-journalsøk med motstridende opplysninger

Bruk tre korte dokumenter med disse oppdiktede opplysningene. «Preparat Alfa» er et fiktivt navn. Dokumentene beskriver ingen virkelig person og er ingen behandlingsveiledning.

Fiktiv kilde	Tekst du kan bruke
Notat A, 1. september 2026	«Testpersonen oppgir at preparat Alfa brukes daglig.»
Notat B, 1. oktober 2026	«Testpersonen oppgir at preparat Alfa er avsluttet.»
Notat C, 1. oktober 2026	«I listen står preparat Alfa fortsatt som daglig. Listen er ikke kontrollert i denne samtalen.»

Ikke legg inn en fasit om hvilken liste som er korrekt. Fasiten i kjøpstesten er hva de tre dokumentene faktisk sier. Du skal undersøke om verktøyet gjengir dem med riktige forbehold.

Hvis du tester journal-PDF til KI, kontroller først at teksten er lesbar. Be gjerne leverandøren vise tekstuttrekket. Hvis Notat B mangler allerede der, kan du ikke bruke et senere svar til å vurdere hvordan KI håndterer det.

Test 1: Be om historikken, ikke en ny legemiddelliste

Spørsmål: «Hva er dokumentert om preparat Alfa? Vis dato og kilde for hver opplysning. Behold usikkerhet og forskjeller mellom dokumentene.»

Svaret bør vise bruk i september, oppgitt avslutning i oktober og en liste som ikke er kontrollert. Det bør ikke slå disse sammen til «bruker preparat Alfa daglig». Det bør heller ikke erklære at listen er feil.

Klikk på hver kilde. Finn setningen som støtter det aktuelle punktet. Hvis du bare kommer til forsiden av hele PDF-en, noter at kontrollen krever mer arbeid enn om du kommer til riktig notat eller utdrag.

Test 2: Be om det som spriker

Spørsmål: «Hvilke opplysninger om preparat Alfa spriker i materialet? Vis begge kildene. Ikke avgjør hvilken som er riktig.»

Se om svaret finner forskjellen mellom oppgitt avslutning og den ukontrollerte listen. At verktøyet gjengir én kilde korrekt, er ikke nok hvis den andre utelates. Noter også om ordet «ikke» i Notat C blir bevart.

Hvis du får et sikkert svar om dagens bruk, spør hvor det er dokumentert. Hensikten er å vurdere sporbarheten, ikke å få KI til å velge riktig legemiddelstatus.

Test 3: Fjern det nyere notatet

Ta bort Notat B og start en ny prøve med bare A og C. Still de samme spørsmålene. Svaret må bygge på materialet som faktisk er valgt i denne prøven.

«Avsluttet 1. oktober» har nå ikke grunnlag i de to dokumentene. Hvis teksten likevel dukker opp, undersøk om tidligere samtalehistorikk eller en gammel opplasting fortsatt er valgt. Kontroller dette før du konkluderer med hvor feilen oppsto.

Test 4: Flytt viktig tekst langt inn i dokumentet

Legg fiktiv bakgrunnstekst foran og etter Notat B. Behold den avgjørende setningen helt lik. Gjenta spørsmålene og sjekk om datoen og opplysningen fortsatt kan finnes og åpnes.

Dette undersøker om kjøpstesten endrer seg når dokumentet blir lengre. Det gir ingen generell garanti for alle journalstørrelser. Spør også om opplastingsgrenser, hvilke deler som leses og hvordan utelatt tekst blir markert.

Vår lokale prøve med to fiktive tekstkilder

13. oktober 2026 prøvde vi Journalhjelps funksjon for å velge utdrag fra tekstkilder i chatgrunnlaget. Vi brukte ett kort notat om daglig bruk og ett langt dokument med en nyere opplysning om avslutning. Begge var helt fiktive.

Vi satte en samlet grense på 2 000 tegn for kildeutdragene. Resultatet var 1 482 tegn: Begge kilder var fortsatt med, den nyere setningen var bevart, og det lange utdraget markerte at mellomliggende tekst var utelatt.

Dette var en lokal test av valg av tekstutdrag. Ingen KI laget et svar, og vi testet verken PDF-lesing eller klikk på kilder i nettleseren. Prøven viser at kildene kunne være tilgjengelige i dette avgrensede steget. Den viser ikke om et senere KI-svar vil gjengi forskjellen riktig.

For deg som kjøper, gir dette et nyttig spørsmål: Tester leverandøren bare at et dokument lastes opp, eller også at den relevante setningen er med i grunnlaget for svaret?

En kildehenvisning må faktisk støtte påstanden

Å åpne en kilde er bare første steg. Les teksten rundt opplysningen. Se etter hvem den gjelder, om den er historisk, og om den kommer fra et direkte utsagn eller en gjengivelse av en annen kilde.

Digdir beskrev feilaktige sidetall i sin utprøving av KI på offentlige dokumenter i 2025. Det var en annen oppgave enn journalsøk, og funnene kan ikke brukes som feilrate for et helseverktøy. De gir likevel et konkret eksempel på hvorfor en plausibel referanse må kontrolleres. Se rapportens avsnitt om feilaktige kildehenvisninger, PDF-side 72.

Be leverandøren vise forskjellen på originaltekst, kildeutdrag og KI-svar. Noter om du må lete selv, og om utdraget gir nok sammenheng. Et sitat med riktig ord kan fortsatt støtte en annen påstand enn den du leser i svaret.

Kontroll	Noter i prøven
Riktig dokument	Hvilken kilde åpnet lenken?
Riktig sted	Kom du til riktig notat eller avsnitt?
Riktig dato	Gjelder opplysningen perioden i svaret?
Riktig betydning	Er usikkerhet, negasjon og taler bevart?
Nok sammenheng	Kan du vurdere påstanden uten mer leting?

Velg journalsøk ut fra kontrollarbeidet

Sammenlign samme fiktive dokumentsett i verktøyene du vurderer. Bruk samme spørsmål og noter både svaret og tiden du bruker på å kontrollere det. Se også forskjellen mellom journaloppsummering og transkribering, slik at du kjøper funksjonen du faktisk trenger.

Medbric beskriver Ailo som oppsummering av dokumenter med sporbare kilder. Det er en leverandørbeskrivelse, ikke dokumentasjon på utfallet av testen over. Be om en demonstrasjon med egne fiktive kilder, og avklar hvilken plan som inkluderer arbeidsmåten.

Journalhjelps Journalchat kan brukes til søk, oppsummering og dokumentutkast fra et valgt grunnlag. Dokumenterte opplysninger og tidligere vurderinger skal beholde sin sammenheng. Nye kliniske konklusjoner må komme fra legen.

Gjeldende begrensning: Den publiserte databehandleravtalen begrenser bruk av pasientopplysninger inntil en tillatt Vercel-avtale eller en dataflyt uten slik behandling hos Vercel er dokumentert. Bruk fiktive dokumenter i utprøvingen. Datatilsynet forklarer også hvorfor forholdet mellom virksomhet og databehandler må reguleres i avtale.

Vanlige spørsmål om kilder som spriker

Kan KI avgjøre hvilken journalopplysning som er riktig?

En oppsummering kan vise hva kildene sier og hvor de spriker. Den er ikke i seg selv grunnlag for å avgjøre hva som er medisinsk riktig. Legen må avklare aktuelle forhold gjennom vanlig faglig arbeid.

Er det nyeste notatet alltid den beste kilden?

Nei. Den nyeste teksten kan være historisk, ufullstendig eller kopiert fra tidligere. Kontroller hva opplysningen gjelder, hvor den kommer fra og om den er oppdatert.

Betyr kildehenvisninger at et KI-svar er korrekt?

Nei. Henvisningen kan peke feil, eller svaret kan bruke en riktig kilde uten å bevare betydningen. Åpne kilden og kontroller den konkrete påstanden.

Hvordan tester jeg journalsøk uten pasientdata?

Lag korte, fiktive dokumenter med datoer og opplysninger som endres eller spriker. Bestem på forhånd hva hver kilde sier. Sammenlign svaret med dokumentene og kontroller hver henvisning.