Hva som skjer når noen spør
- Spørsmålet søkes mot dokumentene deres. Dokumentene er delt opp i avsnitt på forhånd, og hvert avsnitt er lagret med en representasjon av hva det betyr.
- De beste avsnittene hentes. Som regel en håndfull, valgt etter mening, ofte blandet med vanlig nøkkelordsøk.
- Modellen svarer ut fra dem. Instruksjonene sier at den bare skal bruke det den fikk, vise til avsnittene, og si fra når de ikke svarer på spørsmålet.
Ingen av de tre stegene er modellens egen kunnskap. Det er hele poenget: svaret kommer fra innholdet deres, slik det er i dag.
Når dere trenger det, og når dere ikke gjør det
Dere trenger det ikke når alt assistenten skal vite får plass på noen få sider. Åpningstider, priser og regler går rett inn i instruksjonene, og svaret blir like godt uten et søk foran.
Dere trenger det når innholdet er stort, spredt eller i endring: hundrevis av produktark, manualene for hver maskin dere har service på, kontrakter, supporthistorikken. Da kan ingen instruksjoner romme det, og søket avgjør hvilken del modellen får se.
Hvor det går galt
- Gamle dokumenter. Indeksen er en kopi. Oppdaterer ingen den når et dokument endres, siterer assistenten fjorårets vilkår med full overbevisning.
- Dårlig oppdeling. En tabell delt i to, eller et avsnitt uten overskriften som forklarer det, gir modellen et halvt svar å jobbe med.
- Søk som bommer. Navn, koder og forkortelser er der søk etter mening er svakest. Derfor blir nøkkelordsøket med.
- Tilganger i etterkant. Å skjule et avsnitt i svaret er for sent. Det må filtreres bort i søket.
- Ingen testsett. Uten ekte spørsmål å kjøre er hver endring en gjetning om det ble bedre eller verre.
Slik finner du det ut på en time
Om en kunnskapsbase trenger RAG, avhenger av hvor mye det er og hvor ofte det endres, og det er raskere å se i deres tilfelle enn å forklare generelt.
Beskriv den i Living Brief, så får du en arkitekturskisse, faser og et tidsrom i uker tilbake med én gang, uten at noen ringer deg. Er du usikker på hvor KI i det hele tatt ville hjulpet, begynner den frie KI-gjennomgangen med virksomheten i stedet.