To kunder tar kontakt samme morgen. «Kan jeg få pengene tilbake for denne?» Er et refusjonsspørsmål teamet ditt avgjorde for lenge siden. «Kan jeg få pengene tilbake for dette gavekortet?» Leses nesten likt og trenger et annet svar, fordi gavekort gir tilgodelapp, ikke kontanter.
Alt som svarer ut fra likhet, behandler de to som én. Den andre kunden får refusjonspolicyen, levert med samme selvsikkerhet som den første, og ingenting slår alarm, fordi ingenting så feil ut. Et riktig svar som kommer sakte, koster deg et minutt. Et selvsikkert feil svar går ut med navnet ditt på, og du hører om det gjennom klagen, eller du hører aldri om det i det hele tatt.
Duplex vet hva den vet. Den svarer på det den har lært, uansett hvordan forespørselen er formulert, og den kan se når en forespørsel bare ser kjent ut. Den forespørselen går til KI-en din, orientert med det Duplex vet om saken. Grensen mellom de to er der risikoen ligger, og Duplex trekker den langt skarpere enn en cache.
En forespørsel Duplex har lært, besvares straks.
Dobbeltgjengere er det vanskelige tilfellet.
Forespørsler finnes i flere varianter enn kjent og ny. Noen gjentar en sak teamet ditt har avgjort, ord for ord. Noen er den samme saken med nye ord: «Jeg vil gjerne ha refusjon for dette, takk.» Noen ser bare kjente ut, som gavekortet: samme emne, de fleste av de samme ordene og én forskjell som endrer svaret. Lenger ute ligger forespørsler som åpenbart er nye, som en refusjon for en ordre som er delt i to, og noen fra et helt annet felt.
De to ytterpunktene er enkle. En nøyaktig gjentakelse kan besvares slik den ble avgjort før, og en forespørsel fra et annet felt er lett å legge til side. Risikoen ligger i midten, der en forespørsel er nær nok til å gå for kjent og forskjellig nok til at det gamle svaret er feil. Den midten betyr mer for hvert år, fordi flere svar nå blir direkte til handlinger: når en agent handler på en dobbeltgjenger, blir det gale svaret en gal refusjon, og ingen leser det først.
De vanlige verktøyene gjør hver sin del av jobben godt. En håndskrevet regel er presis om det den navngir: den fanger opp «gavekort» og bommer på «gavebevis». En cache svarer på en nøyaktig gjentakelse umiddelbart, nesten gratis. Gjenfinning går lenger og finner det som ligner, noe som gir KI-en din nyttig kontekst. Alle tre går etter overflaten av en forespørsel, så dobbeltgjengeren får det gamle svaret, servert med samme selvsikkerhet som den ekte gjentakelsen.
Duplex lærer hva en beslutning avhenger av, i tillegg til ordene den kom i. Så den svarer på den samme forespørselen med nye ord, og den merker når en forespørsel som ser kjent ut, skiller seg ut på den måten som betyr noe. «Jeg vil gjerne ha refusjon for dette, takk» besvares med en gang, og gavekortet går til KI-en din. På en skala opp til 1 for å skille kjent fra nytt nådde Duplex 0.996 og en cache 0.930, en forskjell som ser liten ut til du ser hvor den faller: på dobbeltgjengerne.
Kjente forespørsler på den ene siden, nye på den andre: den som svarer, må skille dem fra hverandre.
Færre gale svar, fordi den overleverer det som er nytt.
Hjernen arbeider med to systemer: et langsomt for generell kunnskap og et raskt for hver ny erfaring. KI-en din er det langsomme, og Duplex er det raske. Paret fungerer bare hvis det raske vet hvor kunnskapen dets slutter. En forespørsel Duplex har lært, besvares med en gang, uten modellkall. En forespørsel som er ny, eller bare ser kjent ut, går til KI-en din, orientert med det Duplex vet om saken, så modellen starter fra konteksten til teamet ditt i stedet for fra ingenting.
Over ti kjøringer tok Duplex feil på 7.5% av villedende dobbeltgjengere. En cache tok feil 45.3% av gangene på de samme forespørslene, omtrent seks ganger så ofte. Og Duplex kjøpte ikke den sikkerheten ved å avvise arbeid: den besvarte 95.78% av de kjente forespørslene selv, og ved hver konfidensinnstilling håndterte den mer av det kjente arbeidet og gjorde færre utrygge gjetninger på nytt arbeid.
Regn en riktig overlevering til KI-en din som det den er, det riktige valget, og Duplex håndterte 98.98% av alle forespørsler riktig. I produksjon er det tallet du skal følge med på: hvor ofte hver forespørsel havner hos den som bør svare på den, i stedet for hvor ofte et system er villig til å svare. Et system som svarer på alt, skårer godt på villighet og dårlig på tillit.
Det endrer hvor langt du kan la den gå. Et system som gjetter, må overvåkes på alt, fordi ethvert svar kan være det gale. Et system som kjenner grensene sine, kan få det kjente arbeidet overlatt helt, mens KI-en din tar det som er nytt. Det er forskjellen mellom en nyansatt der du kontrollerer hvert svar, og en kollega du stoler på med rutinen, som sjekker med deg når en sak er ukjent.
Og grensen flytter seg. Hvert resultat teamet ditt bekrefter i en ny sak, lærer Duplex den saken, så neste lignende forespørsel besvares på denne siden av grensen, på millisekunder. KI-en din beholder arbeidet den gjør best, det nye og det vanskelige, og færre selvsikre gale svar går ut med navnet ditt på. Et system som vet hva det vet, kan betros litt mer for hver uke.
På villedende dobbeltgjengere ga en cache det lagrede svaret og tok feil 45.3% av gangene.