Kommt mit neuen Formulierungen zurecht und erkennt die Doppelgänger.
Nachdem Duplex zehn Arten von Anfragen gelernt hatte, beantwortete es sie in jeder Formulierung und übergab fast alles Unbekannte an deine KI. Die Anfragen kamen auf sechs Stufen, von vertrauter Formulierung über Doppelgänger, die es täuschen sollten, bis zu Anfragen aus einem anderen Bereich.
- 7.5%Falsche Antworten auf Doppelgänger-AnfragenEin Cache 45.3%, etwa 6× mehr
- 98.98%Der Anfragen richtig behandelt: richtig beantwortet oder an deine KI übergebenDuplex beantwortete 95.78% der bekannten Anfragen selbst
- 0.996Wert für die Unterscheidung von Vertraut und Neu, maximal 1Ein Cache 0.930
Sechs Arten von Anfragen, von vertraut bis ganz neu.
Schritt 1 von 7: Wie zuvor
Doppelgänger gehen an deine KI.
Von je 100 Anfragen, die zwei gelernte vermischen: wie viele falsch beantwortet wurden.
Schritt 1 von 3: Ein Cache
Ein semantischer Cache antwortet mit dem Ähnlichsten, was er gespeichert hat, und liegt bei 45.3% der Doppelgänger falsch.
Es beantwortet, was es weiß, und gibt den Rest weiter.
Bekannte Arbeit beantwortet, neue weitergegeben, und wie gut jeder Ansatz sie auseinanderhält.
Schritt 1 von 3: Bekannte Fälle
Duplex beantwortete 95.78% der bekannten Anfragen selbst, ein Cache 86.44%.
Mehr von deiner Arbeit, ohne selbstsichere Fehler.
Das meiste, was jeder Ansatz selbst beantworten konnte, ohne einen einzigen selbstsicheren Fehler.
Schritt 1 von 2: Bekannte Fälle
Wenn kein selbstsicherer Fehler erlaubt ist, konnte Duplex 94.8% der bekannten Fälle selbst beantworten, ein Cache 59.8%.
Wie es durchgeführt wurde.
- Die Arbeit
- Zehn Anfragetypen aus Kundensupport und Banking, je 48 Beispielformulierungen.
- Sechs Stufen
- Formuliert wie zuvor, zu etwas Neuem, in einem neuen Satz, ein Doppelgänger aus zwei gelernten Anfragen, eine nie gelernte Art und eine andere Domäne.
- Bewertung
- Eine übergebene Anfrage gilt als erledigt; eine zu beantworten, die hätte übergeben werden sollen, gilt als Fehler.
- Umfang
- Ein Hauptlauf, dann zehn unabhängige Läufe in einem zweiten Aufbau.
- Verglichen mit
- Ein semantischer Cache und ein online feinabgestimmter Klassifikator, mit denselben Beispielen.
- Gleich gehalten
- Die Einstellung jedes Ansatzes nach derselben Regel auf einem separaten Validierungsset gewählt, nie auf dem Testset.
Was es für deine Arbeit bedeutet.
Günstige Antworten, denen du vertrauen kannst.
Duplex beantwortete 95.78% der bekannten Arbeit selbst und übergab fast jeden Doppelgänger an deine KI.
Auch neu formuliert bleibt es vertraute Arbeit.
Umformuliert, umgebaut oder zu neuen Details: Gelernte Anfragen wurden beantwortet, und zwar richtig.
Das Unbekannte geht an deine KI.
Neue Arten von Anfragen und andere Domänen wurden fast immer weitergegeben: 3.2% wurden trotzdem beantwortet.
Erlebe es mit deiner eigenen Arbeit.
Vom eigenen Assistenten bis zu jedem Agenten, den dein Unternehmen betreibt: Ein Pilotprojekt lässt Duplex mit deiner eigenen Arbeit laufen, und die Kennzahlen werden vereinbart, bevor es beginnt.