Gère les nouvelles formulations, et repère les faux doublons.
Après avoir appris dix types de requêtes, Duplex y a répondu quelle que soit la formulation et a confié à votre IA presque tout ce qu’il ne connaissait pas. Les requêtes arrivaient à six niveaux, de la formulation familière aux faux doublons conçus pour le piéger et aux requêtes d’un autre domaine.
- 7.5%Mauvaises réponses sur les faux doublonsUn cache 45.3%, environ 6× plus
- 98.98%Des requêtes traitées correctement : bonne réponse, ou confiées à votre IADuplex a traité lui-même 95.78% des requêtes connues
- 0.996Score de distinction entre familier et nouveau, sur 1Un cache 0.930
Six types de requêtes, du familier au tout nouveau.
Étape 1 sur 7 : Comme avant
Les faux doublons vont à votre IA.
Sur 100 requêtes mêlant deux requêtes apprises, combien ont reçu une mauvaise réponse.
Étape 1 sur 3 : Un cache
Un cache sémantique répond avec ce qu’il a stocké de plus proche, et se trompe sur 45.3% des faux doublons.
Il répond à ce qu’il sait, et transmet le reste.
Le travail connu traité, le travail nouveau transmis, et la justesse avec laquelle chaque approche les distingue.
Étape 1 sur 3 : Travail connu
Duplex a répondu seul à 95.78% des requêtes connues, contre 86.44% pour un cache.
Davantage de votre travail, sans erreur commise avec assurance.
Le maximum que chaque approche a pu traiter elle-même sans commettre la moindre erreur avec assurance.
Étape 1 sur 2 : Travail connu
Sans jamais se tromper avec assurance, Duplex pouvait traiter seul 94.8% du travail connu, contre 59.8% pour un cache.
Comment il a été mené.
- Le travail
- Dix types de requêtes de support client et bancaires, 48 exemples de formulation chacun.
- Six niveaux
- Même formulation qu’avant, nouveau sujet, nouvelle phrase, faux doublon mêlant deux requêtes apprises, type jamais appris, et autre domaine.
- Notation
- Une requête transmise compte comme traitée ; répondre à une requête qui aurait dû être transmise compte comme une erreur.
- Échelle
- Une exécution principale, puis dix exécutions indépendantes dans un second dispositif.
- Comparé à
- Un cache sémantique et un classifieur fine-tuné en ligne, avec les mêmes exemples.
- Conditions égales
- Le réglage de chaque approche choisi sur un jeu de validation distinct selon la même règle, jamais sur le jeu de test.
Ce que cela signifie pour votre travail.
Des réponses bon marché auxquelles vous pouvez vous fier.
Duplex a traité lui-même 95.78% du travail connu, et a confié presque tous les faux doublons à votre IA.
Une nouvelle formulation reste un travail familier.
Reformulées, reconstruites ou portant sur de nouveaux détails, les requêtes apprises ont reçu une réponse, et la bonne.
L’inconnu va à votre IA.
Les nouveaux types de requêtes et les autres domaines ont été transmis presque à chaque fois : 3.2% ont tout de même reçu une réponse.
Voyez-le sur votre propre travail.
De votre propre assistant à chaque agent qu’exploite votre entreprise, un pilote fait tourner Duplex sur votre propre travail, avec des indicateurs convenus avant son lancement.