Avertissement

Vareon a mené tous les tests à l’origine des résultats figurant sur ce site, en a analysé les résultats et en a rédigé les rapports. Chacun de ces tests est donc un benchmark interne, y compris ceux qui utilisent un benchmark public.

Aucun résultat n’a été vérifié de manière indépendante, ni audité, ni reproduit par un tiers, et aucun n’a été certifié par un organisme de normalisation ni par un laboratoire d’essais.

Un chiffre décrit le test dont il est issu : le travail, le modèle, les réglages, ce à quoi il a été comparé et le nombre d’exécutions. La page de chaque résultat les détaille dans la rubrique « Comment il a été mené ». Voir les résultats

Le résultat d’un test ne se transpose pas à une autre charge de travail, à un autre modèle, à un autre jeu de données ni à un autre environnement. Sur votre propre travail, les chiffres peuvent être plus élevés ou plus faibles.

Certains tests utilisent des benchmarks et des jeux de données que d’autres ont construits et publiés : Τ-bench de Sierra Research, LongMemEval de Wu et al., World of Workflows de Skyfall Research sur ServiceNow, et trois corpus publics d’intentions. C’est Vareon qui a mené ces tests, dans les conditions décrites dans ses rapports.

Leurs auteurs n’ont ni examiné, ni vérifié, ni approuvé les résultats de Vareon. Lorsqu’un résultat est mis en regard de travaux publiés par d’autres, comme les prédictions des modèles de pointe sur World of Workflows, la comparaison est le fait de Vareon.

Les résultats décrivent ce qui s’est passé lors des tests. Ils ne constituent ni une garantie, ni une prévision, ni une certification, ni un engagement de niveau de service, et ne constituent pas non plus une offre. Ce que l’on attend d’un déploiement est convenu par écrit pour ce déploiement.

Le moyen le plus sûr de savoir ce que fait Duplex sur votre travail est de le mesurer sur ce travail même. Un pilote se déroule sur votre propre travail et fournit ses propres chiffres. Comment se déroule un pilote

GPT, Gemini, Claude, ServiceNow et les autres modèles, produits et benchmarks cités sur ce site appartiennent à leurs propriétaires. Un nom identifie ce qui a été testé ou comparé, et ne signifie pas que son propriétaire parraine ou approuve les résultats de Vareon, ni qu’il les a examinés.

Vareon peut refaire un test, corriger un résultat ou le retirer. La date ci-dessus indique la dernière révision de cette page.

Pour toute question sur un résultat ou sur la manière dont il a été testé, utilisez la Page de contact.