Disclaimer

Vareon heeft elke test achter de resultaten op deze website uitgevoerd, de resultaten geanalyseerd en de rapporten geschreven. Dat maakt elk van die tests een interne benchmark, ook de tests die een openbare benchmark gebruiken.

Geen enkel resultaat is door een derde onafhankelijk geverifieerd, geaudit of gereproduceerd, en geen ervan is gecertificeerd door een normalisatie-instelling of een testlaboratorium.

Een cijfer beschrijft de test waaruit het komt: het werk, het model, de instellingen, waarmee het is vergeleken en het aantal runs. De pagina van elk resultaat zet ze uiteen onder “Hoe het is uitgevoerd”. Bekijk de resultaten

Een resultaat uit één test geldt niet voor een andere workload, een ander model, een andere dataset of omgeving. Op je eigen werk kunnen de cijfers hoger of lager uitvallen.

Sommige tests gebruiken benchmarks en datasets die anderen hebben gebouwd en gepubliceerd: Τ-bench van Sierra Research, LongMemEval van Wu et al., World of Workflows van Skyfall Research op ServiceNow, en drie openbare datasets voor intentherkenning. Vareon heeft deze tests zelf uitgevoerd, onder de omstandigheden die het rapporteert.

De auteurs ervan hebben de resultaten van Vareon niet beoordeeld, geverifieerd of onderschreven. Waar een resultaat wordt afgezet tegen werk dat anderen hebben gepubliceerd, zoals de voorspellingen van de frontiermodellen op World of Workflows, heeft Vareon die vergelijking zelf gemaakt.

Resultaten beschrijven wat er in de tests gebeurde. Ze zijn geen garantie, prognose, certificering of toezegging over serviceniveaus, en ze vormen geen aanbod. Wat een implementatie naar verwachting oplevert, wordt voor die implementatie schriftelijk overeengekomen.

De zekerste manier om te weten wat Duplex in je werk doet, is het daar te meten. Een pilot draait op je eigen werk en rapporteert zijn eigen cijfers. Hoe een pilot werkt

GPT, Gemini, Claude, ServiceNow en de andere modellen, producten en benchmarks die op deze website worden genoemd, behoren toe aan hun eigenaren. Een naam geeft aan wat er is getest of vergeleken, en betekent niet dat de eigenaar ervan de resultaten van Vareon sponsort, onderschrijft of heeft beoordeeld.

Vareon kan een test opnieuw uitvoeren, een resultaat corrigeren of het intrekken. De datum hierboven toont de laatste herziening van deze pagina.

Gebruik voor een vraag over een resultaat of over hoe het is getest de Contactpagina.