Ansvarsfriskrivning

Vareon körde varje test bakom resultaten på denna webbplats, analyserade resultaten och skrev rapporterna. Det gör vart och ett av dem till ett internt benchmarktest, inklusive de tester som använder ett offentligt benchmarktest.

Inget resultat har oberoende verifierats, granskats eller reproducerats av en tredje part, och inget har certifierats av ett standardiseringsorgan eller ett testlaboratorium.

En siffra beskriver det test den kommer från: arbetet, modellen, inställningarna, vad det jämfördes med och antalet körningar. Sidan för varje resultat redovisar dessa under ”Så genomfördes det”. Se resultaten

Ett resultat från ett test kan inte överföras till en annan arbetsbelastning, modell, datamängd eller miljö. I ditt eget arbete kan siffrorna bli högre eller lägre.

Vissa tester använder benchmarktester och datamängder som andra har byggt och publicerat: Τ-bench av Sierra Research, LongMemEval av Wu et al., World of Workflows av Skyfall Research på ServiceNow, och tre offentliga datamängder med avsikter. Vareon körde dessa tester på egen hand, under de förhållanden som företaget redovisar.

Deras författare har inte granskat, verifierat eller godkänt Vareons resultat. Där ett resultat ställs mot arbete som andra har publicerat, till exempel spetsmodellernas förutsägelser på World of Workflows, är jämförelsen Vareons egen.

Resultaten beskriver vad som hände i testerna. De utgör inte en garanti, prognos, certifiering eller ett åtagande om tjänstenivå, och de utgör inte heller något erbjudande. Vad en driftsättning förväntas uppnå avtalas skriftligen för den driftsättningen.

Det säkraste sättet att veta vad Duplex gör i ditt arbete är att mäta det just där. En pilot körs på ditt eget arbete och redovisar sina egna siffror. Så fungerar en pilot

GPT, Gemini, Claude, ServiceNow och de andra modeller, produkter och benchmarktester som nämns på denna webbplats tillhör sina ägare. Ett namn identifierar vad som testades eller jämfördes, och innebär inte att dess ägare sponsrar, godkänner eller har granskat Vareons resultat.

Vareon kan köra ett test igen, korrigera ett resultat eller dra tillbaka det. Datumet ovan visar den senaste revideringen av denna sida.

För en fråga om ett resultat eller om hur det testades, använd Kontaktsidan.