Scelta della mossa migliore in una variante di gioco non divulgata. Una prova circoscritta di ragionamento, non di intelligenza generale.
050100%
GPT-4o (2024-05-13)Non disponibile
Matematica avanzata
FrontierMath Tiers 1-3 · 25%
Problemi matematici privati v2 con strumenti Python. Esclusi versioni precedenti e Tier 4.
050100%
GPT-4o (2024-05-13)Non disponibile
Risposte fattuali
SimpleQA Verified · 25%
Risposte fattuali corrette con invito a tentare, valutate da un modello. Non misura allucinazioni o astensione.
050100%
GPT-4o (2024-05-13)Non disponibile
Le barre mostrano i risultati delle prove. I segmenti indicano intervalli approssimativi al 95% quando è disponibile l’errore standard. Budget di ragionamento diversi non implicano costi uguali. I risultati mancanti non valgono zero.
Risultati registrati
Ogni riga usa lo stesso benchmark, versione, carico, scenario e unità. I risultati mancanti non valgono zero. I risultati di sistema includono tutta la configurazione hardware e software.
Arena text preference / chinesehuman preference · 2026-10-28 · rating
GPT-4o (2024-05-13)
1.277,18 rating
Intervallo di confidenza: 1.268,51 – 1.285,85
11416 voti
Categoria
chinese
Configurazione valutata
GPT-4o (2024-05-13)
Tipo di valutazione
human preference
Arena text preference / codinghuman preference · 2026-10-28 · rating
GPT-4o (2024-05-13)
1.296,86 rating
Intervallo di confidenza: 1.290,45 – 1.303,26
19526 voti
Categoria
coding
Configurazione valutata
GPT-4o (2024-05-13)
Tipo di valutazione
human preference
Arena text preference / creative_writinghuman preference · 2026-10-28 · rating
GPT-4o (2024-05-13)
1.291,15 rating
Intervallo di confidenza: 1.284,06 – 1.298,25
16599 voti
Categoria
creative_writing
Configurazione valutata
GPT-4o (2024-05-13)
Tipo di valutazione
human preference
Arena text preference / englishhuman preference · 2026-10-28 · rating
GPT-4o (2024-05-13)
1.312,35 rating
Intervallo di confidenza: 1.307,76 – 1.316,94
60226 voti
Categoria
english
Configurazione valutata
GPT-4o (2024-05-13)
Tipo di valutazione
human preference
Arena text preference / exclude_tieshuman preference · 2026-10-28 · rating
GPT-4o (2024-05-13)
1.238,14 rating
Intervallo di confidenza: 1.232,70 – 1.243,58
74322 voti
Categoria
exclude_ties
Configurazione valutata
GPT-4o (2024-05-13)
Tipo di valutazione
human preference
Arena text preference / experthuman preference · 2026-10-28 · rating
GPT-4o (2024-05-13)
1.249,76 rating
Intervallo di confidenza: 1.239,60 – 1.259,91
5887 voti
Categoria
expert
Configurazione valutata
GPT-4o (2024-05-13)
Tipo di valutazione
human preference
Arena text preference / frenchhuman preference · 2026-10-28 · rating
GPT-4o (2024-05-13)
1.304,44 rating
Intervallo di confidenza: 1.283,34 – 1.325,54
1359 voti
Categoria
french
Configurazione valutata
GPT-4o (2024-05-13)
Tipo di valutazione
human preference
Arena text preference / germanhuman preference · 2026-10-28 · rating
GPT-4o (2024-05-13)
1.282,44 rating
Intervallo di confidenza: 1.268,76 – 1.296,12
3573 voti
Categoria
german
Configurazione valutata
GPT-4o (2024-05-13)
Tipo di valutazione
human preference
Arena text preference / hard_promptshuman preference · 2026-10-28 · rating
GPT-4o (2024-05-13)
1.280,67 rating
Intervallo di confidenza: 1.275,33 – 1.286,02
32416 voti
Categoria
hard_prompts
Configurazione valutata
GPT-4o (2024-05-13)
Tipo di valutazione
human preference
Arena text preference / hard_prompts_englishhuman preference · 2026-10-28 · rating
GPT-4o (2024-05-13)
1.292,64 rating
Intervallo di confidenza: 1.286,26 – 1.299,02
19579 voti
Categoria
hard_prompts_english
Configurazione valutata
GPT-4o (2024-05-13)
Tipo di valutazione
human preference
Arena text preference / industry_business_and_management_and_financial_operationshuman preference · 2026-10-28 · rating
Arena text preference / industry_entertainment_and_sports_and_mediahuman preference · 2026-10-15 · rating
GPT-4o (2024-05-13)
1.289,45 rating
Intervallo di confidenza: 1.282,64 – 1.296,26
17607 voti
Categoria
industry_entertainment_and_sports_and_media
Configurazione valutata
gpt-4o-2024-05-13
Tipo di valutazione
human preference
Arena text preference / industry_legal_and_governmenthuman preference · 2026-10-15 · rating
GPT-4o (2024-05-13)
1.313,49 rating
Intervallo di confidenza: 1.303,41 – 1.323,58
6743 voti
Categoria
industry_legal_and_government
Configurazione valutata
gpt-4o-2024-05-13
Tipo di valutazione
human preference
Arena text preference / industry_life_and_physical_and_social_sciencehuman preference · 2026-10-15 · rating
GPT-4o (2024-05-13)
1.294,83 rating
Intervallo di confidenza: 1.288,12 – 1.301,54
19017 voti
Categoria
industry_life_and_physical_and_social_science
Configurazione valutata
gpt-4o-2024-05-13
Tipo di valutazione
human preference
Arena text preference / industry_mathematicalhuman preference · 2026-10-15 · rating
GPT-4o (2024-05-13)
1.284,26 rating
Intervallo di confidenza: 1.276,98 – 1.291,54
13306 voti
Categoria
industry_mathematical
Configurazione valutata
gpt-4o-2024-05-13
Tipo di valutazione
human preference
Arena text preference / industry_medicine_and_healthcarehuman preference · 2026-10-15 · rating
GPT-4o (2024-05-13)
1.277,94 rating
Intervallo di confidenza: 1.267,23 – 1.288,65
5984 voti
Categoria
industry_medicine_and_healthcare
Configurazione valutata
gpt-4o-2024-05-13
Tipo di valutazione
human preference
Arena text preference / industry_software_and_it_serviceshuman preference · 2026-10-15 · rating
GPT-4o (2024-05-13)
1.297,24 rating
Intervallo di confidenza: 1.291,67 – 1.302,80
31401 voti
Categoria
industry_software_and_it_services
Configurazione valutata
gpt-4o-2024-05-13
Tipo di valutazione
human preference
Arena text preference / industry_writing_and_literature_and_languagehuman preference · 2026-10-15 · rating
GPT-4o (2024-05-13)
1.297,75 rating
Intervallo di confidenza: 1.291,90 – 1.303,59
29959 voti
Categoria
industry_writing_and_literature_and_language
Configurazione valutata
gpt-4o-2024-05-13
Tipo di valutazione
human preference
Arena text preference / instruction_followinghuman preference · 2026-10-15 · rating
GPT-4o (2024-05-13)
1.277,51 rating
Intervallo di confidenza: 1.272,52 – 1.282,51
43766 voti
Categoria
instruction_following
Configurazione valutata
gpt-4o-2024-05-13
Tipo di valutazione
human preference
Arena text preference / japanesehuman preference · 2026-10-15 · rating
GPT-4o (2024-05-13)
1.256,70 rating
Intervallo di confidenza: 1.241,32 – 1.272,07
2674 voti
Categoria
japanese
Configurazione valutata
gpt-4o-2024-05-13
Tipo di valutazione
human preference
Arena text preference / koreanhuman preference · 2026-10-15 · rating
GPT-4o (2024-05-13)
1.233,85 rating
Intervallo di confidenza: 1.216,41 – 1.251,29
3517 voti
Categoria
korean
Configurazione valutata
gpt-4o-2024-05-13
Tipo di valutazione
human preference
Arena text preference / longer_queryhuman preference · 2026-10-15 · rating
GPT-4o (2024-05-13)
1.288,33 rating
Intervallo di confidenza: 1.281,44 – 1.295,21
14922 voti
Categoria
longer_query
Configurazione valutata
gpt-4o-2024-05-13
Tipo di valutazione
human preference
Arena text preference / mathhuman preference · 2026-10-15 · rating
GPT-4o (2024-05-13)
1.284,31 rating
Intervallo di confidenza: 1.277,41 – 1.291,20
15103 voti
Categoria
math
Configurazione valutata
gpt-4o-2024-05-13
Tipo di valutazione
human preference
Arena text preference / multi_turnhuman preference · 2026-10-15 · rating
GPT-4o (2024-05-13)
1.301,62 rating
Intervallo di confidenza: 1.294,96 – 1.308,28
20434 voti
Categoria
multi_turn
Configurazione valutata
gpt-4o-2024-05-13
Tipo di valutazione
human preference
Arena text preference / non_englishhuman preference · 2026-10-15 · rating
GPT-4o (2024-05-13)
1.282,76 rating
Intervallo di confidenza: 1.278,04 – 1.287,49
52655 voti
Categoria
non_english
Configurazione valutata
gpt-4o-2024-05-13
Tipo di valutazione
human preference
Arena text preference / overallhuman preference · 2026-10-15 · rating
GPT-4o (2024-05-13)
1.300,40 rating
Intervallo di confidenza: 1.296,96 – 1.303,83
112881 voti
Categoria
overall
Configurazione valutata
gpt-4o-2024-05-13
Tipo di valutazione
human preference
Arena text preference / polishhuman preference · 2026-10-15 · rating
GPT-4o (2024-05-13)
1.364,73 rating
Intervallo di confidenza: 1.307,93 – 1.421,52
166 voti
Categoria
polish
Configurazione valutata
gpt-4o-2024-05-13
Tipo di valutazione
human preference
Arena text preference / russianhuman preference · 2026-10-15 · rating
GPT-4o (2024-05-13)
1.285,51 rating
Intervallo di confidenza: 1.278,10 – 1.292,93
13904 voti
Categoria
russian
Configurazione valutata
gpt-4o-2024-05-13
Tipo di valutazione
human preference
Arena text preference / spanishhuman preference · 2026-10-15 · rating
GPT-4o (2024-05-13)
1.292,08 rating
Intervallo di confidenza: 1.271,87 – 1.312,29
1712 voti
Categoria
spanish
Configurazione valutata
gpt-4o-2024-05-13
Tipo di valutazione
human preference
Esecuzione locale
Inferenza · stima della memoria
GPT-4o (2024-05-13)
Pesi chiusi. Non sono pubblicati un impiego locale supportato o requisiti GPU.
Costo API
USD / mese
Stima per token di testo standard. Esclude imposte, cache, sconti batch e costi aggiuntivi per ragionamento e modalità multimediali. Limiti e disponibilità possono variare per provider.