Preferenze complessive sul testo da confronti diretti. Non misura accuratezza fattuale o riuscita dei compiti.
12401270
Claude Haiku 3.5
claude-3-5-haiku-20241022 · Intervallo 95% 1252,2–1258,6 · 69,061 voti · 2026-10-15
Prestazioni dei modelli
Punteggio Radar: quattro test, peso uguale. Una sintesi sperimentale di queste prove, non una misura universale di intelligenza.
Claude Haiku 3.5
Punteggio Radar
/ 100
1/4 test principali · prove insufficienti
1 risultati di benchmark per questa configurazione
Ragionamento scientifico
GPQA Diamond · 25%
Domande scientifiche di esperti; correzione rigorosa a scelta multipla. Il caso vale il 25%.
050100%
Claude Haiku 3.538,1*%Intervallo 95% appross.: 33,0–43,3% · Risultato datato
Soluzione di problemi nuovi
Mystery Game Puzzles · 25%
Scelta della mossa migliore in una variante di gioco non divulgata. Una prova circoscritta di ragionamento, non di intelligenza generale.
050100%
Claude Haiku 3.5Non disponibile
Matematica avanzata
FrontierMath Tiers 1-3 · 25%
Problemi matematici privati v2 con strumenti Python. Esclusi versioni precedenti e Tier 4.
050100%
Claude Haiku 3.5Non disponibile
Risposte fattuali
SimpleQA Verified · 25%
Risposte fattuali corrette con invito a tentare, valutate da un modello. Non misura allucinazioni o astensione.
050100%
Claude Haiku 3.5Non disponibile
Le barre mostrano i risultati delle prove. I segmenti indicano intervalli approssimativi al 95% quando è disponibile l’errore standard. Budget di ragionamento diversi non implicano costi uguali. I risultati mancanti non valgono zero.
Risultati registrati
Ogni riga usa lo stesso benchmark, versione, carico, scenario e unità. I risultati mancanti non valgono zero. I risultati di sistema includono tutta la configurazione hardware e software.
Arena text preference / chinesehuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.228,72 rating
Intervallo di confidenza: 1.219,41 – 1.238,02
4659 voti
Categoria
chinese
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / codinghuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.286,18 rating
Intervallo di confidenza: 1.280,23 – 1.292,14
11143 voti
Categoria
coding
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / creative_writinghuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.232,44 rating
Intervallo di confidenza: 1.226,01 – 1.238,88
9836 voti
Categoria
creative_writing
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / englishhuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.267,48 rating
Intervallo di confidenza: 1.263,43 – 1.271,53
35506 voti
Categoria
english
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / exclude_tieshuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.171,09 rating
Intervallo di confidenza: 1.166,43 – 1.175,75
48599 voti
Categoria
exclude_ties
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / experthuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.207,62 rating
Intervallo di confidenza: 1.197,10 – 1.218,14
3526 voti
Categoria
expert
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / frenchhuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.263,52 rating
Intervallo di confidenza: 1.241,59 – 1.285,46
838 voti
Categoria
french
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / germanhuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.236,81 rating
Intervallo di confidenza: 1.221,79 – 1.251,84
1739 voti
Categoria
german
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / hard_promptshuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.250,82 rating
Intervallo di confidenza: 1.246,23 – 1.255,41
23545 voti
Categoria
hard_prompts
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / hard_prompts_englishhuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.264,21 rating
Intervallo di confidenza: 1.258,39 – 1.270,04
12328 voti
Categoria
hard_prompts_english
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / industry_business_and_management_and_financial_operationshuman preference · 2026-10-15 · rating
Arena text preference / industry_entertainment_and_sports_and_mediahuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.223,94 rating
Intervallo di confidenza: 1.218,14 – 1.229,73
12382 voti
Categoria
industry_entertainment_and_sports_and_media
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / industry_legal_and_governmenthuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.258,43 rating
Intervallo di confidenza: 1.248,65 – 1.268,21
4229 voti
Categoria
industry_legal_and_government
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / industry_life_and_physical_and_social_sciencehuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.246,99 rating
Intervallo di confidenza: 1.240,82 – 1.253,16
11848 voti
Categoria
industry_life_and_physical_and_social_science
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / industry_mathematicalhuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.248,83 rating
Intervallo di confidenza: 1.240,85 – 1.256,82
5757 voti
Categoria
industry_mathematical
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / industry_medicine_and_healthcarehuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.227,41 rating
Intervallo di confidenza: 1.216,54 – 1.238,29
3640 voti
Categoria
industry_medicine_and_healthcare
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / industry_software_and_it_serviceshuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.272,29 rating
Intervallo di confidenza: 1.267,37 – 1.277,22
19602 voti
Categoria
industry_software_and_it_services
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / industry_writing_and_literature_and_languagehuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.256,38 rating
Intervallo di confidenza: 1.251,23 – 1.261,52
16811 voti
Categoria
industry_writing_and_literature_and_language
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / instruction_followinghuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.240,49 rating
Intervallo di confidenza: 1.235,84 – 1.245,14
21925 voti
Categoria
instruction_following
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / japanesehuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.174,96 rating
Intervallo di confidenza: 1.158,69 – 1.191,24
1546 voti
Categoria
japanese
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / koreanhuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.173,09 rating
Intervallo di confidenza: 1.154,48 – 1.191,71
1211 voti
Categoria
korean
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / longer_queryhuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.260,35 rating
Intervallo di confidenza: 1.254,29 – 1.266,41
10962 voti
Categoria
longer_query
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / mathhuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.243,83 rating
Intervallo di confidenza: 1.236,32 – 1.251,34
6334 voti
Categoria
math
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / multi_turnhuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.265,07 rating
Intervallo di confidenza: 1.258,86 – 1.271,28
11176 voti
Categoria
multi_turn
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / non_englishhuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.237,85 rating
Intervallo di confidenza: 1.233,76 – 1.241,93
33547 voti
Categoria
non_english
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / overallhuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.255,38 rating
Intervallo di confidenza: 1.252,15 – 1.258,61
69061 voti
Categoria
overall
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / polishhuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.249,47 rating
Intervallo di confidenza: 1.236,80 – 1.262,14
2717 voti
Categoria
polish
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / russianhuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.252,78 rating
Intervallo di confidenza: 1.245,33 – 1.260,22
6652 voti
Categoria
russian
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Arena text preference / spanishhuman preference · 2026-10-15 · rating
Claude Haiku 3.5
1.261,18 rating
Intervallo di confidenza: 1.241,22 – 1.281,14
963 voti
Categoria
spanish
Configurazione valutata
claude-3-5-haiku-20241022
Tipo di valutazione
human preference
Esecuzione locale
Inferenza · stima della memoria
Claude Haiku 3.5
Pesi chiusi. Non sono pubblicati un impiego locale supportato o requisiti GPU.
Costo API
USD / mese
Stima per token di testo standard. Esclude imposte, cache, sconti batch e costi aggiuntivi per ragionamento e modalità multimediali. Limiti e disponibilità possono variare per provider.