Preferenze complessive sul testo da confronti diretti. Non misura accuratezza fattuale o riuscita dei compiti.
13801410
Qwen3.5 35B-A3B
Qwen3.5-35B-A3B · Intervallo 95% 1390,3–1398,7 · 30,427 voti · 2026-10-28
Risultati dei benchmark
AI2D_TEST · versione non riportata · reported score92,60*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
AIME26 · versione non riportata · reported score · Full AIME 2026 I and II91*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
Task set
Full AIME 2026 I and II*
C-Eval · versione non riportata · reported score90,20*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
CC-OCR · versione non riportata · reported score80,70*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
CharXiv(RQ) · versione non riportata · reported score77,50*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
Claw-Eval Avg · versione non riportata · reported score65,40*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
Claw-Eval Pass^3 · versione non riportata · reported score51*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
DeepPlanning · versione non riportata · reported score22,80*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
EmbSpatialBench · versione non riportata · reported score83,10*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
GPQA · versione non riportata · reported score84,20*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
HallusionBench · versione non riportata · reported score67,90*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
HLE · versione non riportata · reported score22,40*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
HMMT Feb 25 · versione non riportata · reported score89*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
HMMT Feb 26 · versione non riportata · reported score78,70*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
HMMT Nov 25 · versione non riportata · reported score89,20*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
IMOAnswerBench · versione non riportata · reported score76,80*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
LiveCodeBench v6 · 6 · reported score74,60*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
LVBench · versione non riportata · reported score71,40*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
Mathvista(mini) · versione non riportata · reported score86,20*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
MCP-Atlas · versione non riportata · reported score · Public set62,40*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
Judge
gemini-2.5-pro*
Task set
Public set*
MCPMark · versione non riportata · reported score · GitHub MCP v0.30.327*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
Harness
GitHub MCP v0.30.3*
Truncation
Playwright responses at 32K tokens*
MLVU · versione non riportata · reported score85,60*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
MMBench EN-DEV-v1.1 · 1.1 · reported score91,50*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
MMLU-Pro · versione non riportata · reported score85,30*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
MMLU-Redux · versione non riportata · reported score93,30*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
MMMU · versione non riportata · reported score81,40*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
MMMU-Pro · versione non riportata · reported score75,10*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
MVBench · versione non riportata · reported score74,80*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
NL2Repo · versione non riportata · reported score · Claude Code20,50*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
Harness
Claude Code*
Variant
Maximum 900 turns*
Temperature
1,0*
Top p
0,95*
ODInW13 · versione non riportata · reported score42,60*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
OmniDocBench1.5 · 1.5 · reported score89,30*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
QwenClawBench · versione non riportata · reported score · Internal real-user distribution47,70*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
Task set
Internal real-user distribution*
Temperature
0,6*
Context length
256K tokens*
QwenWebBench · versione non riportata · reported score · Internal978* EloPiattaforma non riportata Confronta i risultatiCondizioni di test
Metric
BT/Elo rating*
Checkpoint version
Not specified*
Languages
English and Chinese*
Categories
Seven frontend application categories*
Judge
Multimodal automatic judge*
Task set
Internal*
RealWorldQA · versione non riportata · reported score84,10*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
RefCOCO(avg) · versione non riportata · reported score89,20*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
RefSpatialBench · versione non riportata · reported score63,50*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
SimpleVQA · versione non riportata · reported score58,30*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
SkillsBench Avg5 · versione non riportata · reported score · OpenCode · Self-contained subset, API-dependent tasks excluded · Mean of five runs4,40*Piattaforma non riportata Confronta i risultatiCondizioni di test
SuperGPQA · versione non riportata · reported score63,40*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
SWE-bench Multilingual · versione non riportata · reported score · Internal agent scaffold: bash and file editing · Public benchmark60,30*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
Harness
Internal agent scaffold: bash and file editing*
Temperature
1,0*
Top p
0,95*
Context length
200K tokens*
Task set
Public benchmark*
SWE-bench Pro · versione non riportata · reported score · Internal agent scaffold: bash and file editing · Corrected public SWE-bench Pro task set44,60*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
Harness
Internal agent scaffold: bash and file editing*
Temperature
1,0*
Top p
0,95*
Context length
200K tokens*
Task set
Corrected public SWE-bench Pro task set*
SWE-bench Verified · versione non riportata · reported score · Internal agent scaffold: bash and file editing · Public benchmark70*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
Harness
Internal agent scaffold: bash and file editing*
Temperature
1,0*
Top p
0,95*
Context length
200K tokens*
Task set
Public benchmark*
TAU3-Bench · versione non riportata · reported score68,90*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
User model
gpt-5.2, low reasoning effort*
Retrieval
Default BM25*
Terminal-Bench 2.0 · 2.0 · reported score · Harbor/Terminus-2 · Mean of five runs40,50*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
Harness
Harbor/Terminus-2*
Timeout
3 hours*
Hardware
32 CPU / 48 GB RAM*
Runs
5*
Statistic
Mean of five runs*
Temperature
1,0*
Top p
0,95*
Top k
20*
Maximum output
80K tokens*
Context length
256K tokens*
Tool Decathlon · versione non riportata · reported score28,70*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
VideoMME (w sub.) · versione non riportata · reported score86,60*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
Variant
Subtitles enabled*
VideoMME (w/o sub.) · versione non riportata · reported score82,50*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
Variant
Subtitles disabled*
VideoMMMU · versione non riportata · reported score80,40*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
VITA-Bench · versione non riportata · reported score · Average subdomain score29,10*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
Judge
claude-4-sonnet*
Statistic
Average subdomain score*
WideSearch · versione non riportata · reported score59,10*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
ZEROBench_sub · versione non riportata · reported score34,10*Piattaforma non riportata Confronta i risultatiCondizioni di test
Metric
reported score*
Checkpoint version
Not specified*
Risultati registrati
Ogni riga usa lo stesso benchmark, versione, carico, scenario e unità. I risultati mancanti non valgono zero. I risultati di sistema includono tutta la configurazione hardware e software.
Arena text preference / chinesehuman preference · 2026-10-28 · rating
Qwen3.5 35B-A3B
1.456,13 rating
Intervallo di confidenza: 1.443,11 – 1.469,14
2085 voti
Categoria
chinese
Configurazione valutata
Qwen3.5-35B-A3B
Tipo di valutazione
human preference
Arena text preference / codinghuman preference · 2026-10-28 · rating
Qwen3.5 35B-A3B
1.409,70 rating
Intervallo di confidenza: 1.402,68 – 1.416,71
8382 voti
Categoria
coding
Configurazione valutata
Qwen3.5-35B-A3B
Tipo di valutazione
human preference
Arena text preference / creative_writinghuman preference · 2026-10-28 · rating
Qwen3.5 35B-A3B
1.347,45 rating
Intervallo di confidenza: 1.338,51 – 1.356,40
4672 voti
Categoria
creative_writing
Configurazione valutata
Qwen3.5-35B-A3B
Tipo di valutazione
human preference
Arena text preference / englishhuman preference · 2026-10-28 · rating
Qwen3.5 35B-A3B
1.406,71 rating
Intervallo di confidenza: 1.400,97 – 1.412,45
13554 voti
Categoria
english
Configurazione valutata
Qwen3.5-35B-A3B
Tipo di valutazione
human preference
Arena text preference / exclude_tieshuman preference · 2026-10-28 · rating
Qwen3.5 35B-A3B
1.373,14 rating
Intervallo di confidenza: 1.367,38 – 1.378,89
22179 voti
Categoria
exclude_ties
Configurazione valutata
Qwen3.5-35B-A3B
Tipo di valutazione
human preference
Arena text preference / experthuman preference · 2026-10-28 · rating
Qwen3.5 35B-A3B
1.407,14 rating
Intervallo di confidenza: 1.395,94 – 1.418,34
2795 voti
Categoria
expert
Configurazione valutata
Qwen3.5-35B-A3B
Tipo di valutazione
human preference
Arena text preference / frenchhuman preference · 2026-10-28 · rating
Qwen3.5 35B-A3B
1.413,45 rating
Intervallo di confidenza: 1.392,63 – 1.434,27
881 voti
Categoria
french
Configurazione valutata
Qwen3.5-35B-A3B
Tipo di valutazione
human preference
Arena text preference / germanhuman preference · 2026-10-28 · rating
Qwen3.5 35B-A3B
1.368,57 rating
Intervallo di confidenza: 1.343,28 – 1.393,86
486 voti
Categoria
german
Configurazione valutata
Qwen3.5-35B-A3B
Tipo di valutazione
human preference
Arena text preference / hard_promptshuman preference · 2026-10-28 · rating
Qwen3.5 35B-A3B
1.399,73 rating
Intervallo di confidenza: 1.394,62 – 1.404,85
19316 voti
Categoria
hard_prompts
Configurazione valutata
Qwen3.5-35B-A3B
Tipo di valutazione
human preference
Arena text preference / hard_prompts_englishhuman preference · 2026-10-28 · rating
Qwen3.5 35B-A3B
1.410,36 rating
Intervallo di confidenza: 1.403,51 – 1.417,21
8835 voti
Categoria
hard_prompts_english
Configurazione valutata
Qwen3.5-35B-A3B
Tipo di valutazione
human preference
Arena text preference / industry_business_and_management_and_financial_operationshuman preference · 2026-10-28 · rating
Arena text preference / industry_entertainment_and_sports_and_mediahuman preference · 2026-10-15 · rating
Qwen3.5 35B-A3B
1.347,28 rating
Intervallo di confidenza: 1.339,23 – 1.355,33
5953 voti
Categoria
industry_entertainment_and_sports_and_media
Configurazione valutata
qwen3.5-35b-a3b
Tipo di valutazione
human preference
Arena text preference / industry_legal_and_governmenthuman preference · 2026-10-15 · rating
Qwen3.5 35B-A3B
1.398,85 rating
Intervallo di confidenza: 1.386,52 – 1.411,19
2384 voti
Categoria
industry_legal_and_government
Configurazione valutata
qwen3.5-35b-a3b
Tipo di valutazione
human preference
Arena text preference / industry_life_and_physical_and_social_sciencehuman preference · 2026-10-15 · rating
Qwen3.5 35B-A3B
1.413,11 rating
Intervallo di confidenza: 1.404,67 – 1.421,54
5196 voti
Categoria
industry_life_and_physical_and_social_science
Configurazione valutata
qwen3.5-35b-a3b
Tipo di valutazione
human preference
Arena text preference / industry_mathematicalhuman preference · 2026-10-15 · rating
Qwen3.5 35B-A3B
1.410,32 rating
Intervallo di confidenza: 1.395,98 – 1.424,66
1727 voti
Categoria
industry_mathematical
Configurazione valutata
qwen3.5-35b-a3b
Tipo di valutazione
human preference
Arena text preference / industry_medicine_and_healthcarehuman preference · 2026-10-15 · rating
Qwen3.5 35B-A3B
1.421,29 rating
Intervallo di confidenza: 1.408,68 – 1.433,89
2284 voti
Categoria
industry_medicine_and_healthcare
Configurazione valutata
qwen3.5-35b-a3b
Tipo di valutazione
human preference
Arena text preference / industry_software_and_it_serviceshuman preference · 2026-10-15 · rating
Qwen3.5 35B-A3B
1.415,15 rating
Intervallo di confidenza: 1.409,13 – 1.421,18
12054 voti
Categoria
industry_software_and_it_services
Configurazione valutata
qwen3.5-35b-a3b
Tipo di valutazione
human preference
Arena text preference / industry_writing_and_literature_and_languagehuman preference · 2026-10-15 · rating
Qwen3.5 35B-A3B
1.365,22 rating
Intervallo di confidenza: 1.357,80 – 1.372,63
7053 voti
Categoria
industry_writing_and_literature_and_language
Configurazione valutata
qwen3.5-35b-a3b
Tipo di valutazione
human preference
Arena text preference / instruction_followinghuman preference · 2026-10-15 · rating
Qwen3.5 35B-A3B
1.379,47 rating
Intervallo di confidenza: 1.373,03 – 1.385,91
9934 voti
Categoria
instruction_following
Configurazione valutata
qwen3.5-35b-a3b
Tipo di valutazione
human preference
Arena text preference / japanesehuman preference · 2026-10-15 · rating
Qwen3.5 35B-A3B
1.325,55 rating
Intervallo di confidenza: 1.286,75 – 1.364,34
251 voti
Categoria
japanese
Configurazione valutata
qwen3.5-35b-a3b
Tipo di valutazione
human preference
Arena text preference / koreanhuman preference · 2026-10-15 · rating
Qwen3.5 35B-A3B
1.354,17 rating
Intervallo di confidenza: 1.326,78 – 1.381,56
484 voti
Categoria
korean
Configurazione valutata
qwen3.5-35b-a3b
Tipo di valutazione
human preference
Arena text preference / longer_queryhuman preference · 2026-10-15 · rating
Qwen3.5 35B-A3B
1.389,57 rating
Intervallo di confidenza: 1.383,32 – 1.395,81
11908 voti
Categoria
longer_query
Configurazione valutata
qwen3.5-35b-a3b
Tipo di valutazione
human preference
Arena text preference / mathhuman preference · 2026-10-15 · rating
Qwen3.5 35B-A3B
1.404,13 rating
Intervallo di confidenza: 1.390,48 – 1.417,78
1850 voti
Categoria
math
Configurazione valutata
qwen3.5-35b-a3b
Tipo di valutazione
human preference
Arena text preference / multi_turnhuman preference · 2026-10-15 · rating
Qwen3.5 35B-A3B
1.390,17 rating
Intervallo di confidenza: 1.381,79 – 1.398,56
5481 voti
Categoria
multi_turn
Configurazione valutata
qwen3.5-35b-a3b
Tipo di valutazione
human preference
Arena text preference / non_englishhuman preference · 2026-10-15 · rating
Qwen3.5 35B-A3B
1.378,42 rating
Intervallo di confidenza: 1.373,19 – 1.383,64
16889 voti
Categoria
non_english
Configurazione valutata
qwen3.5-35b-a3b
Tipo di valutazione
human preference
Arena text preference / overallhuman preference · 2026-10-15 · rating
Qwen3.5 35B-A3B
1.394,73 rating
Intervallo di confidenza: 1.390,53 – 1.398,94
30457 voti
Categoria
overall
Configurazione valutata
qwen3.5-35b-a3b
Tipo di valutazione
human preference
Arena text preference / polishhuman preference · 2026-10-15 · rating
Qwen3.5 35B-A3B
1.385,83 rating
Intervallo di confidenza: 1.362,86 – 1.408,80
585 voti
Categoria
polish
Configurazione valutata
qwen3.5-35b-a3b
Tipo di valutazione
human preference
Arena text preference / russianhuman preference · 2026-10-15 · rating
Qwen3.5 35B-A3B
1.377,02 rating
Intervallo di confidenza: 1.367,03 – 1.387,00
3630 voti
Categoria
russian
Configurazione valutata
qwen3.5-35b-a3b
Tipo di valutazione
human preference
Arena text preference / spanishhuman preference · 2026-10-15 · rating
Qwen3.5 35B-A3B
1.390,92 rating
Intervallo di confidenza: 1.371,71 – 1.410,13
1003 voti
Categoria
spanish
Configurazione valutata
qwen3.5-35b-a3b
Tipo di valutazione
human preference
Esecuzione locale
Inferenza · stima della memoria
Qwen3.5 35B-A3B
67,0 GiB di payload dei tensori del checkpoint · 35,95 B elementi dei tensori archiviati · BF16/F32
I tensori archiviati possono includere buffer e copie di pesi condivisi. Il numero di parametri unici non è verificato. Le dimensioni del checkpoint non indicano la memoria necessaria per eseguire il modello.
Costo API
USD / mese
Stima per token di testo standard. Esclude imposte, cache, sconti batch e costi aggiuntivi per ragionamento e modalità multimediali. Limiti e disponibilità possono variare per provider.