Preferenze complessive sul testo da confronti diretti. Non misura accuratezza fattuale o riuscita dei compiti.
13101360
Llama 3.3 Nemotron Super 49B v1.5
Llama 3.3 Nemotron Super 49B v1.5 · Intervallo 95% 1328,3–1348,3 · 3,324 voti · 2026-11-09
Risultati registrati
Ogni riga usa lo stesso benchmark, versione, carico, scenario e unità. I risultati mancanti non valgono zero. I risultati di sistema includono tutta la configurazione hardware e software.
Arena text preference / codinghuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.355,92 rating
Intervallo di confidenza: 1.334,03 – 1.377,82
652 voti
Categoria
coding
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / creative_writinghuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.306,81 rating
Intervallo di confidenza: 1.277,78 – 1.335,84
370 voti
Categoria
creative_writing
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / englishhuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.359,31 rating
Intervallo di confidenza: 1.344,28 – 1.374,34
1389 voti
Categoria
english
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / exclude_tieshuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.292,85 rating
Intervallo di confidenza: 1.278,23 – 1.307,46
2267 voti
Categoria
exclude_ties
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / experthuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.329,48 rating
Intervallo di confidenza: 1.288,74 – 1.370,22
180 voti
Categoria
expert
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / hard_promptshuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.335,74 rating
Intervallo di confidenza: 1.320,77 – 1.350,71
1435 voti
Categoria
hard_prompts
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / hard_prompts_englishhuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.343,95 rating
Intervallo di confidenza: 1.321,40 – 1.366,51
613 voti
Categoria
hard_prompts_english
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / industry_business_and_management_and_financial_operationshuman preference · 2026-11-09 · rating
Arena text preference / industry_entertainment_and_sports_and_mediahuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.282,85 rating
Intervallo di confidenza: 1.259,93 – 1.305,77
567 voti
Categoria
industry_entertainment_and_sports_and_media
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / industry_legal_and_governmenthuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.348,85 rating
Intervallo di confidenza: 1.311,30 – 1.386,41
231 voti
Categoria
industry_legal_and_government
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / industry_life_and_physical_and_social_sciencehuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.367,49 rating
Intervallo di confidenza: 1.344,44 – 1.390,54
593 voti
Categoria
industry_life_and_physical_and_social_science
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / industry_mathematicalhuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.397,85 rating
Intervallo di confidenza: 1.358,16 – 1.437,54
182 voti
Categoria
industry_mathematical
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / industry_medicine_and_healthcarehuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.367,24 rating
Intervallo di confidenza: 1.326,20 – 1.408,29
195 voti
Categoria
industry_medicine_and_healthcare
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / industry_software_and_it_serviceshuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.359,54 rating
Intervallo di confidenza: 1.342,96 – 1.376,12
1179 voti
Categoria
industry_software_and_it_services
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / industry_writing_and_literature_and_languagehuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.293,40 rating
Intervallo di confidenza: 1.271,51 – 1.315,28
665 voti
Categoria
industry_writing_and_literature_and_language
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / instruction_followinghuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.298,71 rating
Intervallo di confidenza: 1.278,94 – 1.318,47
807 voti
Categoria
instruction_following
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / japanesehuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.300,73 rating
Intervallo di confidenza: 1.271,05 – 1.330,41
418 voti
Categoria
japanese
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / longer_queryhuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.315,03 rating
Intervallo di confidenza: 1.293,56 – 1.336,50
653 voti
Categoria
longer_query
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / mathhuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.394,29 rating
Intervallo di confidenza: 1.355,66 – 1.432,93
193 voti
Categoria
math
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / multi_turnhuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.333,41 rating
Intervallo di confidenza: 1.309,39 – 1.357,44
560 voti
Categoria
multi_turn
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / non_englishhuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.315,59 rating
Intervallo di confidenza: 1.302,68 – 1.328,50
1935 voti
Categoria
non_english
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / overallhuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.338,27 rating
Intervallo di confidenza: 1.328,29 – 1.348,26
3324 voti
Categoria
overall
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / polishhuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.322,94 rating
Intervallo di confidenza: 1.294,06 – 1.351,82
397 voti
Categoria
polish
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Arena text preference / russianhuman preference · 2026-11-09 · rating
Llama 3.3 Nemotron Super 49B v1.5
1.332,06 rating
Intervallo di confidenza: 1.296,59 – 1.367,52
202 voti
Categoria
russian
Configurazione valutata
Llama 3.3 Nemotron Super 49B v1.5
Tipo di valutazione
human preference
Esecuzione locale
Inferenza · stima della memoria
Llama 3.3 Nemotron Super 49B v1.5
92,9 GiB di payload dei tensori del checkpoint · 49,87 B elementi dei tensori archiviati · BF16
I tensori archiviati possono includere buffer e copie di pesi condivisi. Il numero di parametri unici non è verificato. Le dimensioni del checkpoint non indicano la memoria necessaria per eseguire il modello.
Costo API
USD / mese
Stima per token di testo standard. Esclude imposte, cache, sconti batch e costi aggiuntivi per ragionamento e modalità multimediali. Limiti e disponibilità possono variare per provider.