Preferenze complessive sul testo da confronti diretti. Non misura accuratezza fattuale o riuscita dei compiti.
12501290
Mistral Large 2407
mistral-large-2407 · Intervallo 95% 1262,2–1270,0 · 45,459 voti · 2026-10-15
Prestazioni dei modelli
Punteggio Radar: quattro test, peso uguale. Una sintesi sperimentale di queste prove, non una misura universale di intelligenza.
Mistral Large 2407
Punteggio Radar
/ 100
1/4 test principali · prove insufficienti
1 risultati di benchmark per questa configurazione
Ragionamento scientifico
GPQA Diamond · 25%
Domande scientifiche di esperti; correzione rigorosa a scelta multipla. Il caso vale il 25%.
050100%
Mistral Large 240749,0*%Intervallo 95% appross.: 43,9–54,1% · Risultato datato
Soluzione di problemi nuovi
Mystery Game Puzzles · 25%
Scelta della mossa migliore in una variante di gioco non divulgata. Una prova circoscritta di ragionamento, non di intelligenza generale.
050100%
Mistral Large 2407Non disponibile
Matematica avanzata
FrontierMath Tiers 1-3 · 25%
Problemi matematici privati v2 con strumenti Python. Esclusi versioni precedenti e Tier 4.
050100%
Mistral Large 2407Non disponibile
Risposte fattuali
SimpleQA Verified · 25%
Risposte fattuali corrette con invito a tentare, valutate da un modello. Non misura allucinazioni o astensione.
050100%
Mistral Large 2407Non disponibile
Le barre mostrano i risultati delle prove. I segmenti indicano intervalli approssimativi al 95% quando è disponibile l’errore standard. Budget di ragionamento diversi non implicano costi uguali. I risultati mancanti non valgono zero.
Risultati registrati
Ogni riga usa lo stesso benchmark, versione, carico, scenario e unità. I risultati mancanti non valgono zero. I risultati di sistema includono tutta la configurazione hardware e software.
Arena text preference / chinesehuman preference · 2026-10-15 · rating
Mistral Large 2407
1.240,34 rating
Intervallo di confidenza: 1.229,68 – 1.251,01
3933 voti
Categoria
chinese
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / codinghuman preference · 2026-10-15 · rating
Mistral Large 2407
1.276,45 rating
Intervallo di confidenza: 1.268,65 – 1.284,24
7589 voti
Categoria
coding
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / creative_writinghuman preference · 2026-10-15 · rating
Mistral Large 2407
1.242,68 rating
Intervallo di confidenza: 1.234,14 – 1.251,21
6692 voti
Categoria
creative_writing
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / englishhuman preference · 2026-10-15 · rating
Mistral Large 2407
1.288,94 rating
Intervallo di confidenza: 1.283,85 – 1.294,03
24863 voti
Categoria
english
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / exclude_tieshuman preference · 2026-10-15 · rating
Mistral Large 2407
1.185,38 rating
Intervallo di confidenza: 1.179,27 – 1.191,48
28276 voti
Categoria
exclude_ties
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / experthuman preference · 2026-10-15 · rating
Mistral Large 2407
1.231,98 rating
Intervallo di confidenza: 1.219,47 – 1.244,49
2505 voti
Categoria
expert
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / frenchhuman preference · 2026-10-15 · rating
Mistral Large 2407
1.273,02 rating
Intervallo di confidenza: 1.243,25 – 1.302,78
441 voti
Categoria
french
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / germanhuman preference · 2026-10-15 · rating
Mistral Large 2407
1.253,96 rating
Intervallo di confidenza: 1.236,18 – 1.271,74
1230 voti
Categoria
german
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / hard_promptshuman preference · 2026-10-15 · rating
Mistral Large 2407
1.256,34 rating
Intervallo di confidenza: 1.250,05 – 1.262,62
12682 voti
Categoria
hard_prompts
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / hard_prompts_englishhuman preference · 2026-10-15 · rating
Mistral Large 2407
1.268,97 rating
Intervallo di confidenza: 1.261,32 – 1.276,63
7818 voti
Categoria
hard_prompts_english
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / industry_business_and_management_and_financial_operationshuman preference · 2026-10-15 · rating
Arena text preference / industry_entertainment_and_sports_and_mediahuman preference · 2026-10-15 · rating
Mistral Large 2407
1.241,54 rating
Intervallo di confidenza: 1.233,37 – 1.249,72
7002 voti
Categoria
industry_entertainment_and_sports_and_media
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / industry_legal_and_governmenthuman preference · 2026-10-15 · rating
Mistral Large 2407
1.275,85 rating
Intervallo di confidenza: 1.263,52 – 1.288,18
2735 voti
Categoria
industry_legal_and_government
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / industry_life_and_physical_and_social_sciencehuman preference · 2026-10-15 · rating
Mistral Large 2407
1.266,16 rating
Intervallo di confidenza: 1.257,97 – 1.274,34
7485 voti
Categoria
industry_life_and_physical_and_social_science
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / industry_mathematicalhuman preference · 2026-10-15 · rating
Mistral Large 2407
1.265,36 rating
Intervallo di confidenza: 1.256,79 – 1.273,93
5745 voti
Categoria
industry_mathematical
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / industry_medicine_and_healthcarehuman preference · 2026-10-15 · rating
Mistral Large 2407
1.245,57 rating
Intervallo di confidenza: 1.232,18 – 1.258,96
2423 voti
Categoria
industry_medicine_and_healthcare
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / industry_software_and_it_serviceshuman preference · 2026-10-15 · rating
Mistral Large 2407
1.276,09 rating
Intervallo di confidenza: 1.269,44 – 1.282,73
12143 voti
Categoria
industry_software_and_it_services
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / industry_writing_and_literature_and_languagehuman preference · 2026-10-15 · rating
Mistral Large 2407
1.257,87 rating
Intervallo di confidenza: 1.251,06 – 1.264,69
12224 voti
Categoria
industry_writing_and_literature_and_language
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / instruction_followinghuman preference · 2026-10-15 · rating
Mistral Large 2407
1.247,65 rating
Intervallo di confidenza: 1.242,00 – 1.253,29
18321 voti
Categoria
instruction_following
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / japanesehuman preference · 2026-10-15 · rating
Mistral Large 2407
1.187,45 rating
Intervallo di confidenza: 1.169,50 – 1.205,39
1249 voti
Categoria
japanese
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / koreanhuman preference · 2026-10-15 · rating
Mistral Large 2407
1.170,03 rating
Intervallo di confidenza: 1.145,76 – 1.194,30
751 voti
Categoria
korean
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / longer_queryhuman preference · 2026-10-15 · rating
Mistral Large 2407
1.257,23 rating
Intervallo di confidenza: 1.248,62 – 1.265,84
5885 voti
Categoria
longer_query
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / mathhuman preference · 2026-10-15 · rating
Mistral Large 2407
1.261,44 rating
Intervallo di confidenza: 1.253,31 – 1.269,56
6664 voti
Categoria
math
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / multi_turnhuman preference · 2026-10-15 · rating
Mistral Large 2407
1.257,28 rating
Intervallo di confidenza: 1.249,36 – 1.265,20
8296 voti
Categoria
multi_turn
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / non_englishhuman preference · 2026-10-15 · rating
Mistral Large 2407
1.236,49 rating
Intervallo di confidenza: 1.231,20 – 1.241,77
20596 voti
Categoria
non_english
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / overallhuman preference · 2026-10-15 · rating
Mistral Large 2407
1.266,11 rating
Intervallo di confidenza: 1.262,20 – 1.270,01
45459 voti
Categoria
overall
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / russianhuman preference · 2026-10-15 · rating
Mistral Large 2407
1.256,86 rating
Intervallo di confidenza: 1.248,09 – 1.265,63
5748 voti
Categoria
russian
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Arena text preference / spanishhuman preference · 2026-10-15 · rating
Mistral Large 2407
1.236,23 rating
Intervallo di confidenza: 1.210,25 – 1.262,20
584 voti
Categoria
spanish
Configurazione valutata
mistral-large-2407
Tipo di valutazione
human preference
Esecuzione locale
Inferenza · stima della memoria
Mistral Large 2407
Informazioni verificate sull’architettura insufficienti per una stima affidabile della VRAM.
Costo API
USD / mese
Stima per token di testo standard. Esclude imposte, cache, sconti batch e costi aggiuntivi per ragionamento e modalità multimediali. Limiti e disponibilità possono variare per provider.