Preferenze complessive sul testo da confronti diretti. Non misura accuratezza fattuale o riuscita dei compiti.
12501310
Mercury
Mercury · Intervallo 95% 1268,3–1295,7 · 1,966 voti · 2026-10-28
Risultati registrati
Ogni riga usa lo stesso benchmark, versione, carico, scenario e unità. I risultati mancanti non valgono zero. I risultati di sistema includono tutta la configurazione hardware e software.
Arena text preference / codinghuman preference · 2026-10-28 · rating
Mercury
1.322,19 rating
Intervallo di confidenza: 1.294,29 – 1.350,09
413 voti
Categoria
coding
Configurazione valutata
Mercury
Tipo di valutazione
human preference
Arena text preference / creative_writinghuman preference · 2026-10-28 · rating
Mercury
1.188,97 rating
Intervallo di confidenza: 1.150,78 – 1.227,17
295 voti
Categoria
creative_writing
Configurazione valutata
Mercury
Tipo di valutazione
human preference
Arena text preference / englishhuman preference · 2026-10-28 · rating
Mercury
1.300,45 rating
Intervallo di confidenza: 1.279,88 – 1.321,01
855 voti
Categoria
english
Configurazione valutata
Mercury
Tipo di valutazione
human preference
Arena text preference / exclude_tieshuman preference · 2026-10-28 · rating
Mercury
1.212,09 rating
Intervallo di confidenza: 1.191,61 – 1.232,57
1429 voti
Categoria
exclude_ties
Configurazione valutata
Mercury
Tipo di valutazione
human preference
Arena text preference / hard_promptshuman preference · 2026-10-28 · rating
Mercury
1.285,02 rating
Intervallo di confidenza: 1.266,68 – 1.303,36
1053 voti
Categoria
hard_prompts
Configurazione valutata
Mercury
Tipo di valutazione
human preference
Arena text preference / hard_prompts_englishhuman preference · 2026-10-28 · rating
Mercury
1.307,97 rating
Intervallo di confidenza: 1.280,14 – 1.335,80
455 voti
Categoria
hard_prompts_english
Configurazione valutata
Mercury
Tipo di valutazione
human preference
Arena text preference / industry_business_and_management_and_financial_operationshuman preference · 2026-10-28 · rating