Preferenze complessive sul testo da confronti diretti. Non misura accuratezza fattuale o riuscita dei compiti.
890940
oasst-pythia-12b
oasst-pythia-12b · Intervallo 95% 905,3–926,7 · 6,310 voti · 2026-10-15
Risultati registrati
Ogni riga usa lo stesso benchmark, versione, carico, scenario e unità. I risultati mancanti non valgono zero. I risultati di sistema includono tutta la configurazione hardware e software.
Arena text preference / chinesehuman preference · 2026-10-15 · rating
oasst-pythia-12b
802,95 rating
Intervallo di confidenza: 770,34 – 835,56
321 voti
Categoria
chinese
Configurazione valutata
oasst-pythia-12b
Tipo di valutazione
human preference
Arena text preference / codinghuman preference · 2026-10-15 · rating
oasst-pythia-12b
900,13 rating
Intervallo di confidenza: 875,64 – 924,62
714 voti
Categoria
coding
Configurazione valutata
oasst-pythia-12b
Tipo di valutazione
human preference
Arena text preference / creative_writinghuman preference · 2026-10-15 · rating
oasst-pythia-12b
923,15 rating
Intervallo di confidenza: 903,23 – 943,07
1094 voti
Categoria
creative_writing
Configurazione valutata
oasst-pythia-12b
Tipo di valutazione
human preference
Arena text preference / englishhuman preference · 2026-10-15 · rating
oasst-pythia-12b
945,35 rating
Intervallo di confidenza: 933,67 – 957,03
5212 voti
Categoria
english
Configurazione valutata
oasst-pythia-12b
Tipo di valutazione
human preference
Arena text preference / exclude_tieshuman preference · 2026-10-15 · rating
oasst-pythia-12b
671,53 rating
Intervallo di confidenza: 655,64 – 687,42
4325 voti
Categoria
exclude_ties
Configurazione valutata
oasst-pythia-12b
Tipo di valutazione
human preference
Arena text preference / hard_promptshuman preference · 2026-10-15 · rating
oasst-pythia-12b
884,44 rating
Intervallo di confidenza: 865,90 – 902,98
1153 voti
Categoria
hard_prompts
Configurazione valutata
oasst-pythia-12b
Tipo di valutazione
human preference
Arena text preference / hard_prompts_englishhuman preference · 2026-10-15 · rating
oasst-pythia-12b
897,38 rating
Intervallo di confidenza: 877,16 – 917,60
1002 voti
Categoria
hard_prompts_english
Configurazione valutata
oasst-pythia-12b
Tipo di valutazione
human preference
Arena text preference / industry_business_and_management_and_financial_operationshuman preference · 2026-10-15 · rating