GeekRadar / Il banco di confronto
CONFRONTA.
Modelli IA
Not reported

OpenAssistant Pythia 12B

Valutazione del modello

Capacità e preferenze

Preferenze umane · Arena

Preferenze complessive sul testo da confronti diretti. Non misura accuratezza fattuale o riuscita dei compiti.

OpenAssistant Pythia 12B 916,0 OpenAssistant Pythia 12B · Intervallo 95% 905,4–926,7 · 6,310 voti · 2026-10-28

Risultati registrati

Ogni riga usa lo stesso benchmark, versione, carico, scenario e unità. I risultati mancanti non valgono zero. I risultati di sistema includono tutta la configurazione hardware e software.

Arena text preference / chinesehuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

802,90 rating

Intervallo di confidenza: 770,32 – 835,49

321 voti

Categoria
chinese
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference
Arena text preference / codinghuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

900,03 rating

Intervallo di confidenza: 875,56 – 924,51

714 voti

Categoria
coding
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference
Arena text preference / creative_writinghuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

922,99 rating

Intervallo di confidenza: 903,09 – 942,90

1094 voti

Categoria
creative_writing
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference
Arena text preference / englishhuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

945,40 rating

Intervallo di confidenza: 933,73 – 957,08

5212 voti

Categoria
english
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference
Arena text preference / exclude_tieshuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

671,52 rating

Intervallo di confidenza: 655,64 – 687,40

4325 voti

Categoria
exclude_ties
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference
Arena text preference / hard_promptshuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

884,45 rating

Intervallo di confidenza: 865,92 – 902,98

1153 voti

Categoria
hard_prompts
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference
Arena text preference / hard_prompts_englishhuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

897,49 rating

Intervallo di confidenza: 877,28 – 917,70

1002 voti

Categoria
hard_prompts_english
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference
Arena text preference / industry_business_and_management_and_financial_operationshuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

822,35 rating

Intervallo di confidenza: 792,27 – 852,43

454 voti

Categoria
industry_business_and_management_and_financial_operations
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference
Arena text preference / industry_entertainment_and_sports_and_mediahuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

885,22 rating

Intervallo di confidenza: 864,56 – 905,88

1067 voti

Categoria
industry_entertainment_and_sports_and_media
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference
Arena text preference / industry_legal_and_governmenthuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

922,45 rating

Intervallo di confidenza: 882,28 – 962,62

266 voti

Categoria
industry_legal_and_government
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference
Arena text preference / industry_life_and_physical_and_social_sciencehuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

896,60 rating

Intervallo di confidenza: 875,93 – 917,26

1134 voti

Categoria
industry_life_and_physical_and_social_science
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference
Arena text preference / industry_mathematicalhuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

890,65 rating

Intervallo di confidenza: 865,78 – 915,52

629 voti

Categoria
industry_mathematical
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference
Arena text preference / industry_medicine_and_healthcarehuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

819,01 rating

Intervallo di confidenza: 771,91 – 866,11

201 voti

Categoria
industry_medicine_and_healthcare
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference
Arena text preference / industry_software_and_it_serviceshuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

881,26 rating

Intervallo di confidenza: 862,70 – 899,81

1409 voti

Categoria
industry_software_and_it_services
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference
Arena text preference / industry_writing_and_literature_and_languagehuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

928,15 rating

Intervallo di confidenza: 910,65 – 945,65

1408 voti

Categoria
industry_writing_and_literature_and_language
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference
Arena text preference / instruction_followinghuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

887,23 rating

Intervallo di confidenza: 871,69 – 902,76

1744 voti

Categoria
instruction_following
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference
Arena text preference / mathhuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

891,86 rating

Intervallo di confidenza: 870,04 – 913,67

687 voti

Categoria
math
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference
Arena text preference / multi_turnhuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

869,24 rating

Intervallo di confidenza: 844,19 – 894,29

683 voti

Categoria
multi_turn
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference
Arena text preference / non_englishhuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

848,01 rating

Intervallo di confidenza: 830,22 – 865,81

1098 voti

Categoria
non_english
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference
Arena text preference / overallhuman preference · 2026-10-28 · rating

OpenAssistant Pythia 12B

916,04 rating

Intervallo di confidenza: 905,36 – 926,71

6310 voti

Categoria
overall
Configurazione valutata
OpenAssistant Pythia 12B
Tipo di valutazione
human preference

Esecuzione locale

Inferenza · stima della memoria

OpenAssistant Pythia 12B

Informazioni verificate sull’architettura insufficienti per una stima affidabile della VRAM.

Capacità

Licenza del modello
Apache 2.0