GeekRadar / Il banco di confronto
CONFRONTA.
Modelli IA
openai

o1 (2024-12-17)

Valutazione del modello

Capacità e preferenze

Preferenze umane · Arena

Preferenze complessive sul testo da confronti diretti. Non misura accuratezza fattuale o riuscita dei compiti.

o1 (2024-12-17) 1365,8 o1 (2024-12-17) · Intervallo 95% 1361,3–1370,3 · 27,807 voti · 2026-11-06

Risultati registrati

Ogni riga usa lo stesso benchmark, versione, carico, scenario e unità. I risultati mancanti non valgono zero. I risultati di sistema includono tutta la configurazione hardware e software.

Arena text preference / chinesehuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.393,95 rating

Intervallo di confidenza: 1.379,58 – 1.408,32

1780 voti

Categoria
chinese
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / codinghuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.366,65 rating

Intervallo di confidenza: 1.357,09 – 1.376,20

3973 voti

Categoria
coding
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / creative_writinghuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.347,15 rating

Intervallo di confidenza: 1.338,10 – 1.356,19

4642 voti

Categoria
creative_writing
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / englishhuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.372,23 rating

Intervallo di confidenza: 1.366,68 – 1.377,78

16316 voti

Categoria
english
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / exclude_tieshuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.333,44 rating

Intervallo di confidenza: 1.327,01 – 1.339,87

19214 voti

Categoria
exclude_ties
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / experthuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.361,28 rating

Intervallo di confidenza: 1.344,46 – 1.378,10

1330 voti

Categoria
expert
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / frenchhuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.343,94 rating

Intervallo di confidenza: 1.306,99 – 1.380,89

252 voti

Categoria
french
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / germanhuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.336,80 rating

Intervallo di confidenza: 1.312,60 – 1.361,01

556 voti

Categoria
german
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / hard_promptshuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.371,27 rating

Intervallo di confidenza: 1.363,61 – 1.378,93

6453 voti

Categoria
hard_prompts
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / hard_prompts_englishhuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.371,98 rating

Intervallo di confidenza: 1.362,61 – 1.381,35

4238 voti

Categoria
hard_prompts_english
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / industry_business_and_management_and_financial_operationshuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.327,43 rating

Intervallo di confidenza: 1.315,82 – 1.339,04

2720 voti

Categoria
industry_business_and_management_and_financial_operations
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / industry_entertainment_and_sports_and_mediahuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.358,02 rating

Intervallo di confidenza: 1.349,47 – 1.366,57

5210 voti

Categoria
industry_entertainment_and_sports_and_media
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / industry_legal_and_governmenthuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.368,40 rating

Intervallo di confidenza: 1.352,68 – 1.384,13

1454 voti

Categoria
industry_legal_and_government
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / industry_life_and_physical_and_social_sciencehuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.368,75 rating

Intervallo di confidenza: 1.359,90 – 1.377,61

4820 voti

Categoria
industry_life_and_physical_and_social_science
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / industry_mathematicalhuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.389,67 rating

Intervallo di confidenza: 1.378,18 – 1.401,17

2644 voti

Categoria
industry_mathematical
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / industry_medicine_and_healthcarehuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.354,88 rating

Intervallo di confidenza: 1.337,85 – 1.371,92

1273 voti

Categoria
industry_medicine_and_healthcare
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / industry_software_and_it_serviceshuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.366,25 rating

Intervallo di confidenza: 1.358,58 – 1.373,92

6584 voti

Categoria
industry_software_and_it_services
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / industry_writing_and_literature_and_languagehuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.359,94 rating

Intervallo di confidenza: 1.352,62 – 1.367,25

7663 voti

Categoria
industry_writing_and_literature_and_language
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / instruction_followinghuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.367,20 rating

Intervallo di confidenza: 1.360,68 – 1.373,71

10246 voti

Categoria
instruction_following
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / japanesehuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.346,03 rating

Intervallo di confidenza: 1.319,98 – 1.372,09

581 voti

Categoria
japanese
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / koreanhuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.396,26 rating

Intervallo di confidenza: 1.364,50 – 1.428,01

396 voti

Categoria
korean
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / longer_queryhuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.377,50 rating

Intervallo di confidenza: 1.367,64 – 1.387,35

3571 voti

Categoria
longer_query
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / mathhuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.388,38 rating

Intervallo di confidenza: 1.377,56 – 1.399,21

2986 voti

Categoria
math
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / multi_turnhuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.354,69 rating

Intervallo di confidenza: 1.345,50 – 1.363,87

4399 voti

Categoria
multi_turn
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / non_englishhuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.358,33 rating

Intervallo di confidenza: 1.352,24 – 1.364,41

11491 voti

Categoria
non_english
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / overallhuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.365,79 rating

Intervallo di confidenza: 1.361,31 – 1.370,26

27807 voti

Categoria
overall
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / russianhuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.355,71 rating

Intervallo di confidenza: 1.345,17 – 1.366,25

3078 voti

Categoria
russian
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference
Arena text preference / spanishhuman preference · 2026-11-06 · rating

o1 (2024-12-17)

1.345,09 rating

Intervallo di confidenza: 1.296,89 – 1.393,29

142 voti

Categoria
spanish
Configurazione valutata
o1 (2024-12-17)
Tipo di valutazione
human preference

Esecuzione locale

Inferenza · stima della memoria

o1 (2024-12-17)

Informazioni verificate sull’architettura insufficienti per una stima affidabile della VRAM.

Capacità

Licenza del modello
Proprietary