GPT-3.5 Turbo (Jan 2024)

Capacità e preferenze

Capacità generale · ECI

Stima delle capacità basata su più benchmark. Punti di indice, non una percentuale; gli intervalli mostrano l’incertezza.

GPT-3.5 Turbo (Jan 2024) 113,2^* GPT-3.5 Turbo (Jan 2024) · Intervallo 95% 108,2–117,8

Prestazioni dei modelli

Punteggio Radar: quattro test, peso uguale. Una sintesi sperimentale di queste prove, non una misura universale di intelligenza.

GPT-3.5 Turbo (Jan 2024)

Configurazione testata Punteggio Radar

Non valutato

3/4 test principali · prove insufficienti

4 risultati di benchmark per questa configurazione

Ragionamento scientifico

GPQA Diamond · 25%

Domande scientifiche di esperti; correzione rigorosa a scelta multipla. Il caso vale il 25%.

GPT-3.5 Turbo (Jan 2024) 27,2^*% Intervallo 95% appross.: 23,3–31,0% · 2025-01-27 · Risultato datato

Soluzione di problemi nuovi

Mystery Game Puzzles · 25%

Scelta della mossa migliore in una variante di gioco non divulgata. Una prova circoscritta di ragionamento, non di intelligenza generale.

GPT-3.5 Turbo (Jan 2024) 3,0^*% Intervallo 95% appross.: 0,0–6,4% · 2026-08-27

Matematica avanzata

FrontierMath Tiers 1-3 · 25%

Problemi matematici privati v2 con strumenti Python. Esclusi versioni precedenti e Tier 4.

GPT-3.5 Turbo (Jan 2024) 0,0^*% Incertezza non disponibile · 2026-08-27

Risposte fattuali

SimpleQA Verified · 25%

Risposte fattuali corrette con invito a tentare, valutate da un modello. Non misura allucinazioni o astensione.

GPT-3.5 Turbo (Jan 2024) Non disponibile

Matematica da competizione

OTIS Mock AIME 2024-2025 · Risultato separato

Problemi da competizione: risposte estratte da un modello e confrontate con la soluzione esatta. Escluse le procedure di valutazione precedenti.

GPT-3.5 Turbo (Jan 2024) 2,2^*% Intervallo 95% appross.: 0,0–6,6% · 2026-08-07

Le barre mostrano i risultati delle prove. I segmenti indicano intervalli approssimativi al 95% quando è disponibile l’errore standard. Budget di ragionamento diversi non implicano costi uguali. I risultati mancanti non valgono zero.

Esecuzione locale

Inferenza · stima della memoria

GPT-3.5 Turbo (Jan 2024)

Pesi chiusi. Non sono pubblicati un impiego locale supportato o requisiti GPU.

Capacità

Pesi aperti: No^*

Configurazione di sistema

Specifiche dettagliate

Specifiche · 4 campi

Modalità di accesso: API access^*
Pesi aperti: No^*
Organizzazione: OpenAI^*
Paese dell’organizzazione: United States of America^*