GeekRadar / Il banco di confronto
CONFRONTA.
Modelli IA
openai

GPT-4 (Mar 2023)

Modello IA Uscita

Pesi aperti
No*

Capacità e preferenze

Capacità generale · ECI

Stima delle capacità basata su più benchmark. Punti di indice, non una percentuale; gli intervalli mostrano l’incertezza.

GPT-4 (Mar 2023) 121,9* GPT-4 (Mar 2023) · Intervallo 95% 118,0–125,2

Prestazioni dei modelli

Punteggio Radar: quattro test, peso uguale. Una sintesi sperimentale di queste prove, non una misura universale di intelligenza.

GPT-4 (Mar 2023)

Punteggio Radar

Non valutato

1/4 test principali · prove insufficienti

2 risultati di benchmark per questa configurazione

Ragionamento scientifico

GPQA Diamond · 25%

Domande scientifiche di esperti; correzione rigorosa a scelta multipla. Il caso vale il 25%.

GPT-4 (Mar 2023) 35,7*% Intervallo 95% appross.: 31,1–40,4% · Risultato datato

Soluzione di problemi nuovi

Mystery Game Puzzles · 25%

Scelta della mossa migliore in una variante di gioco non divulgata. Una prova circoscritta di ragionamento, non di intelligenza generale.

GPT-4 (Mar 2023) Non disponibile

Matematica avanzata

FrontierMath Tiers 1-3 · 25%

Problemi matematici privati v2 con strumenti Python. Esclusi versioni precedenti e Tier 4.

GPT-4 (Mar 2023) Non disponibile

Risposte fattuali

SimpleQA Verified · 25%

Risposte fattuali corrette con invito a tentare, valutate da un modello. Non misura allucinazioni o astensione.

GPT-4 (Mar 2023) Non disponibile

Matematica da competizione

OTIS Mock AIME 2024-2025 · Risultato separato

Problemi da competizione: risposte estratte da un modello e confrontate con la soluzione esatta. Escluse le procedure di valutazione precedenti.

GPT-4 (Mar 2023) 0,6*% Intervallo 95% appross.: 0,0–1,3% · Risultato datato

Le barre mostrano i risultati delle prove. I segmenti indicano intervalli approssimativi al 95% quando è disponibile l’errore standard. Budget di ragionamento diversi non implicano costi uguali. I risultati mancanti non valgono zero.

Esecuzione locale

Inferenza · stima della memoria

GPT-4 (Mar 2023)

Pesi chiusi. Non sono pubblicati un impiego locale supportato o requisiti GPU.

Capacità

Pesi aperti
No*

Configurazione di sistema

Specifiche dettagliate

Specifiche · 4 campi
Modalità di accesso
API access*
Pesi aperti
No*
Organizzazione
OpenAI*
Paese dell’organizzazione
United States of America*

* Dati provvisori