GeekRadar / Il banco di confronto
CONFRONTA.
Modelli IA
google

gemma-3-1b-it

Modello IA Uscita

Pesi aperti
Sì

Prestazioni dei modelli

Punteggio Radar: quattro test, peso uguale. Una sintesi sperimentale di queste prove, non una misura universale di intelligenza.

gemma-3-1b-it

Punteggio Radar

Non valutato

1/4 test principali · prove insufficienti

2 risultati di benchmark per questa configurazione

Ragionamento scientifico

GPQA Diamond · 25%

Domande scientifiche di esperti; correzione rigorosa a scelta multipla. Il caso vale il 25%.

gemma-3-1b-it 19,9*% Intervallo 95% appross.: 17,0–22,9%

Soluzione di problemi nuovi

Mystery Game Puzzles · 25%

Scelta della mossa migliore in una variante di gioco non divulgata. Una prova circoscritta di ragionamento, non di intelligenza generale.

gemma-3-1b-it Non disponibile

Matematica avanzata

FrontierMath Tiers 1-3 · 25%

Problemi matematici privati v2 con strumenti Python. Esclusi versioni precedenti e Tier 4.

gemma-3-1b-it Non disponibile

Risposte fattuali

SimpleQA Verified · 25%

Risposte fattuali corrette con invito a tentare, valutate da un modello. Non misura allucinazioni o astensione.

gemma-3-1b-it Non disponibile

Matematica da competizione

OTIS Mock AIME 2024-2025 · Risultato separato

Problemi da competizione: risposte estratte da un modello e confrontate con la soluzione esatta. Escluse le procedure di valutazione precedenti.

gemma-3-1b-it 1,1*% Intervallo 95% appross.: 0,1–2,2%

Le barre mostrano i risultati delle prove. I segmenti indicano intervalli approssimativi al 95% quando è disponibile l’errore standard. Budget di ragionamento diversi non implicano costi uguali. I risultati mancanti non valgono zero.

Esecuzione locale

Inferenza · stima della memoria

gemma-3-1b-it

1,9 GiB di payload dei tensori del checkpoint · 1,00 B elementi dei tensori archiviati · BF16

I tensori archiviati possono includere buffer e copie di pesi condivisi. Il numero di parametri unici non è verificato. Le dimensioni del checkpoint non indicano la memoria necessaria per eseguire il modello.

Capacità

Pesi aperti
Sì
Licenza del modello
gemma
Payload dei tensori del checkpoint
1,86 GiB

Modalità di input

  • text

Modalità di output

  • text

* Dati provvisori