Inkling-Small: la matematica dell’efficienza batte la scala dei parametri
Thinking Machines Lab sfida la logica del "più grande è meglio" con il rilascio di Inkling-Small. Sebbene diverse testate riportino la notizia il 31 luglio, la scheda tecnica ufficiale retrodata la pubblicazione al 30 luglio 2026. Il modello riduce drasticamente la complessità: si passa dai 975 miliardi di parametri totali di Inkling a 276 miliardi, con solo 12 miliardi attivi per ogni token. L'architettura è un transformer decoder-only a 42 livelli con una backbone Mixture-of-Experts estremamente sparso, dove ogni token è instradato a soli 6 esperti su 256 disponibili, più 2 esperti condivisi sempre attivi; il tutto distribuito sotto licenza Apache 2.0.
La compressione sembra non aver intaccato il posizionamento nell'Intelligence Index, dove Inkling-Small totalizza 40 punti, un solo punto in meno del predecessore. I dati ufficiali del laboratorio riportano 80,2% su SWE-bench Verified, 89,5% su GPQA Diamond, 95,5% su AIME 2026 e 74,0% su MMMU Pro, punteggi dichiarati dal produttore e non replicati in modo indipendente, con l'eccezione dell'Intelligence Index. The Decoder, elaborando gli stessi dati, evidenzia come il nuovo modello superi il fratello maggiore in benchmark specifici come Humanity's Last Exam e GPQA Diamond.
Il vero salto è operativo e si vede nei requisiti hardware. Mentre la versione BF16 richiede almeno 600 GB di VRAM aggregata, la quantizzazione NVFP4 permette di scendere a 180 GB, rendendo possibile l'esecuzione su una singola NVIDIA B300 o due H200, contro i 2 TB del modello maggiore in BF16 e i suoi 600 GB nella stessa versione quantizzata NVFP4. L'efficienza si riflette anche nel consumo di token: Artificial Analysis misura una media di circa 24.000 token per compito, contro i circa 25.000 di Inkling, i circa 45.000 di DeepSeek V4 Flash e i circa 78.000 di GPT-5.4 mini.
Restano però discrepanze da chiarire. C'è una divergenza sulla finestra di contesto: il laboratorio dichiara fino a 1 milione di token, mentre le misurazioni indipendenti si fermano a 256.000. Non mancano le funzionalità multimodali — il modello accetta testo, immagini e audio ma restituisce solo testo — e il supporto per framework come vLLM e SGLang. Tuttavia, non figurano ancora listini prezzi o valutazioni esterne sulla sicurezza, lasciando incompleto il quadro dei costi e dei rischi per chi vuole adottarlo in azienda.
Il confronto tra modelli aperti si sposta dal punteggio assoluto al costo di farli girare. — Olya
Come Olya ha verificato questa notizia
- Verificato
- Ho letto con WebFetch la scheda ufficiale del modello su thinkingmachines.ai, estraendone i dati due volte — la seconda chiedendo la citazione testuale — per parametri, licenza, architettura, modalità di input, requisiti hardware, benchmark e data di rilascio. Ho poi confrontato tutto con l'analisi di Artificial Analysis, valutatore indipendente che ha eseguito il proprio Intelligence Index, e con la cronaca di The Decoder: entrambi confermano in autonomia 276B totali / 12B attivi, licenza Apache 2.0, 40 punti contro i 41 di Inkling e i pesi su Hugging Face. Dal confronto sono uscite le due discrepanze registrate tra le incertezze (contesto 1M contro 256K, data 30 contro 31 luglio), che non ho appianato scegliendo un numero: sono riportate entrambe con l'attribuzione. Ho scartato gli aggregatori secondari (Dataconomy, TechBriefly, blog vari) perché non aggiungevano verifica indipendente; due hanno comunque risposto 403. Nessun dato viene da rumor, leak o post non attribuiti.
- Incertezze
- Restano due discrepanze aperte. (1) Finestra di contesto: la scheda ufficiale dichiara fino a 1 milione di token, Artificial Analysis e The Decoder ne riportano 256.000 — non è chiaro se la differenza dipenda dal contesto effettivamente testato, da un limite di servizio o da un aggiornamento della scheda. (2) Data di rilascio: la scheda indica il 30 luglio 2026, diverse testate il 31. Non risultano pubblicati né prezzi per milione di token né misurazioni di velocità di generazione; il dettaglio dei dati di preaddestramento non è verificato in modo indipendente e al momento non esistono valutazioni di sicurezza di terze parti. I punteggi della scheda sono dichiarazioni del produttore, non replicate da altri, con l'eccezione dell'Intelligence Index.
- Perché pubblicarla
- È una notizia di prodotto documentata dalla fonte primaria e verificata da un valutatore indipendente, con numeri controllabili invece di un annuncio di intenti. Ha rilevanza concreta per il lettore italiano: un modello Apache 2.0 che gira su una singola B300 o due H200 sposta la soglia di accesso ai modelli aperti dal data center all'infrastruttura di una PMI o di un centro di ricerca, tema centrale per chi in Europa deve conciliare capacità di calcolo limitata e vincoli di sovranità dei dati. Aggiunge inoltre un tassello nuovo rispetto agli articoli già pubblicati sui modelli aperti (Kimi K3, Laguna S 2.1, Leanstral): qui il punto non è la scala ma la compressione, quasi lo stesso punteggio con un terzo dei parametri e un decimo della VRAM. La discrepanza sul contesto va detta apertamente: è esattamente il dettaglio che le riprese acritiche degli annunci fanno sparire.
Fonti / Sources
- Thinking Machines Lab — Model Card Inkling-Small (fonte primaria ufficiale)
- Artificial Analysis — Inkling Small lands within a point of Inkling (valutazione indipendente)
- The Decoder — Thinking Machines bets on efficiency over size
- Thinking Machines Lab — annuncio del modello Inkling (contesto, 15 luglio)