Vai al contenuto
Ora nel mondoEU--:--UK--:--USA--:--CN--:--PLDEFRIT中文EN

portale su IA e tecnologiaeventi · analisi · interviste · approfondimenti tecnici

Cerca
LIVE
›

I pesi aperti si avvicinano ai modelli frontier, ma l'etichetta fa troppo lavoro

Il rapporto State of Open Source AI di Mozilla, pubblicato il 15 settembre con dati aggiornati al 1° settembre, colloca i migliori modelli a pesi aperti circa 4,4 mesi dietro le offerte frontier chiuse. Un post separato di OSI sostiene che quel divario è la cosa sbagliata da misurare.

IA e modelliAnalisiChiara RomanoPubblicato: 28 settembre 20265 min di letturaFonti 2
I pesi aperti si avvicinano ai modelli frontier, ma l'etichetta fa troppo lavoro

Mozilla ha pubblicato la versione 1.1 del suo rapporto State of Open Source AI il 15 settembre, con dati aggiornati al 1° settembre. Tom's Hardware ha riferito il 16 settembre che il miglior modello aperto era indietro di tre punti rispetto al leader chiuso sull'Artificial Analysis Intelligence Index, al 60% del prezzo, e di due punti dietro Claude Fable 5 al 30%. La stima di Mozilla sui dati METR relativi all'orizzonte dei compiti colloca il divario tra aperti e chiusi intorno ai 4,4 mesi. Coincide con la stima di quattro mesi di Epoch AI.

La metodologia conta, perché il numero in evidenza viaggia più lontano delle sue avvertenze.

METR valuta i modelli in base alla durata del compito, misurata in tempo di lavoro umano, che completano la metà delle volte. Secondo la stima elaborata da Mozilla, i modelli chiusi gestiscono compiti che richiedono a esperti umani da 8 a 12 ore. I modelli aperti arrivano a quel livello circa quattro mesi dopo, con le capacità aperte che raddoppiano ogni 3,9 mesi contro 5,5 per i chiusi, secondo il calcolo di Mozilla. Il rapporto ha anche riportato i risultati di Terminal-Bench 2.1 di vals.ai, che sottopongono ogni modello allo stesso harness, lo strato software che fornisce a un modello i suoi strumenti.

Su quella classifica, GLM-5.2 di Z.ai ha ottenuto un punteggio entro un punto da Claude Opus 4.7 e circa quattro punti dietro Opus 4.8, a meno di un quinto del costo per test. Su OpenRouter, un marketplace che instrada il traffico degli sviluppatori verso centinaia di modelli, Mozilla ha contato otto dei primi dieci modelli per volume di token ad agosto come pesi aperti, sette dei quali costruiti in Cina.

Poi i soldi.

I fornitori chiusi hanno preso il 96% dei ricavi a livello di modello su OpenRouter da maggio a settembre 2025, secondo la Linux Foundation. "Vediamo la decisione di pagare per i modelli chiusi come legata al singolo carico di lavoro più che all'organizzazione", ha detto a Ars Technica via email il chief technology officer di Mozilla Raffi Krikorian, come citato nel servizio di Tom's Hardware.

Cosa lascia fuori il dato dei quattro mesi

Due avvertenze stanno dentro il rapporto stesso. Il divario di quattro mesi e il dato del 30% sul prezzo per token sono misurati da API ad API su endpoint ospitati, al prezzo di listino. E la tabella hardware del rapporto colloca il miglior modello aperto che sta su un solo server a 52,6 sull'indice e il migliore su una sola GPU a 40, cali di 10 e 23 punti dal vertice. È un divario più ampio di quattro mesi.

I requisiti di servizio sono la versione pratica dello stesso problema. Il checkpoint nativo MXFP4 di Kimi K3 occupa circa 1,56TB su 96 shard, e la configurazione di servizio di Mozilla elenca 64 o più acceleratori, mentre vLLM richiede almeno otto GPU GB300, con più nodi per il traffico in produzione. Il rapporto lo descrive come aperto ma non eseguibile dalla maggior parte di chi lo possiede. Tom's Hardware aveva stimato il fabbisogno di memoria vicino a 1,5TB a luglio. Un'eccezione che il rapporto nomina è Inkling-Small di Thinking Machines, sotto licenza Apache 2.0, la cui versione NVFP4 sta su una singola B300 con un minimo di 180GB.

I dati del rapporto si fermano al 1° settembre, e le classifiche si sono mosse da allora.

Artificial Analysis è passata al suo indice v4.3 con un set di valutazione diverso; la classifica live ha Claude Fable 5.1 a 53 con la sua impostazione di sforzo massimo e Kimi K3 a 44, numeri non confrontabili con le cifre v4.1.1 che Mozilla ha riportato. La classifica Terminal-Bench 2.1 di vals.ai, aggiornata l'11 settembre, è ora guidata da GPT-6 Astra all'87,27% con Fable 5.1 all'85,02%. La didascalia della tabella di Mozilla recita: "il divario si azzera a ogni ciclo di rilascio". K3 porta anche un'accusa dettagliata nell'avviso congiunto NSA/CISA/FBI dell'8 settembre (AA26-251A). La tesi, che il rapporto di Mozilla enuncia come "asserita e non dimostrata", è che Moonshot abbia estratto dati di Claude Fable 5 per addestrare K3 tramite distillazione, la pratica di addestrare un modello sugli output di un altro modello.

La battaglia sui nomi sotto la battaglia sui benchmark

La Open Source Initiative ha usato lo stesso ciclo di notizie per discutere di vocabolario. In un post del 19 settembre, OSI ha scritto che i pesi aperti permettono di esercitare alcune delle quattro libertà del software, la libertà di usare, studiare, modificare e condividere senza chiedere al titolare dei diritti, ma non tutte, e solo in una certa misura.

L'impostazione di OSI: un modello di IA ha tre componenti principali, dati di addestramento, pesi e parametri, e codice per la preparazione dei dati e l'addestramento. I rilasci a pesi aperti consegnano i pesi, il che permette di eseguire un modello in locale, pagare una terza parte per ospitarlo o fare fine-tuning sui propri dati. Non consegnano le altre componenti. Senza il codice e i dati di addestramento, o un resoconto di come i dati sono stati costruiti, sostiene OSI, non si può ispezionare pienamente un modello per rispondere al perché ha prodotto un output o se quell'output sia affidabile. Il post cita Olmo di Ai2 come esempio di un modello linguistico di grandi dimensioni il cui dataset di addestramento completo e i cui checkpoint permettono ai ricercatori di studiare come un modello memorizza o dimentica informazioni iniettate.

La distinzione non è accademica per chi legge i numeri di Mozilla come guida all'acquisto. Il rapporto di Mozilla conta 16 rilasci aperti di rilievo, ma nota che nessuno fornisce la ricetta dei dati richiesta dalla definizione della Open Source Initiative. Mozilla è anche un sostenitore dei modelli aperti: TIME ha riferito il 14 luglio che Krikorian ha descritto il rapporto come in parte un'azione di advocacy. Il rapporto si basa su un sondaggio Mozilla/SlashData su circa 1.400 sviluppatori, sui dati di traffico di OpenRouter e su indici di benchmark di terze parti.

Ciò che nessuno di questi documenti risolve è se pesi più economici e leggermente indietro bastino per i carichi di lavoro che le persone eseguono davvero. La divisione dei ricavi dice che la maggior parte degli acquirenti paga ancora per i chiusi. La divisione dei volumi di token dice che la maggior parte del traffico è già aperta. Entrambe le cose possono essere vere insieme, e il dato dei quattro mesi non decide tra le due.

Commenti 0

Fonti

2
  1. 01China's open-weight AI models are now just 4 months behind frontier US offerings, Mozilla report claimsEN
  2. 02Open Weights Are Good. Open Source Is Better.EN

Tutti i numeri e le citazioni di questo testo provengono dalle fonti elencate sotto.

I contenuti sono stati preparati dalla redazione con il supporto dell'IA.

Chiara Romano

Chiara Romano

IA, modelli e tecnologie

Chiara Romano scrive di tecnologia, IA e modelli, media e internet per FLASH24, partendo da documentazione tecnica, repository e specifiche invece che da comunicati stampa. Per ogni modello o piattaforma che segue controlla versioni, licenze, parametri e benchmark, e verifica i numeri confrontandoli con i dati originali o con test indipendenti. Confronta le schede tecniche tra fornitori, parla con sviluppatori e amministratori di sistema, e tiene d'occhio le finestre di rilascio e le modifiche ai termini d'uso. Fuori dalla redazione gestisce self-hosting e reti domestiche, esperienza che le serve per capire come funzionano davvero i servizi che racconta. Non pubblica una notizia se la fonte primaria non è verificabile.

Redazione →

Commenti

0
  1. Nessun commento — sii il primo.

Scrivi un commento

I commenti sono pubblici. Non pubblichiamo insulti, spam né pubblicità.