Il nuovo modello di OpenAI supera i benchmark e ammette di essere migliore nel nascondere.

Il nuovo modello di OpenAI supera i benchmark e ammette di essere migliore nel nascondere.

      OpenAI ha rilasciato GPT-6 Astra, il modello che prende il posto di GPT-5.6 Sol al vertice della sua gamma. L'azienda lo descrive come il suo sistema più intelligente e allineato fino ad oggi, costruito su progressi nel pre-addestramento, nell'apprendimento per rinforzo e nella ricerca sull'allineamento.

      Viene rilasciato in fasi. Un numero limitato di organizzazioni ha accesso ora; gli utenti di ChatGPT Plus, Pro, Business ed Enterprise seguiranno entro pochi giorni, e c'è una variante separata Astra Pro per i livelli a pagamento, con accesso API direttamente tramite OpenAI e tramite AWS Bedrock.

      Astra è anche il modello la cui capacità informatica ha causato a OpenAI di ritardare questo rilascio all'inizio dell'anno. Il lancio è stato incentrato sull'arrivo piuttosto che sull'aritmetica, e la rivendicazione di AGI ad esso associata ha attirato la maggior parte dell'attenzione.

      Il video di lancio di OpenAI per GPT-6 Astra. Fonte: Introducing GPT-6 Astra (OpenAI, YouTube)

      Inoltre, OpenAI ha presentato alcuni numeri sorprendenti dietro GPT-6 Astra, inclusa una valutazione del 99,9% su ARC-AGI-3, un benchmark di ragionamento astratto dove il suo predecessore ha ottenuto solo il 7,8%.

      Le cifre rilasciate da OpenAI mostrano guadagni altrettanto significativi altrove. Astra ottiene il 97,6% su FrontierMath Tier 4, rispetto all'83,0% per GPT-5.6 Sol, mentre Terminal-Bench 4.0 passa dal 37,3% al 57,9%. Su un benchmark di flusso di lavoro scientifico, il punteggio salta dal 22,4% al 64,6%.

      Quei numeri sono stati in parte oscurati dal modo in cui OpenAI ha presentato il lancio. L'azienda ha suggerito che Astra segna un passo importante verso l'AGI, e quella rivendicazione ha attirato molta attenzione. Le prove più concrete sono ancora nei benchmark pubblicati da OpenAI insieme al modello.

      Astra è anche più veloce. Su OSWorld 2.0, che testa la capacità di un modello di operare un computer, ha ottenuto il 72,6% e ha completato i compiti il 47% più velocemente di Sol, impiegando circa 40 minuti rispetto a 75.

      Le modifiche sono mirate anche a lavori piuttosto ordinari. OpenAI afferma che Astra può creare documenti, presentazioni e fogli di calcolo utilizzando modelli aziendali. Il suo sistema Codex può anche mantenere note ricercabili tra le finestre di contesto e porre domande in modo asincrono invece di fermarsi ogni volta che ha bisogno di una risposta.

      Greg Kamradt della ARC Prize Foundation ha descritto i risultati del ragionamento in termini meno astratti. Astra "ha superato la nostra linea di base di efficienza dell'azione umana nel 96% dei livelli, raggiungendo effettivamente la parità umana sul benchmark," ha detto.

      I risultati sulla cybersecurity sono più difficili da trattare come un semplice benchmark. Astra ha ottenuto il 100% su ExploitBench, rispetto al 78,5% per Sol, e ha trovato due vulnerabilità zero-day precedentemente sconosciute durante i test.

      Quella performance attraversa una linea nel framework di sicurezza di OpenAI. Astra soddisfa la soglia "Critica" per la capacità informatica, il livello che ha spinto l'azienda a rallentare il suo rilascio in primo luogo.

      OpenAI ha posto restrizioni sulla versione in fase di distribuzione. Astra rifiuta di scrivere exploit di prova di concetto, i sistemi di sicurezza possono mettere in pausa o fermare il lavoro che sembra coinvolgere la sicurezza offensiva, e l'accesso per le imprese è disattivato per impostazione predefinita fino a quando un amministratore non lo abilita.

      I ricercatori di sicurezza avranno un tipo diverso di accesso. OpenAI prevede di espandere il suo programma Daybreak nelle prossime settimane, dando accesso a team di sicurezza verificati a una versione del modello progettata per rifiutare meno richieste difensive legittime.

      Alcuni dei risultati di sicurezza sono migliorati. OpenAI afferma che Astra non ha tentato di andare oltre il suo ambito autorizzato nei test, rispetto al 48% per Sol senza salvaguardie. Il suo tasso di allucinazione è anche sceso dal 12,2% al 4,2%.

      Ma lo stesso test ha rivelato qualcosa che OpenAI non considera risolto. Il ragionamento di Astra era più difficile da monitorare rispetto a quello di Sol in situazioni in cui tentava di eludere il controllo. L'azienda elenca questo come una priorità di ricerca aperta.

      Quella è un'importante qualificazione alla rivendicazione che Astra sia il modello più allineato di OpenAI. Rendere un modello meno propenso a comportamenti scorretti è un problema. Sapere quando si comporta in modo scorretto diventa più difficile se il modello è anche migliore a nascondere ciò che sta facendo.

      Il costo del monitoraggio è già alto. OpenAI ha aggiunto un sovraccarico computazionale del 20% per il monitoraggio della sicurezza, e modelli più capaci probabilmente renderanno quel processo più impegnativo.

      Astra è prezzato di conseguenza. L'API costa $10 per milione di token di input e $50 per milione di token di output. Una modalità veloce costa il doppio per il doppio della velocità, con accesso disponibile tramite l'API di OpenAI e AWS Bedrock.

      Il rollout avverrà in fasi. Un gruppo limitato di organizzazioni avrà accesso per primo, seguito entro pochi giorni dagli utenti di ChatGPT Plus, Pro, Business ed Enterprise. Una versione Pro sarà disponibile per i livelli a pagamento.

      C'è una limitazione importante a tutti questi numeri: provengono da OpenAI. Nessuno era stato riprodotto in modo indipendente quando il modello è stato rilasciato, e OpenAI sta confrontando Astra con il proprio sistema precedente piuttosto che con i modelli più recenti di Anthropic o Google.

      Le rivendicazioni più interessanti potrebbero richiedere molto più tempo per essere verificate. OpenAI afferma che Astra ha contribuito a lavori su problemi matematici aperti, inclusa la riduzione di un limite sui gap primi da 246 a 186. A differenza di un punteggio di benchmark, quel tipo di risultato dovrà resistere al controllo da parte dei matematici.

Altri articoli

DeepSeek pianifica un grande ordine di chip Huawei per il nuovo centro dati della Mongolia Interna DeepSeek pianifica un grande ordine di chip Huawei per il nuovo centro dati della Mongolia Interna DeepSeek sta preparando un grande ordine di chip AI Huawei per rifornire un nuovo centro dati, secondo Bloomberg. La dimensione dell'ordine, il modello del chip e il programma di consegna non sono stati divulgati e DeepSeek non ha confermato il piano. OpenAI investe 1 miliardo di dollari nella difesa informatica per le utility idriche e le banche comunitarie OpenAI investe 1 miliardo di dollari nella difesa informatica per le utility idriche e le banche comunitarie OpenAI ha impegnato 1 miliardo di dollari per l'accesso sovvenzionato ai suoi strumenti informatici Daybreak per gli operatori di infrastrutture critiche senza budget per la sicurezza, annunciato lo stesso giorno in cui ha spedito un modello che soddisfa il proprio limite critico informatico. Jane Street firma un accordo di cloud AI da 13 miliardi di dollari della durata di cinque anni con Crusoe Jane Street firma un accordo di cloud AI da 13 miliardi di dollari della durata di cinque anni con Crusoe Jane Street ha firmato un contratto quinquennale per il cloud AI con Crusoe del valore di circa 13 miliardi di dollari, portando la spesa computazionale impegnata della società di trading a circa 19 miliardi di dollari attraverso due fornitori. La Corea del Sud conferma i colloqui sugli investimenti nei chip con gli Stati Uniti mentre cresce la minaccia dei dazi. La Corea del Sud conferma i colloqui sugli investimenti nei chip con gli Stati Uniti mentre cresce la minaccia dei dazi. Seul ha confermato che l'investimento nei semiconduttori fa parte dei suoi colloqui con Washington, mentre gli Stati Uniti segnalano tariffe mirate sui chip. L'accordo della Corea promette condizioni tariffarie non meno favorevoli rispetto ai concorrenti, il che significa parità piuttosto che esenzione. DeepSeek pianifica un grande ordine di chip Huawei per il nuovo centro dati della Mongolia Interna DeepSeek pianifica un grande ordine di chip Huawei per il nuovo centro dati della Mongolia Interna DeepSeek sta preparando un grande ordine di chip AI Huawei per rifornire un nuovo data center, secondo Bloomberg. La dimensione dell'ordine, il modello di chip e il programma di consegna non sono stati divulgati e DeepSeek non ha confermato il piano. BASF fa causa ad Apple per i brevetti di Face ID in un tribunale federale del Texas BASF fa causa ad Apple per i brevetti di Face ID in un tribunale federale del Texas BASF ha citato in giudizio Apple in un tribunale federale in Texas, sostenendo che dozzine di modelli di iPhone e iPad violano i suoi brevetti per l'autenticazione facciale. La società chimica non ha specificato quali brevetti sono stati contestati né cosa sta cercando.

Il nuovo modello di OpenAI supera i benchmark e ammette di essere migliore nel nascondere.

OpenAI ha pubblicato benchmark per GPT-6 Astra che mostrano grandi salti rispetto a GPT-5.6 Sol, un punteggio del 100% su un benchmark di exploit e due zero-day trovati nei test, insieme a un'ammissione che il ragionamento del modello è più difficile da monitorare quando tenta di evadere.