ByteDance sta addestrando un modello di intelligenza artificiale che pu� arrivare a 10.000 miliardi di parametri, secondo il Financial Times, che cita tre persone a conoscenza del progetto. � una scala che collocherebbe il sistema fra i pi� grandi mai costruiti, e il termine di paragone � esplicito: Mythos, la linea di punta di Anthropic. L'azienda che possiede TikTok ha finora tenuto un profilo basso sul fronte dei modelli, quasi tutti chiusi, a differenza di buona parte dei concorrenti cinesi.
Anthropic non dichiara la dimensione dei propri sistemi, ma le stime di settore attribuiscono a Mythos 5 circa 8.000 miliardi di parametri e a Fable 5 circa 5.000 miliardi. Il modello cinese pi� grande rilasciato finora � Kimi K3 di Moonshot, e quello in lavorazione a ByteDance sarebbe tre volte pi� grande. Se le stime reggono, il conteggio dei parametri porterebbe il sistema cinese nella stessa fascia del pi� avanzato dei modelli americani.
Il progetto � nella fase iniziale del pre-addestramento, il passaggio in cui il modello assorbe il grosso dei dati e che richiede tipicamente dai tre ai sei mesi. Solo dopo arriveranno la messa a punto fine e, se tutto va come previsto, il rilascio. Il conteggio dei parametri fissa la capacit� di fondo di un modello, cio� quante informazioni pu� immagazzinare; le prestazioni effettive dipendono altrettanto dalla qualit� dei dati e dalle tecniche di addestramento. Modelli pi� grandi non sono automaticamente migliori, e fra una corsa di pre-addestramento appena avviata e un sistema finito pu� cambiare molto.
