- Il CTO di Microsoft, Kevin Scott, conferma la sua fiducia nelle leggi di scaling dei LLM.
- Scott afferma di essere ottimista riguardo ai futuri progressi nelle capacità dell'AI.
- La posizione di Microsoft si allinea con il suo massiccio investimento nell'AI.
In una recente intervista sul podcast Training Data di Sequoia Capital, il CTO di Microsoft Kevin Scott ha ribadito la sua fede nel valore duraturo delle leggi di scaling dei modelli linguistici di grandi dimensioni (LLM).
Leggi anche: Le app IA presenteranno 'etichette di sicurezza' che evidenziano rischi e test
Scott, che ha avuto un ruolo importante nell'accordo da $13 miliardi tra Microsoft e OpenAI, rimane ottimista riguardo al potenziale per ulteriori progressi. Lui ha risposto al dibattito in corso affermando che l'idea delle leggi di scaling è ancora rilevante per il campo dell'IA.
La ricerca di OpenAI supporta i benefici dello scaling
Le leggi di scaling LLM proposte dai ricercatori di OpenAI nel 2020 affermano che l'efficienza dei modelli linguistici aumenta in modo proporzionale con la dimensione del modello. Scott ha screditato la legge dei rendimenti decrescenti, dicendo che è ancora possibile raggiungere una crescita esponenziale, ma potrebbe richiedere le prossime generazioni di supercomputer per realizzarla.
Mentre alcuni studiosi mettono in discussione la sostenibilità delle leggi di scaling, OpenAI continua a farvi affidamento come componente chiave del suo piano IA. Le osservazioni di Scott sono in linea con l'approccio di Microsoft a questi principi, il che implica che il gigante della tecnologia non ha intenzione di fermare lo sviluppo di modelli IA più grandi.
La comunità IA dibatte sui futuri miglioramenti dei modelli
La posizione di Scott è piuttosto opposta a quella di alcuni critici dell'IA che pensano che la crescita si sia fermata a GPT-4 e ad altri modelli simili. Alcuni critici hanno citato gli ultimi modelli, tra cui Google Gemini 1.5 Pro e Anthropic Claude Opus, per non aver mostrato miglioramenti significativi rispetto ai modelli precedenti. Il critico dell'IA Gary Marcus ha sottolineato questa visione ad aprile, mettendo in discussione la mancanza di progressi significativi dal rilascio di GPT-4.
Ma ancora, Scott è ottimista riguardo alla possibilità di nuove scoperte. Ha anche accettato il fatto che ci sono pochi punti dati nell'IA, ma ha sottolineato che questo non sarà più un problema in futuro.
“Il prossimo campione sta arrivando, e non posso dirti quando, e non posso prevedere esattamente quanto sarà bravo, ma sarà quasi certamente migliore nelle cose che sono fragili in questo momento.”
Kevin Scott
Il grande finanziamento di Microsoft in OpenAI è una testimonianza della sua fiducia nel futuro avanzamento dei LLM. Alcune delle funzionalità dell'IA includono Microsoft Copilot, che rende evidente che l'azienda è interessata a migliorare il suo utilizzo dell'IA. Ed Zitron, un critico dell'IA, ha detto che, in una certa misura, l'IA potrebbe essere bloccata perché le persone si aspettano troppo da essa.
I cervelli più intelligenti del crypto leggono già la nostra newsletter. Vuoi unirti a loro? Unisciti a loro.
Dichiarazione di responsabilità. Le informazioni fornite non costituiscono consigli di trading. Cryptopolitan.com non si assume alcuna responsabilità per eventuali investimenti effettuati sulla base delle informazioni fornite in questa pagina. Si consiglia vivamente di effettuare ricerche indipendenti e/o consultare un professionista qualificato prima di prendere qualsiasi decisione di investimento.
Brenda Kanana
Brenda vanta oltre 4 anni di esperienza specializzata in criptovalute, intelligenza artificiale e tecnologie emergenti. Ha lavorato presso Zycrypto, Blockchain Reporter e The Coin Republic e ora ha fatto di Cryptopolitan la sua casa. La sua laurea in Sociologia presso l'Università Tecnica di Mombasa la mantiene in sintonia con il pubblico dei lettori.
