L'IA generativa di Roblox sta trasformando la creazione su Roblox

All'inizio di quest'anno, Roblox ha svelato il suo ambizioso piano di aggiungere l'IA generativa di Roblox alla sua piattaforma, con l'obiettivo di rendere la creazione di contenuti più snella per tutti gli utenti. I recenti sviluppi nell'IA generativa, in particolare nei modelli linguistici di grandi dimensioni (LLM), promettono un nuovo orizzonte per migliorare le esperienze immersive. Tali avanzamenti non solo accelerano il processo di creazione, ma garantiscono anche un ambiente più sicuro, mantenendo al contempo sotto controllo le richieste computazionali.

Una tendenza notevole nell'IA è l'ascesa dei modelli multimodali. Questi modelli, abili nell'elaborare una varietà di forme di contenuto, dalle immagini e al testo ai modelli 3D e all'audio, stanno ridefinendo gli strumenti di creazione. La loro capacità di produrre output che combinano più modalità – ad esempio, testo con visivi corrispondenti – si distingue come un'innovazione significativa. Per Roblox, questo rappresenta un vantaggio doppio:

• Aumenta la produttività dei creatori di contenuti esperti.
• Democratizza il processo creativo, consentendo a una gamma più ampia di utenti di materializzare le loro idee sulla piattaforma.

All'ultima Roblox Developers Conference (RDC), l'azienda ha annunciato il lancio di diversi strumenti che incorporano l'IA generativa in Roblox Studio. Questi strumenti mirano a facilitare una scalabilità più rapida dei progetti, accelerare il processo di iterazione e migliorare le capacità creative degli utenti, garantendo una generazione di contenuti di alta qualità.

Assistente IA di Roblox

Roblox ha costantemente fornito ai suoi creatori le risorse necessarie per creare esperienze 3D dettagliate. Tuttavia, molti creatori si sono rivolti a strumenti di IA generativa e conversazionale di terze parti per assistenza. Sebbene utili per alleggerire alcuni oneri, queste versioni generiche non erano adattate ai flussi di lavoro unici di Roblox o al suo codice, gergo e vernacolo distinti. Di conseguenza, i creatori hanno incontrato sfide sostanziali quando hanno cercato di integrare questi strumenti con i contenuti di Roblox. Riconoscendo questa lacuna, Roblox ha annunciato il suo sforzo di incorporare i benefici di questi strumenti direttamente in Roblox Studio durante la RDC, introducendo una versione iniziale del loro strumento chiamata "Assistant".

"Assistant" è l'IA conversativa interna di Roblox progettata per snellire il processo di creazione per i creatori, indipendentemente dal loro livello di esperienza. Mira a ridurre il tempo trascorso su attività di routine, consentendo ai creatori di concentrarsi su aree come la trama, il gameplay e il design generale. Con la sua vasta libreria di modelli 3D pubblici e la capacità di fondere il modello con le API della piattaforma, Roblox si distingue come un candidato ideale per sviluppare un tale modello IA per universi 3D intricati. Con Assistant, i creatori possono utilizzare prompt in linguaggio naturale per progettare scene, modificare modelli 3D e infondere agli oggetti tratti interattive. Lo strumento copre tre fasi chiave di creazione: comprensione, programmazione e costruzione:

Comprensione: Che si sia un principiante o un esperto di Roblox, Roblox AI Assistant facilita le risposte a diverse domande utilizzando il linguaggio naturale. Programmazione: Basandosi sulla funzione esistente "Code Assist", Assistant può migliorare la codifica, elucidare determinati segmenti di codice e offrire soluzioni di debugging. Costruzione: I creatori possono trasformare rapidamente i concetti in modelli tangibili. Inserendo comandi come "Illumina questo sentiero con lampioni" o "Costruisci una foresta varia e adornala con cespugli e fiori", intere scene possono materializzarsi. L'interazione con Assistant è concepita come un processo dinamico a due vie, consentendo ai creatori di fornire feedback e affinare i risultati. È simile a collaborare con un co-creatore esperto, facilitando il brainstorming e l'ottimizzazione delle idee.

Durante la RDC, Roblox ha fatto un ulteriore annuncio riguardo al suo nuovo strumento IA di Roblox, Assistant. Gli sviluppatori sono stati presentati con l'opportunità di contribuire con i loro dati di script Luau anonimizzati per migliorare l'efficienza e la capacità degli strumenti IA di Roblox, come Code Assist e Assistant. Facendo ciò, avrebbero aiutato non solo la comunità di sviluppatori di Roblox, ma, se avessero scelto di estendere i loro contributi oltre Roblox, avrebbero anche aiutato la più ampia comunità di sviluppatori Luau. Questo perché i dati degli script condivisi sarebbero stati incorporati in un dataset accessibile alle terze parti, con l'obiettivo di affinare i loro strumenti di chat IA per migliori suggerimenti di codice Luau.

Snellire la progettazione dell'avatar

La visione di Roblox è che ciascuno dei suoi impressionanti 65,5 milioni di utenti giornalieri possieda un avatar che rifletta e trasmetta genuinamente la propria identità. Sebbene recentemente sia stata introdotta la capacità per i membri del Programma UGC di progettare e commercializzare corpi e teste autonome per avatar, il processo di progettazione attuale implica la navigazione in Studio o nel Programma UGC. Accoppiato a un livello di abilità avanzato richiesto e a diversi giorni per integrare funzionalità come le espressioni facciali e il rigging 3D, la creazione dell'avatar diventa un'impresa prolungata. Di conseguenza, le opzioni avatar rimangono limitate. Tuttavia, Roblox prevede di espandersi oltre questi limiti.

Con l'intento di facilitare a tutti gli utenti di Roblox l'ottenimento di un avatar distinto e dinamico, l'azienda mira a semplificare il processo di creazione dell'avatar. Alla RDC, è stato annunciato lo svelamento di uno strumento rivoluzionario programmato per il 2024. Questa innovazione consentirà la trasformazione di un'immagine o di più immagini in un avatar personalizzato. Qualsiasi creatore affiliato a Studio o al programma UGC può impiegare questo strumento, caricando un'immagine e successivamente personalizzando l'avatar generato. L'aspirazione a lungo termine di Roblox include l'integrazione di queste funzionalità IA di Roblox direttamente all'interno delle esperienze Roblox.

Per attualizzare questo, Roblox sta canalizzando gli sforzi nei modelli IA, informati dalla progettazione degli avatar della piattaforma e da una raccolta di modelli di avatar 3D specifici di Roblox. Le tecniche in considerazione includono la generazione di avatar 3D da visivi 2D, il rafforzamento dei dati 3D limitati tramite strategie generative 2D e l'impiego di una rete avversaria generativa (GAN) per la generazione 3D. Inoltre, la tecnologia ControlNet viene sfruttata per sovrapporre pose preimpostate, migliorando le visive dell'avatar multi-angolo.

Dopo la creazione della struttura dell'avatar 3D, viene utilizzata una segmentazione semantica 3D avanzata, guidata dalle pose dell'avatar. Questa procedura affina il design 3D iniziale, incorporando elementi, strutture e texture facciali distintivi, trasformando infine la forma 3D di base in un avatar Roblox autentico. Successivamente, gli utenti possono utilizzare uno strumento di modifica della mesh per ulteriori personalizzazioni, allineando l'avatar al proprio concetto immaginato. Remarkably, Roblox AI consente di completare questo processo in pochi minuti, consentendo l'integrazione immediata dell'avatar nelle esperienze Roblox.

Moderazione della comunicazione vocale

Roblox AI va oltre la semplice creazione di contenuti; funge anche da meccanismo robusto per promuovere una comunità varia, sicura e rispettosa su vasta scala. Con l'introduzione di nuove funzionalità vocali, come la chat vocale, Roblox Connect e le API appena annunciate a RDC, la moderazione dei contenuti parlati in tempo reale emerge come una sfida rinnovata. La soluzione prevalente nel settore, il Riconoscimento Automatico del Parlato (ASR), funziona convertendo i file audio in testo, che viene poi esaminato per individuare potenzialmente contenuti inappropriati o parole chiave specifiche.

Sebbene efficace per entità di piccola scala, il deployment dell'ASR per l'ampia base di utenti di Roblox ne ha rivelato le inefficienze. Non solo manca di catturare sfumature come tono e volume, ma l'enorme volume di conversazioni quotidiane, che spaziano su più lingue, lo rende oneroso. Riconoscendo queste sfide, Roblox AI ha introdotto una procedura più snella che identifica le violazioni delle policy direttamente dall'audio in diretta.

Questo meccanismo all'avanguardia di rilevamento vocale è stato sviluppato internamente. Roblox AI ha impiegato l'ASR per categorizzare i propri dataset vocali proprietari e successivamente ha utilizzato i dati categorizzati per l'addestramento del sistema. Il processo di addestramento inizia con la conversione dell'audio in trascrizioni, che vengono poi valutate dal sistema di filtro testuale di Roblox, già esperto nell'identificare gergo specifico di Roblox e potenziali violazioni. Di conseguenza, Roblox dispone ora di un modello competente nel rilevamento in tempo reale delle violazioni delle policy direttamente dagli stream audio.

Il sistema Roblox AI, sebbene abile nell'identificare parole chiave esplicite, riconosce che le violazioni delle policy dipendono spesso dal contesto più ampio. Una parola che è offensiva in un contesto potrebbe essere innocua in un altro. Per migliorare la comprensione contestuale, Roblox ha integrato un'architettura basata su transformer, abile nell'analisi delle sequenze. Questo framework preserva sequenze audio estese, consentendo al sistema di discernere parole, contesto e intonazioni. Il risultato è un sistema che classifica l'audio in base alla conformità alle policy, tenendo conto di parole chiave, tono, sentimento e contesto generale. Impressionantemente, questo sistema innovativo richiede significativamente meno potenza di calcolo rispetto all'ASR tradizionale, allineandosi alla visione di Roblox di una scalabilità estensiva.