La IA generativa de Roblox está transformando la creación en Roblox

A principios de este año, Roblox presentó su ambicioso plan para agregar IA generativa de Roblox a su plataforma, con el objetivo de hacer que la creación de contenido sea más fluida para todos los usuarios. Los recientes desarrollos en IA generativa, particularmente en modelos de lenguaje grandes (LLM), prometen un nuevo horizonte para mejorar las experiencias inmersivas. Tales avances no solo aceleran el proceso de creación, sino que también garantizan un entorno más seguro, todo mientras mantienen bajo control las demandas computacionales.

Una tendencia notable en la IA es el auge de los modelos multimodales. Estos modelos, expertos en procesar una variedad de formas de contenido, desde imágenes y texto hasta modelos 3D y audio, están redefiniendo las herramientas de creación. Su capacidad para producir salidas que combinan múltiples modos, por ejemplo, texto con visuales correspondientes, destaca como una innovación significativa. Para Roblox, esto representa una ventaja doble:

• Aumenta la productividad de los creadores de contenido experimentados.
• Democratiza el proceso creativo, permitiendo que una gama más amplia de usuarios materialice sus ideas en la plataforma.

En la reciente Conferencia de Desarrolladores de Roblox (RDC), la compañía anunció el lanzamiento de varias herramientas que incorporan IA generativa en Roblox Studio. Estas herramientas tienen como objetivo facilitar el escalado más rápido de los proyectos, acelerar el proceso de iteración y mejorar las capacidades creativas de los usuarios, garantizando una generación de contenido de primera calidad.

Asistente de IA de Roblox

Roblox ha proporcionado consistentemente a sus creadores los recursos necesarios para crear experiencias 3D detalladas. Sin embargo, muchos creadores recurrieron a herramientas de IA generativa y conversacional de terceros para obtener ayuda. Aunque beneficiosas para aliviar algunas cargas, estas versiones genéricas no estaban adaptadas a los flujos de trabajo únicos de Roblox ni a su código, jerga y vocabulario distintivos. En consecuencia, los creadores enfrentaron desafíos sustanciales al intentar integrar estas herramientas con el contenido de Roblox. Reconociendo esta brecha, Roblox anunció su esfuerzo por incorporar los beneficios de estas herramientas directamente en Roblox Studio durante la RDC, presentando una versión temprana de su herramienta llamada 'Assistant'.

'Assistant' es la IA conversacional interna de Roblox diseñada para agilizar el proceso de creación para los creadores, independientemente de su nivel de experiencia. Tiene como objetivo minimizar el tiempo dedicado a tareas rutinarias, permitiendo a los creadores centrarse en áreas como la historia, la jugabilidad y el diseño general. Con su vasta biblioteca de modelos 3D públicos y la capacidad de fusionar el modelo con las APIs de la plataforma, Roblox se destaca como un candidato principal para desarrollar tal modelo de IA para universos 3D intrincados. Con Assistant, los creadores pueden emplear indicaciones en lenguaje natural para diseñar escenas, modificar modelos 3D e infundir a los objetos con características interactivas. La herramienta cubre tres etapas clave de creación: comprensión, programación y construcción:

Comprensión: Ya sea un novato o un experto en Roblox, el Asistente de IA de Roblox facilita respuestas a diversas consultas utilizando lenguaje natural. Programación: Basándose en la función existente 'Code Assist', Assistant puede mejorar la codificación, elucidar ciertos segmentos de código y ofrecer soluciones de depuración. Construcción: Los creadores pueden convertir rápidamente conceptos en modelos tangibles. Al ingresar comandos como 'Ilumina este camino con farolas' o 'Construye un bosque variado y adorna con arbustos y flores', se pueden materializar escenas enteras. Se prevé que la interacción con Assistant sea un proceso dinámico de dos vías, permitiendo a los creadores dar retroalimentación y refinar los resultados. Es similar a colaborar con un co-creador experimentado, facilitando la lluvia de ideas y la optimización de ideas.

Durante la RDC, Roblox hizo un anuncio adicional sobre su nueva herramienta de IA de Roblox, Assistant. A los desarrolladores se les presentó la oportunidad de contribuir con sus datos de scripts Luau anonimizados para mejorar la eficiencia y capacidad de las herramientas de IA de Roblox, como Code Assist y Assistant. Al hacerlo, estarían ayudando no solo a la comunidad de desarrolladores de Roblox, sino, si eligieran extender sus contribuciones más allá de Roblox, también ayudarían a la comunidad de desarrolladores de Luau en general. Esto se debe a que los datos de scripts compartidos se incorporarían a un conjunto de datos accesible para terceros, con el objetivo de refinar sus herramientas de chat de IA para mejorar las sugerencias de código Luau.

Agilizando el diseño del avatar

La visión de Roblox es que cada uno de sus impresionantes 65,5 millones de usuarios diarios posea un avatar que refleje y transmita genuinamente su identidad. Si bien recientemente se introdujo la capacidad para que los miembros del Programa UGC diseñen y comercialicen cuerpos de avatar y cabezas independientes, el proceso de diseño actual implica navegar por Studio o el Programa UGC. Sumado a un nivel de habilidad avanzado requerido y varios días para integrar características como expresiones faciales y rigging 3D, la creación de avatares se convierte en un esfuerzo prolongado. Como resultado, las opciones de avatar siguen siendo limitadas. Sin embargo, Roblox prevé expandirse más allá de estas limitaciones.

Con la intención de facilitar a todos los usuarios de Roblox obtener un avatar distinto y dinámico, la compañía tiene como objetivo simplificar el proceso de creación de avatares. En la RDC, se anunció el desvelamiento de una herramienta revolucionaria programada para 2024. Esta innovación permitirá la transformación de una imagen o múltiples imágenes en un avatar personalizado. Cualquier creador afiliado a Studio o al programa UGC puede emplear esta herramienta, subiendo una imagen y posteriormente personalizando el avatar generado. La aspiración a largo plazo de Roblox incluye integrar estas características de IA de Roblox directamente dentro de las experiencias de Roblox.

Para materializar esto, Roblox está canalizando esfuerzos en modelos de IA, informados por el diseño de avatares de la plataforma y una colección de modelos de avatar 3D específicos de Roblox. Las técnicas bajo consideración incluyen generar avatares 3D a partir de visuales 2D, fortalecer datos 3D limitados mediante estrategias generativas 2D, y emplear una red generativa adversaria (GAN) para la generación 3D. Además, la tecnología ControlNet se está aprovechando para superponer poses preestablecidas, mejorando las visuales del avatar desde múltiples ángulos.

Siguiendo la creación de la estructura del avatar 3D, se utiliza una segmentación semántica 3D avanzada, informada por las poses del avatar. Este procedimiento refina el diseño 3D inicial, incorporando elementos faciales distintivos, estructuras y texturas, metamorfoseando finalmente la forma 3D básica en un avatar auténtico de Roblox. Posteriormente, los usuarios pueden emplear una herramienta de edición de malla para una personalización adicional, alineando el avatar con su concepto imaginado. Notablemente, Roblox AI permite que este proceso se complete en cuestión de minutos, permitiendo la integración inmediata del avatar en las experiencias de Roblox.

Moderando la comunicación por voz

Roblox AI se extiende más allá de la mera creación de contenido; también sirve como un mecanismo robusto para fomentar una comunidad diversa, segura y respetuosa a gran escala. Con la introducción de nuevas características de voz, como el chat de voz, Roblox Connect y las APIs recién anunciadas en la RDC, la moderación del contenido hablado en tiempo real surge como un nuevo desafío. La solución predominante en la industria, el Reconocimiento Automático del Habla (ASR), funciona convirtiendo archivos de audio en texto, que luego se examina en busca de contenido potencialmente inapropiado o palabras clave específicas.

Si bien es efectivo para entidades a pequeña escala, desplegar ASR para la vasta base de usuarios de Roblox reveló sus ineficiencias. No solo pierde la captura de matices como el tono y el volumen, sino que el gran volumen de conversaciones diarias, que abarcan múltiples idiomas, lo hace engorroso. Reconociendo estos desafíos, Roblox AI inició un procedimiento más simplificado que identifica las violaciones de políticas directamente desde el audio en vivo.

Este mecanismo de detección de voz de última generación fue desarrollado internamente. Roblox AI empleó ASR para categorizar sus conjuntos de datos de voz propietarios y posteriormente utilizó los datos categorizados para el entrenamiento del sistema. El proceso de entrenamiento comienza convirtiendo el audio en transcripciones, que luego son evaluadas por el sistema de filtro de texto de Roblox, ya experto en identificar la jerga específica de Roblox y posibles violaciones. En consecuencia, Roblox ahora cuenta con un modelo competente en la detección en tiempo real de violaciones de políticas directamente desde los flujos de audio.

El sistema de Roblox AI, aunque competente para identificar palabras clave explícitas, reconoce que las violaciones de políticas a menudo dependen del contexto más amplio. Una palabra que es objectionable en un entorno podría ser benigna en otro. Para mejorar la comprensión contextual, Roblox integró una arquitectura basada en transformadores, experta en el análisis de secuencias. Este marco preserva secuencias de audio extendidas, permitiendo al sistema discernir palabras, contexto e entonaciones. El resultado es un sistema que clasifica el audio basándose en el cumplimiento de políticas, teniendo en cuenta palabras clave, tono, sentimiento y contexto general. Impresionantemente, este sistema innovador requiere significativamente menos poder computacional que el ASR tradicional, alineándose con la visión de Roblox de una escalabilidad expansiva.