El modelo de IA Gemini de Google enfrenta escrutinio tras una impresionante demostración

En un reciente revelación, la presentación por parte de Google de su modelo de inteligencia artificial (IA) Gemini ha sido objeto de escrutinio, planteando preguntas sobre las capacidades reales de la tecnología y su posición competitiva frente a ChatGPT de OpenAI.

Aunque la demostración inicial de Gemini de Google pareció impresionante, ahora se ha revelado que la presentación fue cuidadosamente curada y no representaba con precisión las interacciones en tiempo real con el sistema de IA. Este desarrollo ha generado dudas sobre las capacidades de Gemini y sugiere que Google aún tiene terreno que cubrir en la carrera de la IA.

Un vistazo más de cerca a la demostración

El modelo de IA Gemini de Google llamó la atención con una demostración llamativa, pero un examen más detallado ha revelado que la presentación no era una representación genuina de sus capacidades. Según Bloomberg, Google realizó varias modificaciones en las interacciones con Gemini para crear la demostración, lo que ha generado preocupaciones sobre la precisión de sus afirmaciones.

Una alteración notable fue la reducción de la latencia para la demostración. Esto implica que los tiempos de respuesta reales de la IA pueden ser significativamente más lentos de lo que se mostró en el video. Además, la salida de Gemini se acortó por brevedad, lo que significa que las respuestas mostradas en la demostración pueden no reflejar las respuestas típicas de la IA en escenarios del mundo real.

Quizás la revelación más significativa es que la demostración no se realizó en tiempo real ni en formato de voz. En su lugar, se construyó utilizando fotogramas de imágenes estáticas de las grabaciones y los prompts proporcionados por texto. Esto significa que Gemini estaba esencialmente identificando contenido dentro de imágenes estáticas en lugar de participar en una conversación dinámica y en tiempo real como sugería la presentación de Google. La disparidad entre la demostración y la realidad ha dejado a muchos cuestionando la precisión de las capacidades de Gemini.

Comparando Gemini con ChatGPT de OpenAI

La demostración de Google también afirmó que Gemini superó al modelo GPT-4 de OpenAI en casi todas las pruebas de referencia. Sin embargo, un examen más detallado de las cifras revela un liderazgo menos sustancial para Gemini. A pesar de que GPT-4 estuvo disponible durante casi un año, Gemini solo logró superar por unos pocos puntos porcentuales en muchas de las pruebas de referencia. Esto sugiere que Gemini puede haber alcanzado recientemente a OpenAI’s producto y plantea la posibilidad de que el panorama pueda cambiar una vez que se presente GPT-5.

Los usuarios de Gemini Pro, la versión que impulsa Google Bard, han expresado su descontento con el modelo de IA. Los informes en X (anteriormente Twitter) indican que Gemini es susceptible a las «alucinaciones» comunes experimentadas por otros chatbots. Por ejemplo, cuando se le pidió que proporcionara una palabra de seis letras en francés, Gemini produjo con confianza una palabra de cinco letras, destacando sus limitaciones en idiomas que no sean el inglés.

Los usuarios también han encontrado frustración al solicitar una generación de código precisa y la resúmen de temas noticiosos sensibles de Gemini. Incluso tareas relativamente simples, como nombrar a los ganadores más recientes de los Óscar, dieron lugar a respuestas incorrectas. Estas experiencias de los usuarios sugieren que, por el momento, Gemini puede no estar a la altura de las altas expectativas establecidas por la elegante demostración de Google.