O modelo de IA Gemini do Google enfrenta críticas após demonstração impressionante

Em uma revelação recente, a apresentação do modelo de inteligência artificial (IA) Gemini do Google passou a ser alvo de críticas, levantando questões sobre as capacidades reais da tecnologia e sua posição competitiva em relação ao ChatGPT. 

Embora a demonstração inicial do Gemini pelo Google tenha parecido impressionante, agora foi revelado que a apresentação foi cuidadosamente planejada e não representou com precisão as interações em tempo real com o sistema de IA. Esse fato lançou dúvidas sobre as capacidades do Gemini e sugere que o Google ainda pode ter um longo caminho a percorrer na corrida da IA.

Uma análise mais detalhada da demonstração

O modelo de IA Gemini do Google chamou a atenção com uma demonstração impressionante, mas uma análise mais detalhada revelou que a apresentação não representava genuinamente suas capacidades. Segundo a Bloomberg, o Google fez diversas modificações nas interações com o Gemini para criar a demonstração, o que levanta dúvidas sobre a precisão das afirmações.

Uma alteração notável foi a redução da latência na demonstração. Isso implica que os tempos de resposta reais da IA ​​podem ser significativamente mais lentos do que os apresentados no vídeo. Além disso, a saída do Gemini foi abreviada para maior concisão, o que significa que as respostas mostradas na demonstração podem não refletir as respostas típicas da IA ​​em cenários do mundo real.

Talvez a revelação mais significativa seja que a demonstração não foi realizada em tempo real nem em formato de voz. Em vez disso, foi construída usando quadros estáticos de uma filmagem e instruções fornecidas por texto. Isso significa que o Gemini estava essencialmentedentconteúdo em imagens estáticas, em vez de se engajar em uma conversa dinâmica e em tempo real, como sugerido na apresentação do Google. A discrepância entre a demonstração e a realidade levou muitos a questionarem a precisão das capacidades do Gemini.

Comparando o Gemini com o ChatGPT da OpenAI

A demonstração do Google também alegava que o Gemini superava o modelo GPT-4 da OpenAI em quase todos os testes de benchmark. No entanto, uma análise mais detalhada dos números revela uma vantagem menos substancial para o Gemini. Apesar do GPT-4 estar disponível há quase um ano, o Gemini conseguiu uma ligeira vantagem de apenas alguns pontos percentuais em muitos dos benchmarks. Isso sugere que o Gemini pode ter alcançado o da OpenAI e levanta a possibilidade de que o cenário possa mudar com o lançamento do GPT-5.

Usuários do Gemini Pro, a versão que alimenta o Google Bard, expressaram seu descontentamento com o modelo de IA. Relatos no X (antigo Twitter) indicam que o Gemini é suscetível a "alucinações" comuns experimentadas por outros chatbots. Por exemplo, ao ser solicitado a fornecer uma palavra de seis letras em francês, o Gemini forneceudentuma palavra de cinco letras, evidenciando suas limitações em idiomas que não o inglês.

Os usuários também relataram frustração ao solicitar a geração precisa de código e o resumo de notícias sensíveis no Gemini. Mesmo tarefas relativamente simples, como listar os vencedores mais recentes do Oscar, resultaram em respostas incorretas. Essas experiências sugerem que, por enquanto, o Gemini pode não atender às altas expectativas criadas pela demonstração impecável do Google.