Modelo de IA Gemini do Google Enfrenta Escrutínio Após Demonstração Impressionante

Em uma revelação recente, o lançamento do modelo de inteligência artificial (IA) Gemini do Google veio sob escrutínio, levantando questões sobre as capacidades reais da tecnologia e sua posição competitiva contra a ChatGPT da OpenAI.

Embora a demonstração inicial do Gemini do Google tenha parecido impressionante, agora foi revelado que a apresentação foi cuidadosamente curada e não representou com precisão as interações em tempo real com o sistema de IA. Esse desenvolvimento lançou dúvidas sobre as capacidades do Gemini e sugere que o Google ainda tem um caminho a percorrer na corrida da IA.

Uma análise mais detalhada da demonstração

O modelo de IA Gemini do Google chamou a atenção com uma demonstração chamativa, mas um exame mais detalhado revelou que a apresentação não era uma representação genuína de suas capacidades. De acordo com a Bloomberg, o Google fez várias modificações nas interações com o Gemini para criar a demonstração, levantando preocupações sobre a precisão de suas afirmações.

Uma alteração notável foi a redução da latência para a demonstração. Isso implica que os tempos de resposta reais da IA podem ser significativamente mais lentos do que o retratado no vídeo. Além disso, a saída do Gemini foi encurtada para brevidade, o que significa que as respostas mostradas na demonstração podem não refletir as respostas típicas da IA em cenários do mundo real.

Talvez a revelação mais significativa seja que a demonstração não foi conduzida em tempo real ou em formato de voz. Em vez disso, foi construída usando quadros de imagens estáticas de filmagens e prompts fornecidos por texto. Isso significa que o Gemini estava essencialmente identificando conteúdo dentro de imagens estáticas, em vez de se envolver em uma conversa dinâmica e em tempo real, como sugerido pela apresentação do Google. A disparidade entre a demonstração e a realidade deixou muitos questionando a precisão das capacidades do Gemini.

Comparando o Gemini com o ChatGPT da OpenAI

A demonstração do Google também afirmou que o Gemini superou o modelo GPT-4 da OpenAI em quase todos os testes de benchmark. No entanto, um exame mais detalhado dos números revela uma liderança menos substancial para o Gemini. Apesar do GPT-4 estar disponível há quase um ano, o Gemini conseguiu ultrapassá-lo por apenas alguns pontos percentuais em muitos dos benchmarks. Isso sugere que o Gemini pode ter se recuperado recentemente em relação ao produto da OpenAI e levanta a possibilidade de que o cenário possa mudar com o lançamento do GPT-5.

Usuários do Gemini Pro, a versão que impulsiona o Google Bard, expressaram sua insatisfação com o modelo de IA. Relatórios no X (antigo Twitter) indicam que o Gemini é suscetível às “alucinações” comuns experimentadas por outros chatbots. Por exemplo, quando solicitado a fornecer uma palavra de seis letras em francês, o Gemini produziu com confiança uma palavra de cinco letras, destacando suas limitações em idiomas não ingleses.

Os usuários também encontraram frustração ao solicitar geração de código precisa e resumo de tópicos de notícias sensíveis do Gemini. Mesmo tarefas relativamente simples, como nomear os vencedores mais recentes do Oscar, resultaram em respostas incorretas. Essas experiências dos usuários sugerem que, por enquanto, o Gemini pode ficar aquém das altas expectativas estabelecidas pela elegante demonstração do Google.