Модель ИИ Google Gemini подвергается scrutiny после впечатляющей демонстрации

В недавнем открытии разоблачение Google своей модели искусственного интеллекта (AI) Gemini подверглось scrutiny, вызывая вопросы о реальных возможностях технологии и ее конкурентоспособности против ChatGPT от OpenAI.

Хотя первоначальная демонстрация Gemini от Google казалась впечатляющей, теперь стало известно, что презентация была тщательно курируемой и не точно представляла реальные взаимодействия с системой ИИ. Это развитие событий бросило тень сомнения на способности Gemini и предполагает, что Google, возможно, все еще имеет некоторую территорию для покрытия в гонке ИИ.

Более пристальный взгляд на демонстрацию

Модель ИИ Google Gemini привлекла внимание впечатляющей демонстрацией, но более пристальное исследование выявило, что презентация не была подлинным представлением ее возможностей. Согласно Bloomberg, Google внесла несколько изменений во взаимодействия с Gemini для создания демонстрации, вызывая опасения относительно точности ее заявлений.

Одним из примечательных изменений стало снижение задержки при демонстрации. Это означает, что фактическое время ответа ИИ может быть значительно медленнее, чем показано в видео. Кроме того, вывод от Gemini был сокращен для краткости, что означает, что ответы, показанные в демо, могут не отражать типичные ответы ИИ в реальных сценариях.

Возможно, самым значительным открытием стало то, что демонстрация не проводилась в реальном времени и не в голосовом формате. Вместо этого она была создана с использованием статичных кадров из видеозаписи и текстовых подсказок. Это означает, что Gemini по сути распознавала контент на статичных изображениях, а не вела динамичный разговор в реальном времени, как предполагалось в презентации Google. Разрыв между демонстрацией и реальностью заставил многих усомниться в точности заявленных возможностей Gemini.

Сравнение Gemini с ChatGPT от OpenAI

Демонстрация Google также утверждала, что Gemini превзошла модель GPT-4 от OpenAI почти во всех тестовых бенчмарках. Однако более детальный анализ чисел выявляет менее существенное преимущество Gemini. Несмотря на то, что GPT-4 доступна почти год, Gemini лишь немного опередила ее в многих бенчмарках. Это предполагает, что Gemini, возможно, только недавно догнала продукт OpenAI и вызывает возможность того, что ландшафт может измениться, когда будет представлен GPT-5.

Пользователи Gemini Pro, версии, питающей Google Bard, выразили свое недовольство моделью ИИ. Сообщения в X (ранее Twitter) указывают на то, что Gemini подвержена распространенным «галлюцинациям», характерным для других чат-ботов. Например, когда попросили предоставить шестилетнее слово на французском языке, Gemini уверенно выдала пятибуквенное слово, что подчеркивает ее ограничения в неанглийских языках.

Пользователи также столкнулись с разочарованием при запросе точной генерации кода и обобщения чувствительных новостных тем от Gemini. Даже относительно простые задачи, такие как называние последних победителей премии Оскар, приводили к неправильным ответам. Этот пользовательский опыт предполагает, что, по крайней мере на данный момент, Gemini может не соответствовать высоким ожиданиям, установленным элегантной демонстрацией Google.