Il modello AI Gemini di Google sotto scrutinio dopo una demo impressionante

In una recente rivelazione, il lancio del modello di intelligenza artificiale (AI) Gemini di Google è stato sottoposto a scrutinio, sollevando dubbi sulle effettive capacità della tecnologia e sulla sua posizione competitiva rispetto a ChatGPT di OpenAI.

Sebbene la dimostrazione iniziale di Gemini di Google apparisse impressionante, è ora emerso che la presentazione era accuratamente curata e non rappresentava fedelmente le interazioni in tempo reale con il sistema di intelligenza artificiale. Questo sviluppo ha gettato dubbi sulle capacità di Gemini e suggerisce che Google potrebbe avere ancora del terreno da recuperare nella corsa all'IA.

Un'analisi più attenta della demo

Il modello AI Gemini di Google ha attirato l'attenzione con una demo accattivante, ma un esame più attento ha rivelato che la presentazione non era una rappresentazione genuina delle sue capacità. Secondo Bloomberg, Google ha apportato diverse modifiche alle interazioni con Gemini per creare la demo, sollevando preoccupazioni sull'accuratezza delle sue affermazioni.

Una modifica degna di nota è stata la riduzione della latenza per la dimostrazione. Ciò implica che i tempi di risposta effettivi dell'IA potrebbero essere significativamente più lenti di quanto mostrato nel video. Inoltre, l'output di Gemini è stato accorciato per brevità, il che significa che le risposte mostrate nella demo potrebbero non riflettere le risposte tipiche dell'IA in scenari del mondo reale.

Forse la rivelazione più significativa è che la demo non è stata condotta in tempo reale o in formato vocale. È stata invece costruita utilizzando fotogrammi di immagini statiche da riprese e prompt forniti tramite testo. Questo significa che Gemini stava essenzialmente identificando contenuti all'interno di immagini statiche piuttosto che impegnarsi in conversazioni dinamiche in tempo reale come suggerito dalla presentazione di Google. La disparità tra la demo e la realtà ha lasciato molti a interrogarsi sull'accuratezza delle capacità di Gemini.

Confronto tra Gemini e ChatGPT di OpenAI

La dimostrazione di Google affermava anche che Gemini superava il modello GPT-4 di OpenAI in quasi tutti i test di benchmark. Tuttavia, un esame più dettagliato dei numeri rivela un vantaggio meno sostanziale per Gemini. Nonostante GPT-4 fosse disponibile da quasi un anno, Gemini è riuscito a superare di poco le altre soluzioni solo di pochi punti percentuali in molti dei benchmark. Questo suggerisce che Gemini potrebbe aver raggiunto il prodotto di OpenAI solo di recente e lascia supporre che il panorama potrebbe cambiare con l'introduzione di GPT-5.

Gli utenti di Gemini Pro, la versione che alimenta Google Bard, hanno espresso il loro malcontento nei confronti del modello di intelligenza artificiale. Segnalazioni su X (ex Twitter) indicano che Gemini è soggetto alle comuni "allucinazioni" sperimentate da altri chatbot. Ad esempio, quando gli è stato chiesto di fornire una parola francese di sei lettere, Gemini ha prodotto con sicurezza una parola di cinque lettere, evidenziando le sue limitazioni nelle lingue non inglesi.

Gli utenti hanno inoltre incontrato frustrazione quando hanno richiesto una generazione di codice accurata e la sintesi di notizie sensibili da parte di Gemini. Anche compiti relativamente semplici, come nominare gli ultimi vincitori degli Oscar, hanno portato a risposte errate. Queste esperienze degli utenti suggeriscono che, per il momento, Gemini potrebbe non all'altezza delle alte aspettative stabilite dalla presentazione elegante di Google.