Modelos de IA atualizados da Apple ficam abaixo dos concorrentes

A Apple anunciou ontem na WWDC 2025 atualizações futuras em seu modelo de IA para apresentar em toda a suíte de inteligência. O modelo teve desempenho inferior em seus benchmarks em comparação com modelos antigos de empresas rivais como a OpenAI. No entanto, o gigante da tecnologia argumentou que o On-Device e o Apple Server foram melhorados em comparação com seus predecessores e podem entender mais de 15 idiomas.

De acordo com testadores humanos, o mais recente modelo on-device que roda localmente em iPhones e outros dispositivos teve desempenho semelhante a modelos antigos do Google e Alibaba em relação à geração de texto. Testadores humanos classificaram o Apple Server, projetado para rodar nos data centers da empresa, atrás do GPT-4o de um ano da OpenAI. Em uma avaliação separada, eles favoreceram o Llama 4 da Meta sobre o Apple Server na capacidade de analisar imagens. As classificações surpreenderam a Apple, pois Llama 4 o Scout teve desempenho ruim em comparação com laboratórios de IA como Google, Anthropic e OpenAI.

Desenvolvedores sentem-se céticos sobre a promessa de inovação da Apple

Desenvolvedores sentem negativamente em relação aos lançamentos da WWDC deste ano, incluindo o pequeno modelo de IA On-Device da Apple. Atul Kakkar, diretor de produto do aplicativo de finanças pessoais com IA Origi, revelou que, como desenvolvedor, ele não sentiu a intensidade da empolgação em torno do que a empresa de Tim Cook lançou. Ele acredita que o evento anual da WWDC já foi a festa mais agitada da tecnologia, mas agora está cercado por ceticismo de que o fabricante de iPhones possa acompanhar os gigantes da IA.

A Apple não divulga benchmarks para suas IAs, apresentando apenas uma avaliação direta pouco documentada

Mas mesmo segundo os próprios padrões da Apple, seus mais recentes modelos on-device são, na maioria, inferiores ao Gemma 3-4B aberto do Google ou ao Qwen 3-4B

E seu LLM de servidor é semelhante ao Llama 4 Scout pic.twitter.com/hwpOG5Lgyp

— Ethan Mollick (@emollick) Junho 10, 2025

O gigante da tecnologia está sob pressão para acompanhar o ritmo atualizando continuamente suas ferramentas de IA para desenvolvedores e criando uma experiência cativante para o consumidor dentro do conjunto Apple Intelligence. Grant McDonald, diretor executivo e co-fundador do app de aconselhamento para pais com IA Bobo, disse que a empresa de Tim Cook está fazendo coisas interessantes, mas isso não é suficiente para se destacar no meio do ruído.

McDonald acredita que permitir que desenvolvedores criem aplicativos com IA usando seus pequenos modelos de IA para execução local (On-Device) possa ser o valor que a empresa espera entregar. Modelos de IA pequenos são treinados em conjuntos de dados menores e usam menos poder de computação, o que significa que podem ser executados em um iPhone em vez de grandes servidores na nuvem. Ele disse que executar modelos no dispositivo é praticamente mais barato do que os baseados em nuvem, como GPT e Gemini. 

Desenvolvedores duvidam que os modelos para execução local possam ter um bom desempenho em comparação com os baseados em nuvem. Um desenvolvedor disse que eles não conseguirão ajustá-los em um conjunto de dados proprietário. McDonald disse que os modelos para execução local serão bons o suficiente para alguns aplicativos, mas não para o Bobo. O app de parentalidade personalizou seu modelo de IA com dados proprietários de consultores do sono, consultores de amamentação, fonoaudiólogos e outros especialistas em parentalidade. 

A divisão de pesquisa em IA da Apple luta para alcançar os concorrentes

O gigante da tecnologia prometeu uma atualização da Siri para incluir conteúdo mais personalizado, mas essa atualização foi adiada. Alguns clientes processaram a empresa por comercializar produtos que ainda não foram entregues. Pesquisadores disseram que, embora os modelos de IA tenham um desempenho muito bem em matemática e ciências, problemas complexos fornecem apenas a ilusão de pensamento. 

O gigante da tecnologia atrasou o desenvolvimento de grandes modelos de linguagem e a implementação de IA em seus dispositivos para ficar fora da conversa. Em WWDC, a empresa apresentou a Apple Intelligence para recursos de IA, que a comunidade considerou decepcionante. 

Os pesquisadores descobriram que os LRMs começam a falhar após certo ponto. Isso mostra que todos os modelos de raciocínio exibem um padrão semelhante no qual a precisão diminui progressivamente à medida que a complexidade do problema aumenta até chegar a zero. De acordo com os pesquisadores, os modelos de raciocínio inicialmente aplicam mais tokens de pensamento, mas à medida que a complexidade aumenta, eles desistem e, contra-intuitivamente, seu esforço de raciocínio começa a diminuir apesar do aumento da dificuldade do problema. 

De acordo com Dipanjan Chatterjee, analista de pesquisa da Forrester, o silêncio em torno da Siri foi ensurdecedor. Ele revelou que nenhuma quantidade de correção de texto ou emojis fofos pode preencher a experiência de IA interativa aguardada, da qual ele sabe que a Siri seria capaz. Ele acredita que o fim da Siri está próximo se a empresa não agir rapidamente. A empresa não forneceu um cronograma preciso para a atualização da Siri. Ainda assim, indicou que isso não acontecerá até o próximo ano, no mínimo, de acordo com Craig Federighi, um alto executivo de software da empresa.