O novo chatbot da OpenAI poderá custar US$ 200 por mês. O que é ele e quem vai pagar por ele?

Recentemente, a OpenAI lançou uma versão mais sofisticada do modelo o1reasoning, chamada o1 pro mode. O chatbot foi apresentado na quinta-feira e custa US$ 200 por mês. No entanto, a comunidade ainda não sabe como interpretá-lo.

O novo plano ChatGPT Pro da empresa oferece acesso ao “modo o1 pro”, que utiliza poder computacional adicional para fornecer as respostas mais abrangentes e confiáveis ​​às perguntas mais complexas relacionadas a ciência, matemática e programação.

Bob McGrew, ex-diretor da OpenAI, considerou o modo o1 pro um exemplo de "excesso de inteligência", que se refere à incapacidade dos usuários (e potencialmente dos criadores do modelo) de extrair valor de qualquer "inteligência extra" como resultado das limitações inerentes a uma interface simples baseada em texto. 

O ChatGPT é o único método de interação com o modo o1 Pro, assim como ocorre com os outros modelos da OpenAI. Bob McGrew observou que o ChatGPT não é perfeito. Ele acrescentou que é verdade que o preço de US$ 200 cria altas expectativas. Além disso, o ChatGPT Pro não é uma tarefa fácil, como evidenciado pela sua recepção inicial nas redes sociais.

Eis como o novo assistente de IA de código aberto foi avaliado

Segundo relatos, o modo o1 pro será a assinatura de chatbot mais cara do mundo, com uma mensalidade de US$ 200, o que equivale a US$ 2.400 por ano. O serviço, no entanto, oferece outros benefícios, como a remoção dos limites de taxa de requisições e acesso ilimitado a outros modelos da OpenAI. 

O cientista da computação britânico Simon Willison perguntou: "A OpenAI compartilhou algum exemplo concreto de prompts que falham no o1 normal, mas funcionam no o1-pro?"

Pelo contrário, as falhas já foram documentadas. O Sudoku é um desafio para o modo o1 pro, e é dificultado por uma ilusão de ótica cômica que é facilmente perceptível a qualquer pessoa.

Um engenheiro de IA, Tibor Blaho, escreveu no X: "tanto o o1 quanto o o1-pro falharam aqui, provavelmente ainda devido às limitações de visão (o mesmo acontece com os quebra-cabeças de Sudoku)." Tibor Blaho também observou que tanto o o1 quanto o o1-pro falharam em termos de capacidades visuais. 

Tanto o o1 quanto o o1-pro falharam aqui, provavelmente ainda devido às limitações de visão (o mesmo acontece com os quebra-cabeças de Sudoku)https://t.co/mAVK7WxBrq pic.twitter.com/O9boSv7ZGt

— Tibor Blaho (@btibor91) 5 de dezembro de 2024

O código o1-pro não conseguiu entender/ler o enigma corretamente.

De acordo com os testes internos da OpenAI, o modelo padrão o1 apresenta um desempenho apenas marginalmente melhor do que o modo o1 pro em problemas de programação e matemática.

Para demonstrar a consistência do modo o1 pro, a OpenAI realizou uma avaliação mais rigorosa dos mesmos benchmarks. O modelo só era considerado como tendo resolvido uma questão sedentcorretamente a resposta quatro vezes em quatro tentativas. No entanto, as melhorias não foram substanciais nessas avaliações.

Na quinta-feira, o CEO da OpenAI, Sam Altman, foi obrigado a reiterar que o ChatGPT Pro não é adequado para a maioria das pessoas, apesar de sua afirmação anterior de que a OpenAI estava progredindo em direção a uma inteligência "tão barata que não precisaria ser medida"

Ele disse: "A maioria dos usuários ficará muito satisfeita com o o1 no plano [ChatGPT] Plus!"

Bob McGrew afirmou que a melhoria na confiabilidade pode ser o fator mais importante para o o1 pro, especialmente para a área médica.

Opiniões sobre o custo

Ameet Talwalkar, professor associado de aprendizado de máquina na Carnegie Mellon e sócio da Amplify Partners, disse: "Aumentar o preço em dez vezes me parece um risco muito grande", e acrescentou: "Acho que teremos uma ideia muito melhor, em poucas semanas, da demanda por essa funcionalidade."

Guy Van den Broeck, cientista da computação da UCLA, disse: "Não sei se o preço faz sentido e se modelos de raciocínio caros se tornarão a norma."

Os potenciais consumidores não recebem informações suficientes quando o modo o1 pro é descrito como o mais eficaz na resolução dos "problemas mais difíceis" 

É difícil justificar o pagamento de um valor maior na ausência de exemplos específicos das supostas capacidades aprimoradas do modelo, que incluem a habilidade de "pensar por mais tempo" e demonstrar "inteligência"