Revisão de Custo Eleva o Preço do Modelo de IA o3 da OpenAI
Quando a OpenAI revelou seu modelo de IA de “raciocínio” denominado o3 em dezembro, a empresa colaborou com os criadores do benchmark ARC-AGI, destinado a testar inteligências artificiais altamente capazes, para demonstrar as capacidades do o3. No entanto, meses depois, os resultados foram revisados e agora parecem um pouco menos impressionantes do que inicialmente.
Na semana passada, a Arc Prize Foundation, responsável pela manutenção e administração do ARC-AGI, atualizou os custos estimados de computação para o modelo o3. Inicialmente, a organização estimava que a configuração de melhor desempenho do o3 testada, o3 high, custava cerca de US$ 3.000 para resolver um problema do ARC-AGI. Agora, a Arc Prize Foundation acredita que o custo pode ser muito mais alto, possivelmente em torno de US$ 30.000 por tarefa.
Esta revisão é notável porque ilustra o quão caro podem ser os modelos de IA mais sofisticados de hoje para certas tarefas, pelo menos no início. A OpenAI ainda não definiu um preço para o o3 - ou o lançou, mesmo. No entanto, a Arc Prize Foundation acredita que o preço do modelo o1-pro da OpenAI serve como um proxy razoável.
Para contexto, o1-pro é o modelo mais caro da OpenAI até o momento. “Nós acreditamos que o o1-pro é uma comparação mais próxima do custo verdadeiro do o3 [...] devido à quantidade de computação usada durante o teste”, disse Mike Knoop, um dos cofundadores da Arc Prize Foundation, ao TechCrunch. “Mas isso ainda é um proxy, e mantivemos o o3 rotulado como prévia em nosso leaderboard para refletir a incerteza até que o preço oficial seja anunciado.”
Um preço alto para o o3 high não seria surpreendente, considerando a quantidade de recursos computacionais que o modelo supostamente utiliza. Segundo a Arc Prize Foundation, o o3 high utilizou 172 vezes mais computação do que o o3 low, a configuração com menor uso de computação do o3, para enfrentar o ARC-AGI.
Além disso, há rumores há algum tempo sobre planos caros que a OpenAI está considerando introduzir para clientes empresariais. No início de março, o The Information relatou que a empresa pode estar planejando cobrar até US$ 20.000 por mês por “agentes” de IA especializados, como um agente de desenvolvimento de software.
Alguns podem argumentar que até os modelos mais caros da OpenAI custarão bem abaixo do que um contratante ou funcionário humano típico comandaria. Mas, como apontou o pesquisador de IA Toby Ord em uma postagem no X, os modelos podem não ser tão eficientes. Por exemplo, o o3 high precisou de 1.024 tentativas para cada tarefa no ARC-AGI para alcançar sua melhor pontuação.