Inteligência Artificial falha em 97% das tarefas, aponta estudo

A Inteligência Artificial vem sendo apresentada como uma tecnologia capaz de revolucionar o mercado de trabalho, de automatizar processos complexos e até mesmo de substituir profissionais humanos em diversas áreas. 

No entanto, um estudo recente trouxe uma visão bem mais cautelosa sobre esse avanço da IA. De acordo com a pesquisa, sistemas de Inteligência Artificial falharam em 97% das tarefas profissionais analisadas. Ou seja, isso é algo que levanta um alerta importante sobre os limites reais da tecnologia quando aplicada a projetos complexos e criativos do mundo real.

A pesquisa que apontou que a Inteligência Artificial falha em 97% das tarefas

Apesar do crescimento acelerado das ferramentas de IA nos últimos anos, o estudo revelou que ainda existem barreiras significativas quando essas tecnologias são colocadas à prova em cenários profissionais reais. 

Desse modo, a pesquisa foi conduzida pelo Center for AI Safety, em parceria com a Scale, e teve como objetivo avaliar se modelos avançados de Inteligência Artificial conseguiriam executar projetos completos de trabalho remoto com o mesmo nível de qualidade exigido de freelancers humanos.

Vale ressaltar que, em vez de testes tradicionais baseados em perguntas fechadas ou problemas isolados de lógica, os pesquisadores optaram por algo mais próximo da realidade do mercado. 

Em outras palavras, eles submeteram sistemas de IA a projetos reais, semelhantes aos de plataformas de trabalho remoto. Ou seja, contavam com briefings detalhados, prazos definidos e critérios de qualidade comparáveis aos que clientes reais exigem.

Modelos de IA avaliados no estudo

Entre as ferramentas que a pesquisa analisou estavam algumas das soluções mais avançadas do mercado, como por exemplo Manus AI, Grok 4, Sonnet 4.5, GPT-5, ChatGPT agent e Gemini 2.5 Pro. Um ponto importante é que todas receberam exatamente os mesmos desafios que profissionais humanos já haviam executado com sucesso anteriormente.

O resultado foi surpreendente: em mais de 97% dos casos, as entregas que as Inteligências Artificiais fizeram não atingiram o nível mínimo de qualidade necessário para serem aceitas como serviços profissionais. Isso não significa que as respostas estivessem completamente erradas, mas sim que apresentavam falhas suficientes para exigir retrabalho humano significativo.

O que esse resultado realmente significa

Na prática, o estudo mostra que, embora a IA seja eficiente em tarefas pontuais, ela ainda encontra grandes dificuldades quando precisa lidar com projetos abertos, que exigem interpretação subjetiva, adaptação contínua e também decisões estratégicas ao longo do processo. Logo, isso coloca em xeque a ideia de que a Inteligência Artificial, sozinha, já estaria pronta para substituir profissionais criativos ou técnicos em larga escala.

Um estudo apontou que a Inteligência Artificial falha em 97% das tarefas.
Um estudo apontou que a Inteligência Artificial falha em 97% das tarefas. | Foto: DALL-E 3

Detalhes desse estudo sobre a Inteligência Artificial

Um dos grandes diferenciais dessa pesquisa sobre a IA foi o tipo de tarefa que foi escolhida para avaliação. Nesse sentido, os projetos envolviam áreas diversas e que são altamente complexas.

Entre elas, podemos citar exemplos como: desenvolvimento de jogos, design de produtos, arquitetura, análise de dados e animação de vídeo. Dessa maneira, em todos os casos, não bastava apenas conhecimento técnico: era necessário senso crítico, criatividade, tomada de decisão e capacidade de adaptação ao longo do trabalho.

Projetos reais e exigências profissionais

Os modelos de Inteligência Artificial receberam briefings idênticos aos que clientes reais usam em plataformas de trabalho remoto. Esses briefings continham objetivos claros, restrições de prazo e critérios de avaliação semelhantes aos do mercado. A intenção dos pesquisadores era observar se a IA conseguiria conduzir todo o fluxo de trabalho, do planejamento inicial até a entrega final, sem intervenção humana relevante.

Para mensurar os resultados, foi criado o Índice de Trabalho Remoto (RLI, na sigla em inglês). Sendo assim, esse indicador reúne projetos reais, com valor financeiro concreto, usados para avaliar o desempenho da Inteligência Artificial em tarefas práticas do cotidiano profissional.

Resultados quantitativos do experimento

Vale destacar que os números reforçam a dificuldade enfrentada pelas máquinas. Em outras palavras, a melhor taxa de automação registrada foi a do Manus AI, com apenas 2,5% de sucesso. 

Nenhum outro modelo conseguiu superar esse índice. Os projetos avaliados tinham custos que somavam mais de 10.000 dólares e exigiam, em alguns casos, mais de 100 horas de trabalho humano para serem concluídos adequadamente.

Com isso, constata-se que o ponto central não era medir se a IA acertava respostas específicas, mas se conseguia entregar um resultado final com padrão profissional. E foi justamente nesse aspecto que a maioria das soluções falhou de forma consistente.

Principais falhas da Inteligência Artificial

O estudo deixa claro que as limitações da Inteligência Artificial vão muito além de erros pontuais ou lapsos de informação. Em outras palavras, as falhas identificadas são, em grande parte, estruturais e recorrentes em diferentes tipos de projetos.

Dificuldade em lidar com ambiguidades

Uma das principais fragilidades que se observou foi a incapacidade de interpretar corretamente ambiguidades nos briefings. Nesse sentido, diferentemente dos humanos, que fazem perguntas, ajustam expectativas e usam contexto implícito, a IA tende a interpretar instruções de forma literal. Isso é algo que compromete a qualidade final do trabalho.

Falta de consistência ao longo do projeto

Paralelamente, outro problema recorrente foi a dificuldade de manter consistência em projetos longos. Sendo assim, em tarefas que exigiam várias etapas interdependentes, as Inteligências Artificiais frequentemente se contradiziam, perdiam o foco inicial ou tomavam decisões incompatíveis com escolhas feitas anteriormente.

Ausência de aprendizado contínuo durante a execução

Enquanto profissionais humanos aprendem com erros e feedbacks ao longo do desenvolvimento de um projeto, a IA não demonstrou capacidade de aprendizado contínuo durante a execução. Ou seja, mesmo após identificar falhas, os modelos repetiam padrões problemáticos, o que comprometia o resultado final.

Limitações em demandas abertas e criativas

Adicionalmente, o estudo também mostrou que a automação falha principalmente quando se confronta a Inteligência Artificial com demandas abertas, nas quais não existe uma única resposta correta. Dessa maneira, situações que exigem adaptação, priorização e julgamento subjetivo continuam sendo um grande desafio para os sistemas atuais.

É possível que essa situação da Inteligência Artificial se altere no futuro?

Os resultados da pesquisa vão na contramão de previsões mais alarmistas que apontam para uma substituição iminente de profissionais criativos e técnicos pela IA. Ao invés de confirmar um cenário de obsolescência acelerada do trabalho humano, o estudo reforça que, pelo menos no estágio atual, a Inteligência Artificial apresenta melhor desempenho quando atua como ferramenta de apoio. 

Em outras palavras, longe de operar de forma plenamente autônoma, ela ainda depende fortemente de supervisão, direcionamento e validação humana para alcançar resultados consistentes.

IA como assistente, não como substituta

Na prática, a IA já se mostra extremamente eficiente para acelerar fluxos de trabalho, sugerir ideias iniciais, organizar informações, automatizar tarefas repetitivas e apoiar a análise de grandes volumes de dados. 

Essas capacidades aumentam a produtividade e reduzem o tempo gasto em atividades operacionais. No entanto, quando se trata de assumir projetos complexos do início ao fim, com responsabilidade integral pela tomada de decisões e pela entrega final, a tecnologia ainda encontra limitações técnicas e conceituais relevantes.

Evolução gradual, não instantânea

Isso não significa que a tecnologia vá estagnar. Os próprios autores do estudo destacam que houve melhora gradual no desempenho dos modelos ao longo do tempo. Avanços em aprendizado contextual, memória de longo prazo e integração com feedback humano podem reduzir essas limitações no futuro.

O papel do fator humano nos próximos anos

Mesmo com evoluções significativas, é provável que o papel humano continue sendo central, especialmente em áreas que exigem criatividade, empatia, julgamento ético e tomada de decisão estratégica. Sendo assim, a tendência aponta mais para uma colaboração entre humanos e IA do que para uma substituição completa.

Lições a aprender com essa pesquisa sobre a Inteligência Artificial

O estudo traz aprendizados valiosos tanto para empresas quanto para profissionais e desenvolvedores de tecnologia. Nesse sentido, a principal lição é que o hype em torno da Inteligência Artificial precisa ser equilibrado com uma análise realista de suas capacidades atuais.

Expectativas para a Inteligência Artificial mais alinhadas com a realidade

Empresas que apostam na automação total de processos complexos podem enfrentar frustrações se não considerarem as limitações da IA. O uso estratégico, como ferramenta de suporte, tende a gerar resultados mais consistentes.

Valorização do trabalho humano

Os dados reforçam que habilidades humanas continuam sendo essenciais. Sendo assim, criatividade, adaptação, comunicação e senso crítico seguem como diferenciais difíceis de replicar por máquinas, ao menos no curto e médio prazo.

Desenvolvimento responsável da tecnologia

Para os desenvolvedores, a pesquisa aponta a necessidade de criar sistemas mais robustos, capazes de lidar melhor com incertezas, feedbacks e fluxos de trabalho completos. O avanço da IA depende não apenas de mais dados, mas de modelos mais alinhados à complexidade do mundo real.

Em resumo, o estudo mostra que, apesar de todo o avanço recente, a Inteligência Artificial ainda está longe de substituir completamente o trabalho humano em tarefas profissionais complexas. 

Ou seja, a IA evolui sim, mas seus limites atuais deixam claro que o futuro do trabalho deve ser colaborativo. Se você quer acompanhar análises profundas, estudos e tendências sobre Inteligência Artificial, continue acompanhando conteúdos especializados e fique sempre um passo à frente nesse debate!

*com uso de Inteligência Artificial

Artigos recentes