Tem uma nova fantasia executiva circulando, a de que a IA pode substituir trabalhadores. Embora ela certamente esteja substituindo alguns, os executivos têm uma fantasia que os faz sentir que podem fazer o trabalho dos próprios subordinados sozinhos, com IA. Que eles sabem programar! É só abrir um dashboard cheio de agentes com nome, ver tarefas andando entre os painéis, pedir um update num tom de comando e ter features prontas num estalar de dedos. Parece um sonho, principalmente quando você passa suas "grandes ideias" por ela e a IA te diz que você é incrível. Já tem até um termo pra isso agora, psicose por IA.
É por isso que boa parte do entusiasmo executivo com IA hoje parece delirante visto de fora. Não porque as ferramentas não façam nada. Não porque ninguém extraia valor delas. Quanto mais alto você está num organograma, mais distante do trabalho de verdade e dos detalhes. Os detalhes de que os usuários gostam. Os detalhes que a IA alucina e corrói do seu produto num esforço de aproximá-lo da média sobre a qual foi treinada.
O problema da bajulação piora isso. Os modelos atuais costumam ser ansiosos demais por soar suaves, prestativos e afirmativos, porque são treinados nesse tipo de feedback. O usuário ficou feliz? Ótimo, então aprenda com o que quer que você tenha feito naquela conversa. Coloque isso nas mãos de uma pessoa poderosa que já vive a uma distância da contradição e você tem um loop nojento em que seus funcionários podem tentar te dizer que sua ideia não é boa, mas a IA fica te dizendo o quanto ela é incrível e o quanto é a coisa certa a fazer.
A IA deve ser pensada como um estagiário-ávido-por-agradar-viciado-em-wikipedia-na-coca e conduzida por um especialista de verdade. Você não conduziria um estagiário numa cirurgia de coração aberto, conduziria? Então não tenha a impressão de que você consegue controlar a IA fazendo isso.
E vários estudos, como este: https://pmc.ncbi.nlm.nih.gov/articles/PMC12805049/ que estão compilando informação sobre pessoas perdendo a cabeça com o loop de feedback viciante que faz você se sentir inteligente e compreendido.