Quem contrata um especialista em IA e só vê slides na primeira conversa vai receber um documento de estratégia. Peça outra coisa: um sistema que funcionou para alguém, o número que saiu dele e uma coisa que deu errado. Depois entregue uma tarefa que cabe em duas semanas, com preço fixo e um jeito de dar nota ao resultado.
Eu vendo engenharia de IA, então tenho interesse no assunto. Faça o mesmo teste comigo. Se eu não passar, não me contrate.
Por que tanta gente desconfia?
A falha é fácil de esconder. A saída de um modelo parece certa estando certa ou não, e alguém precisa conferir. Quem vende o trabalho não deveria ser o único a avaliá-lo.
Num tópico do Reddit de julho de 2026, quem abriu a conversa disse que alguns consultores parecem sérios, mas que outros parecem ter aprendido meia dúzia de palavras da moda, montado um pacote de prompts do ChatGPT e agora vendem estratégia de transformação com IA por milhares de dólares. Uma resposta deu o filtro numa linha: pergunte em que o último projeto deles falhou. Outra disse que o consultor de IA útil costuma ser o que deixa o projeto menor.
Concordo com a última. Projeto menor também é mais fácil de orçar e de avaliar.
Que respostas você deve esperar na primeira conversa?
Sete perguntas, cada uma com o que eu gostaria de ouvir e o que me faria desconfiar. Respondo as duas primeiras pelo nosso lado.
Em que o seu último projeto de IA falhou?
Quero uma falha concreta, com o custo e o que mudou depois. Desconfie de “correu tudo bem” e de “tivemos alguns desafios”. A nossa está à vista: um assistente de e-mail que montamos para uma plataforma de moradia fez 22 de 24 numa avaliação congelada. Sobram duas falhas para ler uma a uma e poucos casos para falar em taxa de acerto. Ele ainda não está em produção, e não temos um histórico longo de tarefas resolvidas em produção para nenhum agente.
Como vamos saber que funciona?
A boa resposta é um conjunto de exemplos reais, com a resposta certa anotada ao lado de cada um, e uma nota. Num serviço de publicidade que construímos, onde um sistema de IA planeja campanhas e gera as peças e uma pessoa aprova cada uma, dez prompts proibidos geraram zero peças, e cada juiz de IA foi testado com exemplos rotulados antes de entrar no ar. Se o consultor diz “revisamos as saídas juntos”, não há medição.
A equipe de engenharia da Anthropic escreve que, para começar a avaliar um agente, bastam de 20 a 50 tarefas simples tiradas de falhas reais. Juntá-las pode levar uma tarde. Se pedirem meses de dados antes de começar, pergunte por quê.
Quanto custa cada tarefa quando já está rodando?
Espere uma fórmula com chamadas ao modelo, novas tentativas e verificações, medida nos seus exemplos. Um preço de construção sem nada sobre a operação esconde a parte mais cara, porque o agente gasta a cada tarefa. A conta está em Quanto custa um agente de IA?.
Quem confere a saída do modelo, e quem revisa o revisor?
Uma pessoa aprova. Se houver um modelo juiz, ele foi testado antes com exemplos rotulados. Um modelo que aprova o próprio trabalho é mau sinal.
Um workflow simples resolveria?
Bom consultor avalia isso primeiro e diz se resolve. Se a resposta é sempre “um agente”, ele está vendendo o que tem na prateleira.
De quem são os prompts, os exemplos e o código, e em quais contas rodam?
Devem ser seus, nas suas contas ou em contas que você aprovou. Se a plataforma dele guarda tudo, trocar de fornecedor sai caro.
Quem vai fazer o trabalho, e posso entrevistar essa pessoa?
Alguém com nome, com quem você fala antes de assinar. “Alocaremos alguém da nossa equipe” não é resposta.
Como testar o consultor antes de assinar?
Pague primeiro por um pedaço pequeno. Escolha uma tarefa e anote exemplos reais com a resposta certa ao lado. O consultor monta o mais simples que possa funcionar, roda nos seus exemplos e devolve quatro coisas: quantos resultados foram aprovados, como falhou, quanto custou um resultado aprovado e o que faltaria para chegar à produção.
Confira os exemplos antes de entregá-los. Para a Anthropic, uma boa tarefa é aquela que dois especialistas no assunto avaliam do mesmo jeito, cada um por conta própria. Se duas pessoas do seu time discordam sobre uma saída estar certa, nenhum consultor consegue dar nota a ela, e essa discordância se resolve primeiro.
É assim que funciona o nosso Piloto de agente de IA: US$ 5.000, duas semanas, um agente num caso real seu, com avaliações e custo por tarefa medidos. O escopo está na página de engenharia de IA. Ele testa o trabalho conjunto tanto quanto o agente, e você pode aplicar o mesmo teste a qualquer outra empresa.
Quanto custa um consultor de IA?
Não vou dar uma faixa de mercado, porque faixa sem escopo não diz nada. Estes são os nossos números:
- Piloto de agente de IA: US$ 5.000 fixos, duas semanas.
- Discovery, se você não tem certeza de que o caso está pronto: US$ 7.000, de uma a quatro semanas, terminando num roadmap.
- Por hora, para o que vier depois: Sênior US$ 45 a 50, Líder ou Arquiteto US$ 55 a 60, Pleno 35 a 40, Júnior 30.
A tabela completa está na página de preços.
O que deixar escrito, e quando não contratar?
Três linhas do contrato pesam mais que o resto. Prompts, conjunto de exemplos e código devem ser seus desde o primeiro dia (conosco, código e propriedade intelectual são do cliente desde o dia um). “Pronto” deve ser escrito como uma nota nos seus exemplos, e não como “entregue”. E alguém com nome responde pelo trabalho. Conosco, o cliente entrevista o engenheiro que vai fazê-lo e eu lidero cada projeto de ponta a ponta.
Não contrate ninguém se, no seu time, ninguém sabe distinguir uma saída certa de uma errada, porque isso nenhum consultor resolve. Também não se a tarefa é rara, ou se o risco é alto e ninguém vai conferir o resultado. O consultor que diz, na primeira semana, que um workflow simples basta acabou de economizar o seu dinheiro. Contrate esse.
Esta semana, mande o mesmo recado para duas empresas: a tarefa, seus dez primeiros exemplos com as respostas e uma pergunta, “quanto custa cada resultado aprovado?”. Compare o que voltar. A que pedir mais exemplos antes de dar preço é a que vale uma conversa. Se quiser a gente nessa comparação, comece o piloto de agente de IA: US$ 5.000, 2 semanas.
Fontes
- Reddit, r/ArtificialInteligence, tópico “1uy2izh”, 16 de julho de 2026. Resumo em português o que escreveram o autor do tópico e duas respostas, como foi recuperado em 11 de outubro de 2026. O original está em inglês e a tradução é minha.
- Anthropic, “Demystifying evals for AI agents”, publicado em 9 de janeiro de 2026 e consultado em 15 de outubro de 2026.
