Como medir o retorno de um agente de IA: escolha a tarefa, anote o antes, revise o depois e decida com o custo por tarefa
Para medir o retorno de um agente de IA, compare a mesma tarefa antes e depois dele: quanto tempo ela levava, quantos erros tinha e quanto custava. Escolha duas ou três tarefas, anote esses números por uma ou duas semanas sem o agente e depois rode o agente por 30 dias. A diferença entre os dois períodos, descontando o tempo que você gasta revisando, é o retorno real.
No post sobre o que o agente de IA pode fazer sozinho, vimos que todo agente deve ter um registro do que fez: data, ação, motivo e resultado. Esse registro é a matéria-prima para medir o retorno.
Por que medir o retorno de um agente de IA?
Porque a sensação de que o agente ajuda nem sempre bate com os números. Em um estudo publicado em 10/07/2025, o METR acompanhou 16 desenvolvedores de software experientes em 246 tarefas reais. Com IA, eles levaram 19% mais tempo para terminar. Antes, esperavam ganhar 24% de velocidade e, mesmo depois, ainda achavam que tinham sido 20% mais rápidos. O estudo é sobre programação e o próprio METR avisa que as ferramentas mudaram desde então, mas a lição serve para qualquer rotina: sem um ponto de partida anotado, a percepção engana.
Existe também o risco de investir sem enxergar resultado. Em comunicado de 25/06/2025, o Gartner previu que mais de 40% dos projetos de IA agêntica serão cancelados até o fim de 2027, por custos crescentes, valor de negócio pouco claro ou controles de risco inadequados. Medir evita o segundo motivo.
O que medir em um agente de IA?
Quatro coisas: tempo poupado, erros evitados, custo por tarefa e um indicador de resultado. As três primeiras mostram se o agente se paga; a quarta mostra se ele mexe no que importa para o negócio.
| Métrica | O que mede | Como medir | Onde anotar |
|---|---|---|---|
| Tempo poupado | Minutos economizados por tarefa e por semana | Tempo da tarefa antes menos tempo depois, incluindo a revisão | Planilha, uma linha por tarefa |
| Erros evitados | Falhas que deixaram de acontecer ou foram corrigidas antes de sair | Contar erros por semana no período base e no registro do agente | Registro de ações do agente |
| Custo por tarefa | Quanto cada execução custa de verdade | Tokens + ferramenta + minutos de revisão vezes o valor da sua hora | Planilha, coluna de custo |
| Indicador de resultado | Efeito no negócio | Tempo de resposta ao cliente, custo por venda ou reuniões marcadas | Relatório que você já usa |
Como medir o tempo poupado?
Cronometre a tarefa antes e depois, sempre contando o tempo de revisão. Pense no relatório da manhã: se você levava 40 minutos para juntar anúncios e vendas e agora leva 10 para conferir o que o agente montou, são 30 minutos por dia, cerca de duas horas e meia por semana de cinco dias.
Para ter uma referência, o Federal Reserve de St. Louis publicou em 27/02/2025 uma pesquisa feita em novembro de 2024: quem usava IA generativa no trabalho economizou em média 5,4% das horas, perto de 2,2 horas por semana numa jornada de 40 horas. Um terço dos usuários economizou uma hora ou menos.
Como contar os erros evitados?
Use o registro de ações do agente e compare com o período base. Antes do agente, anote quantas vezes por semana um lead ficou sem etiqueta no CRM, um horário foi confirmado errado ou um anúncio passou do limite de gasto sem ninguém ver.
Depois, conte no registro duas coisas: os erros que deixaram de acontecer e os erros que o próprio agente cometeu e você corrigiu. Os dois entram na conta. Um agente que evita cinco erros por semana, mas cria três, entrega bem menos do que parece.
Como calcular o custo por tarefa?
Some três partes: tokens, ferramenta e tempo de revisão. No post sobre tokens de IA, vimos que cada pedido ao modelo consome tokens e tem um preço. A ferramenta tem a assinatura do mês. E os minutos que você gasta conferindo o trabalho do agente também custam dinheiro.
Um exemplo simples: se o agente responde 300 mensagens no mês, gasta R$ 30 em tokens, a ferramenta custa R$ 150 e você revisa por 5 horas, com a sua hora valendo R$ 60, o mês custa R$ 480. Isso dá R$ 1,60 por mensagem. Compare com o custo de responder essas mensagens sem o agente.
Atenção: a revisão também é custo. Se toda resposta precisa ser reescrita, o tempo poupado some e a tarefa pode não compensar.
Qual indicador de resultado acompanhar?
Escolha um só, ligado à tarefa que o agente faz. Se ele responde clientes, acompanhe o tempo da primeira resposta. Se qualifica leads, olhe reuniões marcadas. Se cuida de campanhas, veja o custo por venda.
O relatório do MIT NANDA sobre IA nas empresas, noticiado pela Fortune em 18/08/2025, mostra por que esse cuidado importa: só cerca de 5% dos projetos piloto de IA generativa geraram aceleração rápida de receita, e a maioria teve pouco ou nenhum impacto mensurável no resultado. O estudo também aponta que mais da metade dos orçamentos vai para ferramentas de vendas e marketing, enquanto o maior retorno apareceu na automação de tarefas internas.
Como montar a medição do seu agente?
Com uma planilha simples e uma revisão a cada duas semanas. Este é o checklist que a Oficina Martech usa:
- Escolha duas ou três tarefas: repetitivas, frequentes e fáceis de cronometrar.
- Anote o ponto de partida: tempo, erros e custo de cada tarefa por uma ou duas semanas, ainda sem o agente.
- Monte uma planilha simples: uma linha por tarefa, com colunas de tempo, erros, custo e o indicador de resultado.
- Rode o agente por 30 dias: com o registro de ações ligado.
- Revise a cada duas semanas: compare com o ponto de partida e anote o tempo de revisão.
- Decida: ampliar o que se pagou, ajustar o que ficou no meio do caminho e desligar o que não compensou.
Conclusão
Medir o retorno de um agente de IA não exige um painel sofisticado: exige um antes, um depois e honestidade na conta da revisão. Com esses números, você sabe o que ampliar e o que desligar. Se quer ajuda para escolher as tarefas e montar essa medição, peça um diagnóstico com um especialista da Oficina Martech.
Perguntas frequentes
Quanto tempo leva para saber se um agente de IA vale a pena?
Cerca de 30 dias de uso, depois de uma ou duas semanas medindo a tarefa sem o agente. Revise na metade do caminho para corrigir problemas cedo.
O tempo de revisão entra no custo do agente?
Entra, e costuma ser a parte mais esquecida. Multiplique os minutos de revisão pelo valor da sua hora e some aos tokens e à ferramenta. Se a revisão toma quase o mesmo tempo da tarefa original, o agente não está compensando.
Preciso de uma ferramenta especial para medir o retorno?
Não. Uma planilha com uma linha por tarefa e o registro de ações do agente resolvem no começo. O importante é anotar o ponto de partida antes de ligar o agente.
E se o agente não der retorno?
Primeiro, veja se o problema é a tarefa, as instruções ou os dados que ele recebe. Ajuste uma coisa por vez e meça de novo. Se ainda não compensar, desligue e teste outra tarefa.
Pulga atrás da orelha
Um agente se pagou, os números estão na planilha e a vontade de ter mais aparece. Mas vale a pena ter vários agentes trabalhando juntos, um que pesquisa, outro que escreve e outro que revisa? E como coordenar todos sem virar bagunça? É o tema do próximo post.
