Novo · AI for Business Leaders (segunda edição) — Compre a capa dura direto, ₹1,799 →
Vinay Pasricha Explorador da Emergência
Agora Já disponível The Signal A escrever Collapse Construindo GoodSpace AI

Como você mede o ROI de um agente de IA?

Resposta curta: Escolha um número que você já acompanha, anote o que ele era antes do agente e defina uma data para expandir, corrigir ou parar. Não publique um retorno que você não mediu. Uma porcentagem sem uma linha de base é um slogan.

Sou Vinay Pasricha. Eu lidero a GoodSpace AI em Noida e escrevi AI for Business Leaders. Não vou lhe dar um número de retorno para agentes na Índia. Não medi o seu, e uma porcentagem emprestada seria uma ficção. O método abaixo é o que eu utilizo em vez disso.

Três níveis, um número

O livro separa os ganhos de IA em eficiência, eficácia e vantagem. Eficiência é uma tarefa feita com menos esforço. Eficácia é a mesma tarefa feita melhor: menos erros, uma resposta certa mais rápida. Vantagem é um ganho que um concorrente não pode copiar no próximo trimestre, geralmente porque reside na sua própria memória e no seu próprio modo de trabalhar.

A maioria dos projetos de agentes deve ser julgada no primeiro ou no segundo nível. Vantagem é uma alegação posterior, e raramente é verdade para uma ferramenta que você aluga. Se um fornecedor começar destacando a vantagem, pergunte qual número no seu negócio mudou, e a partir de qual linha de base. Se eles não souberem dizer, estão vendendo uma história.

Um número é uma disciplina. "Tempo economizado" não é um número até que você diga o tempo de quem, em qual tarefa, em comparação com qual semana. "Serviço melhor" não é um número até que você diga quais respostas, julgadas como. Escolha uma contagem que você já produz: faturas processadas, orçamentos enviados, chamados reabertos, dias que uma vaga ficou aberta. Novos painéis de controle são a forma como a medição é evitada.

Uma carta de diretrizes, não um sentimento

  • Linha de base: o número das quatro semanas anteriores ao início do trabalho do agente. Escreva-o antes de começar, não depois.
  • O número do agente: a mesma contagem, ao longo do mesmo tipo de semana, enquanto o agente está em uso.
  • O custo que você consegue ver: a fatura, mais as horas que uma pessoa específica passou verificando. Horas contam. Uma ferramenta gratuita que consome a tarde de um gerente não é gratuita.
  • A data de decisão: expandir, corrigir ou parar. Coloque-a em um calendário. Um piloto sem um fim vira parte da mobília.

Os apêndices incluem uma carta de projeto piloto e uma calculadora de ROI como ferramentas em branco. Eles não contêm um resultado para a sua empresa. Preencha-os com a sua linha de base. Deixe uma célula em branco em vez de digitar uma esperança.

Monitore a contagem de falhas com a mesma atenção que a contagem de sucessos. Um agente que acelera o trabalho e dobra o retrabalho não gerou retorno. Coloque o retrabalho na mesma página que o número principal, ou o número principal mentirá para você.

O que não contar

Não conte tarefas de demonstração. Não conte uma semana na qual uma pessoa realizou silenciosamente o trabalho ao lado do agente e você registrou o nome do agente. Não faça a média deste projeto com outro para obter um retorno para toda a empresa. O objetivo de ter um único número é que você possa se posicionar ao lado dele e explicá-lo.

Se o número não se moveu, isso é um resultado. Pare, ou corrija a memória e a tarefa, e execute o mesmo número novamente. Não mude o número pelo fato de o primeiro ter sido inconveniente. Mudar o número é como os pilotos sobrevivem sem trabalhar.

Use o Risk Ladder gratuito antes de permitir que o agente aja, e o Automate, Assist, Escalate para organizar as tarefas ao redor dele. Os oito passos estão em AI strategy for business. Collapse or Collapse é o argumento mais longo: uma pessoa é dona de um resultado e executa agentes para entregá-lo.

Uma coisa para fazer esta semana

Escolha o número. Escreva o valor do mês passado no papel, com a fonte: qual relatório, qual pessoa. Se você não conseguir encontrar o valor do mês passado, ainda não pode medir um retorno. Construa a contagem primeiro. O agente pode esperar uma semana.

De onde vem esta resposta

Esta resposta baseia-se em Three Levels of AI Strategy e Appendices: readiness audit and pilot charter em AI for Business Leaders.

Sua empresa terá seus próprios detalhes. Para fazer uma pergunta de acompanhamento com suas próprias palavras, tente Ask Vinay's books.

Vinay Pasricha é o fundador da GoodSpace AI e autor de seis livros, entre eles AI for Business Leaders.

Aprofunde-se em AI for Business Leaders

Esta resposta é a versão curta. O argumento completo, e o método por trás dele, está no livro.

Leia no Kindle Amazon

Sobre o livro · Todos os seis livros no Kindle

Um e-mail por semana

Novos ensaios e mais nada. Vários textos numa semana chegam numa única nota. Cancele a subscrição com um clique.