CHEAT SHEET DE MENSURAÇÃO
Mensuração é como você sabe se seu marketing funcionou. Toda equipe com que trabalhei mede demais e entende de menos — mas o erro mais caro não é medir demais, é confundir a métrica com o objetivo. Então, antes de qualquer coisa: conheça seu objetivo, e deixe claro que uma métrica não é seu objetivo. O resto deste cheat sheet só funciona depois que isso estiver resolvido.
Não confundir com
🎯 Atribuição
A atribuição divide o crédito entre pontos de contato. A mensuração pergunta se algo mudou. Um canal pode vencer todos os argumentos de atribuição e ainda não adicionar nada de incremental — por isso a atribuição serve para direcionar e a incrementalidade serve para a verdade.
📊 Dashboards
Telemetria diz o que aconteceu. Mensuração diz se importou e o que fazer em seguida. Um dashboard em que ninguém age é papel de parede, não mensuração.
🧮 Modelagem de mix de mídia
Modelos estimam o que aconteceu; experimentos provam. Eu adoro experimentos, mas odeio resultados modelados sozinhos — use modelos só depois de rodar experimentos, e faça back-test periodicamente.
P0: Conheça seu objetivo
Escreva seu objetivo em uma frase — não um número, um resultado. “Fazer o negócio crescer com lucro.” “Tornar-se a ferramenta padrão para X.” O objetivo é o que você realmente quer; a métrica é só o instrumento que você observa para verificar se está chegando lá.
Parece óbvio e quase ninguém faz isso. Equipes herdam dashboards, copiam o que a última empresa media, e aos poucos a métrica se torna o objetivo. Isso é a lei de Goodhart: quando uma medida vira meta, ela deixa de ser uma boa medida. As pessoas otimizam o número em vez do resultado — mais cadastros que nunca ativam, mais cliques que nunca convertem.
Então: objetivo primeiro, em palavras. Depois escolha métricas que sirvam a ele. Se você não consegue declarar seu objetivo sem apontar para um dashboard, você não tem um objetivo — tem papel de parede.
A Hierarquia de Métricas
1) Métrica North Star
O número único que captura o valor que os clientes obtêm do seu produto.
Use quando
- Todos conseguem explicar como seu trabalho a move
- Ela reflete valor para o cliente, não vaidade da empresa
Evite quando
- Ela vira uma meta que as pessoas burlam (a lei de Goodhart morde rápido)
- Ela é tão defasada que ninguém consegue agir sobre ela
2) Métricas de Input
As alavancas que movem a north star — as coisas sobre as quais as equipes realmente podem agir.
Use quando
- Cada input tem um dono claro com alavancagem real
- Você consegue traçar a linha causal até a north star
Evite quando
- Você acompanha vinte delas — escolha as poucas que importam
- Inputs são escolhidos porque são fáceis, não porque importam
3) Métricas de Proteção
Coisas que não podem piorar enquanto você otimiza todo o resto.
Use quando
- Você está forçando o crescimento — é aí que o dano acontece
- Você define limites explícitos, não impressões
Evite quando
- Nunca — todo mundo precisa de pelo menos uma proteção
4) Métricas de Vaidade
Números que sobem para cima e para a direita e não mudam nada.
Use quando
- Você precisa de uma manchete para um slide
- Honestamente, é mais ou menos isso
Evite quando
- Tomar qualquer decisão real
- Avaliar um time ou uma campanha
Regras de Boa Mensuração
- Comece pela decisão, não pelos dados. Escreva a decisão primeiro, depois pergunte que evidência mudaria sua opinião. Dados primeiro é como você acaba “descobrindo” o que quer que o lisonjeie.
- Defina a métrica antes de olhar os números. Espiar primeiro é como as definições discretamente derivam para o que quer que pareça bom neste trimestre.
- Desconfie de razões sozinhas. Uma taxa de conversão pode subir porque o numerador cresceu ou porque o denominador encolheu. Sempre verifique os dois antes de comemorar.
- Segmente antes de comemorar. Uma média pode melhorar enquanto cada segmento subjacente declina — o paradoxo de Simpson vive nos dados de marketing. Corte por canal, coorte e região.
- Compare contra um contrafactual. “Vendas subiram 10%” não significa nada até você perguntar o que teria acontecido sem a campanha. (É aqui que a incrementalidade entra.)
- Saiba quando parar de medir. Já vi equipes gastarem mais tempo debatendo janelas de atribuição do que as campanhas valiam. Meça o suficiente para decidir bem — depois volte a fazer o trabalho.
O teste
Uma métrica que não consegue mudar uma decisão é decoração. Delete-a. Se seu dashboard perdesse metade dos gráficos amanhã, a metade de que ninguém sentiria falta nunca foi mensuração — era papel de parede.
Conheça os limites
Nem tudo que importa pode ser medido, e nem tudo que pode ser medido importa. Afinidade com a marca, qualidade criativa, a confiança que um cliente sente — tudo real, tudo difícil de pôr um número. Se seu sistema de mensuração não tem espaço para coisas que ele não consegue contar, ele vai lentamente otimizá-las para fora.
E não forme uma tirania da mensuração — ela é uma ferramenta. Já vi equipes gastarem mais tempo debatendo janelas de atribuição do que as campanhas valiam, e o debate parecia rigoroso enquanto o negócio não aprendia nada. Quando a métrica e a anedota não batem, geralmente a anedota é verdadeira.
Uma dúvida honesta: não confio em um time que nunca erra suas metas — ou estão medindo errado ou as metas são fáceis demais. Uma cultura de mensuração com taxa de acerto de 100% não é uma cultura de mensuração. É teatro.