Teste de incrementalidade em marketing: como medir o que realmente funcionou

O teste de incrementalidade responde à pergunta que a atribuição não consegue responder: a atividade de marketing causou conversões que não teriam acontecido de outra forma? É a diferença entre "podemos ver que as pessoas que viram nosso anúncio converteram" e "o anúncio fez pessoas converterem que não teriam convertido". O primeiro é correlação. O segundo é causalidade. Apenas o segundo diz se o investimento em marketing valeu a pena.

Como o teste de incrementalidade funciona

O desenho central é simples: divida seu público em dois grupos. Um grupo vê a atividade de marketing (grupo de teste). O outro não vê (grupo de controle). Meça a diferença de conversões entre os dois grupos. A diferença é o efeito incremental — as conversões causadas pelo marketing.

A execução é mais difícil que o desenho porque as plataformas não facilitam. A maioria das plataformas de anúncios otimiza a entrega para pessoas com probabilidade de converter, o que significa que os grupos de teste e controle diferem de maneiras que confundem os resultados. Um teste de incrementalidade adequado exige randomização — os dois grupos devem ser comparáveis em todos os aspectos, exceto pela exposição ao marketing.

Tipos de teste de incrementalidade

Holdout geográfico. Rode a campanha em alguns mercados geográficos e não a rode em outros. Compare as taxas de conversão entre os mercados de teste e de controle. Funciona bem para publicidade de marca e campanhas de reconhecimento, em que o efeito deve ser visível no nível do mercado.

Holdout de público. Dentro do seu público-alvo, retire aleatoriamente uma pequena porcentagem (normalmente 10-20%) da exibição dos anúncios. Compare as taxas de conversão entre o grupo exposto e o grupo retido. Funciona para publicidade de resposta direta, em que você consegue acompanhar o comportamento de conversão em nível individual.

Estudos de lift de conversão da plataforma. Meta, Google e outras plataformas oferecem ferramentas integradas de mensuração de lift que cuidam da randomização e da mensuração. São mais fáceis de executar que testes de holdout DIY, mas menos transparentes — a plataforma tanto roda o teste quanto reporta os resultados.

O que a incrementalidade mostra que a atribuição não mostra

A atribuição diz: "As pessoas que viram seu anúncio de retargeting e depois converteram — o anúncio leva o crédito." O teste de incrementalidade diz: "As pessoas que viram seu anúncio de retargeting converteram a uma taxa de 5%. As pessoas que não viram converteram a uma taxa de 4,8%. O lift incremental foi de 0,2 ponto percentual — o que significa que a maioria das pessoas que converteu depois de ver o anúncio teria convertido de qualquer forma."

Esta é a verdade desconfortável que o teste de incrementalidade costuma revelar: uma parte significativa das conversões atribuídas não é incremental. As pessoas teriam convertido de qualquer forma. O gasto com anúncios gerou crédito de atribuição, não receita adicional. Saber disso permite realocar orçamento de atividades de baixa incrementalidade para atividades de alta incrementalidade.

Quando rodar testes de incrementalidade

O teste de incrementalidade exige volume suficiente para produzir resultados estatisticamente significativos — normalmente milhares de conversões no período do teste. Não é prático para campanhas pequenas nem para negócios de baixo volume.

Rode testes de incrementalidade para grandes decisões de orçamento: avaliar um novo canal antes de escalar o investimento, validar que um canal existente ainda produz resultados incrementais, comparar a eficácia de diferentes abordagens de campanha. Não os rode continuamente — o grupo de holdout representa receita perdida, e o custo do teste deve ser justificado pelo valor do aprendizado.

O orçamento otimizado por incrementalidade

A implicação do teste de incrementalidade: a alocação ideal de orçamento provavelmente é diferente daquela que seus relatórios de atribuição sugerem. Canais que parecem eficientes na atribuição podem ter baixa incrementalidade. Canais que parecem caros na atribuição podem ter alta incrementalidade porque alcançam pessoas que não converteriam por outros canais.

As marcas que fazem testes de incrementalidade de forma sistemática tendem a deslocar orçamento para canais que a atribuição subvaloriza (especialmente reconhecimento e atividades de topo de funil) e a retirar de canais que a atribuição supervaloriza (especialmente retargeting e busca de marca). O deslocamento normalmente melhora a eficiência geral do marketing em 10-30%. A melhora vem de gastar menos em atividades que geram conversões atribuídas, mas não incrementais.