Eu comecei nesse mercado de marketing quando eu era bem novo… 17 anos pra ser exato.

Trabalhava na empresa do Raiam Santos e participava de algumas fraternidades de networking, onde vira e mexe caiam alguns trabalhos no meu colo.

E sempre, repito SEMPRE ouvi histórias de pessoas super prestigiadas dizendo:

• “Mudei a cor de um botão na página e a conversão aumentou 200%”

• “Troquei uma palavra na copy e agora tô vendendo 3x mais”

• (E mais um monte de bulshitagem)

Spoiler: Eles estão errados

Esse pessoal se acha cientista, mas não tem o mínimo de conhecimento matemático pra conduzir algo embasado.

E veja bem, não é obrigação de ninguém saber estatística, mas quando você não sabe analisar um dado de forma crítica, acaba crendo em ilusões (muito por conta do viés de confirmação).

Resultado? Eles acabam acreditando em mentiras, e mais mentiras, e mais mentiras… até que se afundam num mar de merda.

Por isso, quero dar um basta nesse cenário.

O que eu vou te ensinar agora é um dos temas mais pau mole que existem — Não à toa, você nunca vai ver o Pedro Sobral falando disso:

ESTATÍSTICA 🤓👆

Vamo lá, senta que lá vem história:

Imagina que você e seu amigo entraram em uma competição de quem vende mais limonada, quem perdesse ia ter que virar vascaíno.

Vocês dois preparam uma barraquinha de forma idêntica, mas tiveram uma única ideia diferente:

• Enquanto você optou por copos transparentes tradicionais

• Seu amigo optou por copos coloridos tematizados com uma limonada maromba

À princípio, você ficou com medo, porque claramente ele tinha uma vantagem.

Então, você já começou a competição achando que ia perder.

E realmente, no primeiro dia veio a porrada:

• Suas vendas: 15

• Vendas do seu amigo: 45

“P*ta que pariu, tô f*dido” você pensou.

Aí no segundo dia, outra porrada:

• Suas vendas: 10

• Vendas do seu amigo: 26

MAS DE REPENTE, no terceiro dia:

• Suas vendas: 40

• Vendas do seu amigo: 5

E aí passou um mês…

Um dia você vendia mais, outro dia ele vendia mais…

No fim, o resultado final foi:

• Suas vendas: 500

• Vendas do seu amigo: 498

Ou seja, TODA sua hipótese de que seu amigo ia ganhar…

Foi então fortalecida pelos resultados dos 2 primeiros dias…

Mas então, foi completamente aniquilada pelo fator-chave de qualquer modelo estatístico: tempo.

Por que isso importa?

Porque se você desistisse no segundo dia…

Nunca saberia se realmente um copo maromba aumenta as vendas.

Na real é pior, você teria certeza absoluta na mentira de que aumenta.

E então, daqui 10 anos, poderia abrir uma empresa de copos marombas…

E ia tomar uma porrada imensa (até porque sua vida inteira foi uma farsa).

Trazendo pra realidade do mercado:

A maioria dos players analisam um teste de dois dias…

E ao ver que uma das variações está ganhando de lavada…

Ignoram todo o bom senso e desligam a variação “perdedora” antes do teste ser realmente conclusivo.

E aí o cara se acha o gorilão da bola azul…

E se vangloria como “cientista do marketing que aumentou as conversões em 200%”.

(aí depois de +2 dias, vê as conversões degringolando. Aí ao invés de se culpar, culpa o Facebook)

E eu te digo isso porque já fiz isso também.

Mas tá TUDO errado.

Vamo lá, olha esse gráfico que vou te mostrar:

Olha que legal. Duas variações de landing page.

Ambas receberam 1200 pessoas na página de vendas no período de 3 dias.

Uma (C) fez 6 vendas, totalizando 1.718 de faturamento

A outra (V1) fez o triplo.

Pergunta valendo ponto: qual é a melhor?

A resposta é nenhuma!

Presta atenção em uma coluna: Probability of better.

Sabe o que ela significa?

Eu tenho 52% de confiança na afirmação de que a V1 é melhor que a C.

Ou seja, tá tudo empatado.

Ambos tem praticamente a mesma chance de vitória.

Em outras palavras, preciso de mais tempo pra tomar uma decisão.

E bom, depois de 2 semanas, ambas LPs alcançaram praticamente a mesma quantidade de vendas e a plataforma alegou que:

Eu precisaria de 1577 dias pro teste ter alguma relevância estatística (Confiança >95%)

Ou seja, ambas as variações são virtualmente idênticas em conversão.

Ação tomada?

Na falta de dados objetivos, decidimos subjetivamente que a variação C seria melhor porque é mais compliant e alinhado à comunicação da marca.

Quer fazer testes realmente FUNCIONAIS? Então vamos lá, segue o playbook:

Quer testar uma landing page?

Usa esse site: https://vwo.com/br/

E só faz teste por lá.

E entenda que CRO precisa de tempo e volume.

Se você não tem volume de tráfego suficiente e nem tempo pra testar…

Se contente em ser inapto (e tá tudo bem).

Apenas faça uma página no limite do bom senso (seguindo o arroz com feijão bem feito).

E desiste de fazer CRO.

Ao invés disso, foca 100% em:

Anúncios: o coração de toda operação de Direct Response

Quando você faz qualquer campanha de conversão no Meta Ads (ou até TikTok Ads)…

Ou até quando você grava um reels, dá na mesma…

Você já está inevitavelmente sujeito ao modelo de inferência e predição estatística da plataforma.

Se o vídeo é bom → ele vai ser enviado pra mais e mais gente (consequentemente, uma hora vai vender).

Se o vídeo é ruim → ele vai flopar e ponto final.

Então, o esquema é simples:

Lançar o máximo de anúncios BONS possíveis…

E depois verificar os padrões temáticos, retóricos, visuais e sonoros dos top spenders e bottom spenders.

É SIMPLES ASSIM, NÃO INVENTA.

Outra dica que dou é: enquanto não achar um winner, NÃO faça anúncio que é tudo igual.

Se você quer TESTES REAIS, quanto mais diferente uma peça for da outra, melhor.

Exemplo: dificilmente você vai ver diferença entre escrever “Naruto” e “naruto” no seu anúncio.

Mas com certeza vai ver diferença se escrever “Dragon Ball”

Porque aí realmente você tá mudando a comunicação.

SÓ DEPOIS de achar um ad minimamente vencedor, aí sim:

• Troca uma letrinha

• Troca umas coisinhas da copy

• Muda o SfX

• Muda coloração

• Muda saturação

• Muda a fonte

• Dá um toque cômico

• (e a lista continua)

Porque essas micro-otimizações já estão fundadas em algo validado, entende?

Outra coisa, mesmo que ele não performe bem, mantém a merda do anúncio ativo na plataforma.

Nosso melhor ad desse mês é um anúncio que fiz há 6 meses…

E que só agora começou a vender de verdade.

E isso acontece mais vezes do que você imagina.

Dito isso, as únicas métricas-chave para Meta Ads são:

• Quanto o anúncio gastou.

• Quanto ele trouxe de faturamento.

Aí se quiser ver thumbstop, hold rate, essas merda aí… eu recomendo, mas só se o vídeo já bateu suas 3000 impressões

Enfim, esse é o conteúdo de hoje, pessoal!

Esses ensinamentos se aplicam a TUDO, inclusive teste A/B de e-mail

Se tiver qualquer ideia de teste e não der pra fazer no VWO, pode usar esse site aqui: https://marketing.dynamicyield.com/bayesian-calculator/

NOTA FINAL:

Marketing é sobre humanos.

E humanos são caóticos.

Mas todo caos, quando repetido consistentemente…

Sempre vai se comportar com um padrão.

Se tiver qualquer ideia de conteúdo que queira que eu fale sobre, só deixar nos comentários aqui embaixo.

Tamo junto,

Victor