WEBVTT

00:00:00.000 --> 00:00:04.160
Quem opera conversão no dia a dia, como a gente faz por aqui, aprende muito rápido a adorar

00:00:04.160 --> 00:00:06.540
aquele conforto estatístico de um teste AB, né?

00:00:06.540 --> 00:00:10.820
Você tem ali duas versões rodando no ar ao mesmo tempo, o público perfeitamente dividido

00:00:10.820 --> 00:00:13.420
e uma métrica super clara decidindo quem ganha.

00:00:13.420 --> 00:00:14.420
É lindo.

00:00:14.420 --> 00:00:18.600
Mas e quando aquela etapa crucial do FUNIL simplesmente não recebe gente suficiente?

00:00:18.600 --> 00:00:23.040
O painel de dados fica vazio e a ansiedade vai lá no teto, bate até uma síndrome de

00:00:23.040 --> 00:00:24.540
abstinência de dados.

00:00:24.540 --> 00:00:27.680
E é bem aí que o conforto acaba, porque numa etapa de alto valor, mas com baixo

00:00:27.680 --> 00:00:31.960
volume, um teste AB vai demorar meses só para conseguir separar o que é sinal de verdade

00:00:31.960 --> 00:00:32.960
do que é puro ruído.

00:00:32.960 --> 00:00:36.760
E olha, a pior falha que a gente pode cometer numa operação é deixar a equipe plantada

00:00:36.760 --> 00:00:41.240
por semanas esperando uma resposta que aquele volume de tráfego jamais vai conseguir entregar.

00:00:41.240 --> 00:00:43.440
Essa inércia cobra um preço caríssimo.

00:00:43.440 --> 00:00:44.440
Com certeza.

00:00:44.440 --> 00:00:46.960
Por isso, hoje a gente vai abrir o nosso manual de operação.

00:00:46.960 --> 00:00:50.000
Vamos girar todo o ponto para te mostrar exatamente o que fazer quando o tráfego

00:00:50.000 --> 00:00:52.960
é baixo, mas mantendo toda aquele rigor investigativo.

00:00:52.960 --> 00:00:56.960
Dá para manter a melhoria continuas virando rápido sem ficar refendo volume.

00:00:56.960 --> 00:01:01.400
O que nos traz direto à pergunta central que vai guiar a nossa conversa hoje?

00:01:01.400 --> 00:01:07.800
Que métodos qualitativos dão evidência útil quando não há volume para teste AB?

00:01:07.800 --> 00:01:11.640
Essa é uma barreira diária nas equipes de experimentação, seja que internamente seja

00:01:11.640 --> 00:01:13.400
rodando com os clientes lead lovers.

00:01:13.400 --> 00:01:17.840
O que a gente vai estruturar agora é um cardápio de métodos totalmente confiável.

00:01:17.840 --> 00:01:19.160
Zero axismos.

00:01:19.160 --> 00:01:22.680
É um processo submetido para caber em qualquer realidade de volume.

00:01:22.680 --> 00:01:25.640
E aqui está o nosso roteiro prático para hoje.

00:01:25.680 --> 00:01:30.120
A gente passa pelo piso do teste AB, depois pelas quatro rotas para o tráfego.

00:01:30.120 --> 00:01:35.120
Na sequência, entrevistas com quem usa, o padrão nas gravações, o famoso teste de

00:01:35.120 --> 00:01:38.440
cinco segundos e para fechar o plano da semana.

00:01:38.440 --> 00:01:39.440
Perfeito.

00:01:39.440 --> 00:01:43.440
Bora começar então mergulhando direto no nosso primeiro estágio de triagem.

00:01:43.440 --> 00:01:45.000
Passo número um.

00:01:45.000 --> 00:01:46.400
O piso do teste AB.

00:01:46.400 --> 00:01:48.880
Como a gente separa o sinal do ruído?

00:01:48.880 --> 00:01:53.120
Bom, o primeiro passo de qualquer operação bem estruturada é traçar uma linha

00:01:53.120 --> 00:01:54.320
de corte clara.

00:01:54.320 --> 00:01:57.280
A gente precisa de uma métrica base que diga para a equipe.

00:01:57.280 --> 00:02:00.480
Opa, que a gente configura um teste estatístico ou não.

00:02:00.480 --> 00:02:03.440
Aqui a gente muda a rote e vai conversar com quem usa o produto.

00:02:03.440 --> 00:02:06.200
E essa nossa régua de entrada é bem direta.

00:02:06.200 --> 00:02:08.360
Cerca de cinquenta conversões semanais.

00:02:08.360 --> 00:02:09.040
Exato.

00:02:09.040 --> 00:02:12.760
Batei essa marca de cerca de cinquenta conversões na etapa que você está analisando.

00:02:12.760 --> 00:02:16.480
É o sinal verde de que vale a pena sentar e calcular a mostra de um teste AB.

00:02:16.480 --> 00:02:18.240
Mas ó, um aviso importante.

00:02:18.240 --> 00:02:20.800
Isso é estritamente uma triagem inicial, tá?

00:02:20.800 --> 00:02:22.920
Não é uma garantia estatística por si só.

00:02:22.920 --> 00:02:27.240
Se você tiver abaixo dessa faixa e insistir num AB, você paga um preço duplo.

00:02:27.240 --> 00:02:31.880
O teste vai se arrastar até virar irrelevante e de quebra você trava o cronograma da equipe

00:02:31.880 --> 00:02:32.880
inteira.

00:02:32.880 --> 00:02:33.880
Não tenha dúvida.

00:02:33.880 --> 00:02:38.400
E tenho um detalhe vital sobre como a gente conta essas cerca de cinquenta conversões.

00:02:38.400 --> 00:02:41.840
Você não pode tomar essa decisão olhando só para o evento de navegador.

00:02:41.840 --> 00:02:45.320
Sabe que ele é livre quando você vê a tag e disparar a bonitinha na tela?

00:02:45.320 --> 00:02:46.320
Esquece.

00:02:46.320 --> 00:02:49.560
Ele não serve de absolutamente nada se o dado não chegar lá no CRM.

00:02:49.560 --> 00:02:50.560
Matou a charada.

00:02:50.680 --> 00:02:52.960
O navegador só mede a intenção da pessoa.

00:02:52.960 --> 00:02:57.600
A métrica de negócio real, aquela que paga as contas, depende do registro de fato criado

00:02:57.600 --> 00:02:58.600
lá no destino.

00:02:58.600 --> 00:03:01.800
A gente sempre preenche o formulário com o registro de teste que depre identificar.

00:03:01.800 --> 00:03:06.040
Para seguir o rastro até o fim, tentar validar tráfego com o número inflado de interface

00:03:06.040 --> 00:03:07.560
é brigar com o fantasma.

00:03:07.560 --> 00:03:12.240
O que nos leva ao ponto 2, as quatro rotas para o tráfego.

00:03:12.240 --> 00:03:14.080
A nossa matriz de decisão.

00:03:14.080 --> 00:03:15.080
Legal.

00:03:15.080 --> 00:03:18.320
Então, assim que aquele número real e validado de conversões semanais cai lá no

00:03:18.320 --> 00:03:20.680
card do experimento, a operação se divide.

00:03:20.680 --> 00:03:23.480
A gente tem quatro com a minhas bem definidos nessa matriz.

00:03:23.480 --> 00:03:27.080
Se está acima do piso maravilha, teste a B clássico com a mostragem fechada.

00:03:27.080 --> 00:03:31.160
Se está pertinho do piso, ainda dá para salvar um AB aplicando redução de variança

00:03:31.160 --> 00:03:32.840
ou abrindo uma janela mais longa.

00:03:32.840 --> 00:03:36.960
Só que, como a gente já cobriu a parte estatística pesada em outras explicações,

00:03:36.960 --> 00:03:40.720
o nosso foco prático de hoje mora nas duas últimas linhas dessa tabela.

00:03:40.720 --> 00:03:44.280
Quando o volume cai para baixo do piso, mas a etapa tem um alto valor para

00:03:44.280 --> 00:03:45.960
o negócio, a chave vira.

00:03:45.960 --> 00:03:48.320
A rota passa a ser 100% qualitativa.

00:03:48.320 --> 00:03:50.600
Pesquisa, entrevistas, gravações de tela.

00:03:50.600 --> 00:03:54.600
E sobre essa última linha da matriz, olha, é libertador para qualquer operação.

00:03:54.600 --> 00:03:58.320
Se você está abaixo do piso, mas esbarra no erro evidente de usabilidade,

00:03:58.320 --> 00:04:01.360
pelo amor de Deus, não vai sofrer montando teste para validar o óbvio.

00:04:01.360 --> 00:04:03.080
É uma mudança de alta confiança.

00:04:03.080 --> 00:04:06.400
Joga a correção para o ar logo de uma vez e a equipe só acompanha a métrica

00:04:06.400 --> 00:04:09.600
de guarde-reio para garantir que a saúde da página está em ordem.

00:04:09.600 --> 00:04:12.960
Avançando para o ponto 3, entrevistas com quem usa.

00:04:12.960 --> 00:04:15.600
Como alcançar aquelas quedas silenciosas.

00:04:15.600 --> 00:04:19.720
Esse é disparado o método mais valioso da nossa rota qualitativa.

00:04:19.720 --> 00:04:23.360
Ele foi feito justamente para alcançar aquilo que nenhum painel analítico

00:04:23.360 --> 00:04:24.960
do mundo consegue te mostrar.

00:04:24.960 --> 00:04:27.160
O abandono silencioso.

00:04:27.160 --> 00:04:29.840
A ideia da entrevista é cercar os dois extremos.

00:04:29.840 --> 00:04:33.280
Falar com quem comprou para descobrir o que quase fez a pessoa desistir

00:04:33.280 --> 00:04:36.400
e com quem foi embora em absoluto silêncio, sem gerar um único

00:04:36.400 --> 00:04:37.680
aviso de erro no relatório.

00:04:37.680 --> 00:04:41.280
E para isso gerar dado útil de verdade, o diagnóstico tem que ser cirúrgico.

00:04:41.280 --> 00:04:43.440
É por isso que a gente bate tanto na tecla.

00:04:43.480 --> 00:04:46.800
Esse roteiro rígido aí da tela é a nossa prática da casa.

00:04:46.800 --> 00:04:50.480
A gente abre com perguntas amplas e vai seguindo estritamente

00:04:50.480 --> 00:04:52.480
no ritmo de quem está falando.

00:04:52.480 --> 00:04:54.480
E vou ser muito sincero com você.

00:04:54.480 --> 00:04:58.640
A parte mais difícil dessa prática da casa é a contenção física.

00:04:58.640 --> 00:05:01.560
Fica em absoluto silêncio depois de lançar a pergunta.

00:05:01.560 --> 00:05:04.320
Ver a pessoa apanhando da tela e ter que quase amarrar as mãos

00:05:04.320 --> 00:05:05.680
para não interferir e ajudar.

00:05:05.680 --> 00:05:08.120
É um esforço monumental, mas é vital.

00:05:08.120 --> 00:05:09.600
E tem mais uma regra de ouro.

00:05:09.600 --> 00:05:12.080
Qualquer ideia mirabolante de mudança que a equipe já tenha

00:05:12.080 --> 00:05:15.520
na manga fica trancada a sete chaves até o final da sessão.

00:05:15.520 --> 00:05:18.800
A entrevista serve só para medir a fricção real que está lá.

00:05:18.800 --> 00:05:22.240
Não para inflar o ego, validando que o pesquisador já achava antes.

00:05:22.240 --> 00:05:24.400
Por isso, a gente anota frases literais.

00:05:24.400 --> 00:05:27.200
Elas carregam o peso autêntico daquele incômodo.

00:05:27.200 --> 00:05:28.480
Ponto 4.

00:05:28.480 --> 00:05:30.480
O padrão nas gravações.

00:05:30.480 --> 00:05:32.800
Observando a fricção invisível.

00:05:32.800 --> 00:05:36.320
Às vezes, o relato na entrevista bate num limite.

00:05:36.320 --> 00:05:39.920
A pessoa não lembra direito ou não sabe explicar onde travou.

00:05:40.080 --> 00:05:45.600
É nessa hora que a gente migra estratégicamente para os vídeos de comportamento anonimizado.

00:05:45.600 --> 00:05:49.040
A gravação de tela pegue exatamente o que as pessoas omitem sem querer.

00:05:49.040 --> 00:05:54.080
É aquela hesitação do mouse, aquela rolagem desesperada para cima e para baixo, procurando alguma coisa.

00:05:54.080 --> 00:05:56.320
E o nosso alvo costuma ser certeiro.

00:05:56.320 --> 00:05:58.880
A gente foca naquele buraco negro da navegação.

00:05:58.880 --> 00:06:03.520
Aquele limbo invisível entre a pessoa escolher um plano e, de fato, terminar o check-out.

00:06:03.520 --> 00:06:06.880
Mas aqui entra o lema sagrado de quem leva a conversão a sério.

00:06:06.880 --> 00:06:08.720
Uma sessão isolada é anedota.

00:06:08.800 --> 00:06:10.720
O padrão repetido é a evidência.

00:06:10.720 --> 00:06:12.160
Exatamente.

00:06:12.160 --> 00:06:16.960
Ver um único usuário escorregar num botão e já sai correndo para mudar o sistema inteiro da empresa

00:06:16.960 --> 00:06:18.720
é um baita de um tiro no pé.

00:06:18.720 --> 00:06:22.880
A operação só ganha força quando a frequência dessa fricção é documentada.

00:06:22.880 --> 00:06:28.720
O padrão real só existe quando o mesmo bloqueio se repete de forma sistemática em várias visitas.

00:06:28.720 --> 00:06:33.920
E para conseguir transformar essas dezenas de horas brutas de vídeo em um site concreto,

00:06:33.920 --> 00:06:38.560
a equipe aplica uma outra regra inquebravel que a gente assume como prática da casa.

00:06:38.560 --> 00:06:42.400
Assistir em lote com uma pergunta definida antes de dar o play.

00:06:42.400 --> 00:06:47.600
Porque convenhamos, abrir o gravador de sessão achando que um insight brilhante vai pular na sua tela sozinho

00:06:47.600 --> 00:06:50.720
é a mesma coisa que ficar assistindo o Câmara de Segurança de Madrugada.

00:06:50.720 --> 00:06:52.720
É um tédio e não leva lugar nenhum.

00:06:52.720 --> 00:06:54.480
A pergunta tem que nascer antes.

00:06:54.480 --> 00:06:57.680
Tipo, em que ponto exato o cadastro trava?

00:06:57.680 --> 00:07:02.160
Fazer essa análise em lote com essa lente de aumento é o que converte uma pilha de vídeos

00:07:02.160 --> 00:07:04.560
num diagnóstico sólido de verdade.

00:07:04.560 --> 00:07:08.320
Vamos para o ponto 5, o teste de 5 segundos.

00:07:08.400 --> 00:07:10.080
Medindo a clareza na hora.

00:07:10.080 --> 00:07:15.200
Olha, esse método é possivelmente a ferramenta mais ágil do nosso playbook inteiro

00:07:15.200 --> 00:07:19.840
simplesmente porque ele exige absolutamente zero tráfego do site.

00:07:19.840 --> 00:07:22.800
Dá para rodar no corredor com colegas de outro departamento

00:07:22.800 --> 00:07:26.560
ou encaixar na rotina de suporte com clientes já fidelizados.

00:07:26.560 --> 00:07:31.200
Executar isso de forma enxuta e direta é uma escolha da casa incontornável.

00:07:31.200 --> 00:07:34.080
A execução chega a ser brutal de tão simples.

00:07:34.080 --> 00:07:37.360
Você mostra a tela principal por cravados 5 segundos

00:07:37.360 --> 00:07:41.520
esconde a imagem e já solta a primeira pergunta para quem acabou de olhar.

00:07:41.520 --> 00:07:43.280
O que esta empresa oferece?

00:07:43.280 --> 00:07:47.120
A velocidade da resposta diz na hora se a clareza da página

00:07:47.120 --> 00:07:51.840
que é o requisito número 1 para qualquer negócio sobreviveu aquela primeira varrida de olho.

00:07:51.840 --> 00:07:54.480
E sem dar nenhum espaço para a pessoa devagar,

00:07:54.480 --> 00:07:57.520
a segunda pergunta vai direto na intenção de ação.

00:07:57.520 --> 00:07:59.360
O que dá para fazer nesta página?

00:07:59.360 --> 00:08:01.280
E aqui não tem choro nem vela.

00:08:01.280 --> 00:08:04.160
Se as respostas que você coletar forem genéricas

00:08:04.160 --> 00:08:06.720
ou passarem muito longe da conversão que você quer

00:08:06.720 --> 00:08:08.320
a realidade bate forte.

00:08:08.320 --> 00:08:12.320
A promessa da sua página quebrou antes mesmo do primeiro clique rolar.

00:08:12.320 --> 00:08:14.720
E quando a promessa principal quebra, meu amigo,

00:08:14.720 --> 00:08:17.040
não tem corzinha de botão que salve o layout.

00:08:17.040 --> 00:08:20.480
A coleta aqui foca 100% nas respostas literais.

00:08:20.480 --> 00:08:24.000
As palavras exatas dizem absolutamente tudo.

00:08:24.000 --> 00:08:27.040
Chegando no ponto 6, o plano da semana.

00:08:27.040 --> 00:08:29.440
Saindo da descoberta para a ação.

00:08:29.440 --> 00:08:33.920
Todo esse esforço investigativo que a gente montou converge agora para a síntese.

00:08:33.920 --> 00:08:35.760
Mas sempre surge a dúvida.

00:08:35.840 --> 00:08:38.640
Qual é a hora certa de parar a pesquisa?

00:08:38.640 --> 00:08:42.960
O nosso marco final, que a gente define estritamente como uma escolha da casa,

00:08:42.960 --> 00:08:47.920
é no instante exato em que as respostas e comportamentos começam a se repetir.

00:08:47.920 --> 00:08:51.200
Se a fricção da gravação de hoje é uma cópia da gravação de ontem,

00:08:51.200 --> 00:08:52.320
o padrão venceu.

00:08:52.320 --> 00:08:53.760
Pode fechar o diagnóstico.

00:08:53.760 --> 00:08:55.520
A partir dessa linha de chegada,

00:08:55.520 --> 00:08:58.560
todo achado tem que sair por uma de duas portas.

00:08:58.560 --> 00:09:01.040
A primeira é a porta da correção evidente.

00:09:01.040 --> 00:09:02.880
É aquele erro clara de usabilidade,

00:09:02.960 --> 00:09:05.920
tipo o campo de formulário que não aceita a digitação.

00:09:05.920 --> 00:09:07.760
Isso não precisa de debate.

00:09:07.760 --> 00:09:11.200
Vir a mudança imediata com alta confiança vai para o ar

00:09:11.200 --> 00:09:14.560
e a gente só fica de olho no guarda-reio de conversões totais.

00:09:14.560 --> 00:09:18.160
Já na segunda porta fica a fricção que pede a aposta.

00:09:18.160 --> 00:09:21.600
É aquele comportamento curioso que ainda precisa ser provado.

00:09:21.600 --> 00:09:23.680
Isso não vai para a produção na mesma hora.

00:09:23.680 --> 00:09:26.640
O achado toma o formato de hipótese, entra na fila

00:09:26.640 --> 00:09:30.560
e precisa tancorado por aquela evidência qualitativa que você coletou,

00:09:30.560 --> 00:09:32.480
com data e origem claras.

00:09:32.560 --> 00:09:34.560
É uma regra super-rigida a nossa.

00:09:34.560 --> 00:09:37.040
Hipótese na fila sem o lastro desses dados

00:09:37.040 --> 00:09:39.600
volta direto para a prancheta de diagnóstico.

00:09:39.600 --> 00:09:41.280
Para colocar essa estrutura de pé,

00:09:41.280 --> 00:09:43.840
o nosso trabalho acontece agora, no presente,

00:09:43.840 --> 00:09:45.760
encadeando a operação.

00:09:45.760 --> 00:09:48.720
A equipe registra as conversões geradas na superfície

00:09:48.720 --> 00:09:51.120
sempre validando via banco de destino.

00:09:51.120 --> 00:09:53.200
Com a rota de tráfego baixo justificada,

00:09:53.200 --> 00:09:55.680
a gente agenda as entrevistas usando aquele roteiro neutro,

00:09:55.680 --> 00:09:57.680
que é a nossa prática da casa constante.

00:09:57.680 --> 00:10:01.200
E rodando em paralelo, a gente abre as gravações de tela em lote,

00:10:01.200 --> 00:10:03.840
já com aquela pergunta definida antes de dar o play,

00:10:03.840 --> 00:10:06.080
que é mais uma prática da casa consolidada,

00:10:06.080 --> 00:10:08.080
depois roda o teste de cinco segundos

00:10:08.080 --> 00:10:10.080
nossa escolha da casa para a media clareza

00:10:10.080 --> 00:10:12.800
e o processo avança firme até o padrão se repetir,

00:10:12.800 --> 00:10:14.880
que é o nosso ponto de parada definitivo,

00:10:14.880 --> 00:10:16.800
a nossa última escolha da casa.

00:10:16.800 --> 00:10:19.520
No final, cada achado ganha seu destino.

00:10:19.520 --> 00:10:23.120
Vira correção imediata ou vai metódico para a fila de hipótese.

00:10:23.120 --> 00:10:25.280
No fim do dia, o baixo volume de tráfego

00:10:25.280 --> 00:10:26.960
só tira as ferramentas estatísticas

00:10:26.960 --> 00:10:29.360
de grande escala da nossa mão, mas nada.

00:10:29.440 --> 00:10:31.680
A evidência de verdade continua abundante,

00:10:31.680 --> 00:10:34.560
só esperando a nossa disciplina operacional entrar em ação.

00:10:34.560 --> 00:10:37.280
E o convite direto para você executar essa semana é,

00:10:37.280 --> 00:10:40.000
o que será que a sua próxima gravação de tela vai revelar

00:10:40.000 --> 00:10:43.280
que os números frios lá do painel estão escondendo de você o tempo todo.

00:10:43.280 --> 00:10:44.400
Bora para o jogo!