WEBVTT

00:00:00.000 --> 00:00:19.997
Existe um jeito silencioso de uma reunião dar errado. Ninguém mente, ninguém discute com má-fé,
e mesmo assim a decisão sai apoiada em algo que ninguém consegue conferir depois. Quatro meses
adiante, quando o resultado não vem, a pergunta que fica sem resposta é: por que a gente decidiu
aquilo mesmo?

00:00:19.997 --> 00:00:35.078
E quase sempre a resposta some porque o que sustentava a decisão nunca teve carimbo. Um número
apareceu no slide, soou plausível, e virou base de investimento sem que ninguém perguntasse de
onde ele vinha nem de quando ele era.

00:00:35.078 --> 00:00:46.239
Este episódio dá o critério: o que faz um dado ser prova, quais são os disfarces mais comuns do
achismo, e o que registrar hoje para conseguir revisar a decisão amanhã.

00:00:46.239 --> 00:00:50.956
Um dado vira prova quando carrega três carimbos: origem, data e método.

00:00:50.956 --> 00:01:08.561
Origem responde quem produziu aquilo e por qual caminho chegou até você. Um número de um painel
da sua própria operação tem uma origem; um número que veio num artigo que citava um relatório
tem outra, mais longa e mais frágil, porque cada elo pode ter simplificado.

00:01:08.561 --> 00:01:08.893
Data.

00:01:08.893 --> 00:01:26.366
Data é quando o dado foi medido, e não quando você o encontrou. Essa diferença derruba muita
decisão. Um comportamento de compra medido há três anos descreve um mercado que já mudou de
canal, de preço e de concorrente. Dado sem data é dado sem validade declarada.

00:01:26.366 --> 00:01:26.964
E método.

00:01:26.964 --> 00:01:50.349
Método é o que exatamente foi contado e o que ficou de fora. Duas empresas medindo taxa de
conversão podem estar contando coisas diferentes: uma conta sobre visitantes únicos, outra sobre
sessões; uma inclui tráfego pago, outra exclui. Sem método declarado, comparar os dois números é
comparar réguas diferentes e concluir bobagem com precisão decimal.

00:01:50.349 --> 00:01:56.394
O achismo raramente aparece como opinião declarada. Ele se veste de dado, e por isso passa.

00:01:56.394 --> 00:02:18.783
O primeiro disfarce é o número redondo sem fonte. Alguém diz que a maioria das pessoas abandona
o carrinho, outro repete numa apresentação, e em dois meses aquilo virou consenso interno sem
nunca ter tido origem. Números redondos e memoráveis se espalham mais rápido que números
precisos, e isso não tem nada a ver com serem verdadeiros.

00:02:18.783 --> 00:02:19.448
O segundo?

00:02:19.448 --> 00:02:44.161
O benchmark de mercado usado como meta da sua operação. Um número médio de um setor inteiro
descreve uma distribuição enorme, com empresas de portes, ofertas e preços diferentes. Ele serve
para dar ordem de grandeza e para desconfiar do próprio resultado quando a distância é absurda.
Como meta, ele coloca a operação atrás de um alvo que talvez não faça sentido para ela.

00:02:44.161 --> 00:02:45.025
E o terceiro.

00:02:45.025 --> 00:03:07.214
O print de painel sem recorte de período nem filtro visível. É o mais perigoso porque parece
medição. A imagem mostra uma curva subindo e nada informa se aquilo cobre sete dias ou noventa,
se inclui um canal específico, se algum filtro estava ligado. Prova precisa poder ser refeita
por outra pessoa; um recorte sem contexto não pode.

00:03:07.214 --> 00:03:13.127
Existe uma escala de confiança, e vale ter ela na cabeça na hora de defender uma decisão.

00:03:13.127 --> 00:03:30.068
No topo fica o dado próprio medido, com método escrito. É o que descreve a sua operação, com a
sua régua. Logo abaixo, o dado próprio estimado com a conta aberta — uma projeção honesta em que
qualquer um pode discordar de uma premissa e refazer o cálculo.

00:03:30.068 --> 00:03:32.061
Depois vêm as fontes externas.

00:03:32.061 --> 00:03:50.264
Estudo público com metodologia declarada vem em terceiro: ele diz quem foi ouvido, quantos
foram, quando e como. E no degrau mais baixo fica a alegação de fornecedor sobre o próprio
produto, que pode até ser verdadeira, mas foi produzida por quem tem interesse no resultado.

00:03:50.264 --> 00:03:52.988
Usar o degrau mais baixo é sempre errado?

00:03:52.988 --> 00:04:15.908
Não. É errado usar sem dizer qual degrau você está usando. Numa decisão pequena e reversível,
uma alegação de fornecedor pode bastar para tentar. Numa decisão cara e difícil de desfazer, ela
precisa ser confirmada por medição própria antes de virar compromisso. O que separa as duas
situações é o tamanho do estrago quando o dado estiver errado.

00:04:15.908 --> 00:04:26.007
Existe um momento em que dá para interromper a corrente do achismo, e ele é bem específico:
antes de você repetir um número que recebeu de outra pessoa.

00:04:26.007 --> 00:04:45.472
Quatro perguntas, e elas cabem numa mensagem de chat. De onde veio esse número e por quantas
mãos ele passou até chegar aqui? De quando ele é, e o que mudou nesse intervalo? O que
exatamente foi contado, e o que ficou de fora da conta? E quem responde por ele se alguém
contestar numa reunião?

00:04:45.472 --> 00:04:47.332
A quarta parece burocrática.

00:04:47.332 --> 00:05:07.130
Ela é a mais reveladora das quatro. Um número com dono é um número que alguém está disposto a
defender com o próprio nome. Quando a resposta é que não se sabe bem quem trouxe aquilo, você já
tem a informação de que precisa: aquele dado serve para conversa exploratória e não para
sustentar decisão.

00:05:07.130 --> 00:05:09.522
Perguntar isso não trava a operação?

00:05:09.522 --> 00:05:33.173
Trava se virar interrogatório em toda conversa. A régua prática é o tamanho do que depende
daquele número. Comentário de corredor não precisa de carimbo nenhum. Número que entra em slide
de decisão, em meta de trimestre ou em página pública precisa dos quatro, sem exceção — e quem
apresenta chega com eles prontos, em vez de descobrir na hora que não tem.

00:05:33.173 --> 00:05:35.830
E quando o número é seu, medido em casa?

00:05:35.830 --> 00:05:56.425
As mesmas perguntas continuam valendo, com a vantagem de que você consegue respondê-las. Dado
próprio também envelhece, também tem método que mudou no meio do caminho e também precisa de
alguém que responda por ele quando o painel for reconstruído. A diferença é que, sendo seu, o
conserto está ao seu alcance.

00:05:56.425 --> 00:06:07.652
Um caso completo, numa reunião de planejamento. A proposta na mesa é dobrar o investimento num
canal, com o argumento de que ele traz o menor custo por lead da operação.

00:06:07.652 --> 00:06:24.128
Ana, que assumiu a área de dados há pouco, faz as três perguntas dos carimbos. Origem: de onde
sai esse custo? Sai do painel da plataforma de anúncios. Data: qual período? Os últimos quinze
dias. Método: o custo está sendo dividido por qual evento?

00:06:24.128 --> 00:06:26.653
E é na terceira que a coisa se desfaz.

00:06:26.653 --> 00:06:52.098
É. O custo estava dividido pelo total de cadastros, e naquele canal uma parte relevante dos
cadastros vinha de um material gratuito, sem qualquer declaração de problema. Pela definição de
funil da própria casa, aqueles cadastros eram leads, e não oportunidades. Comparado com o canal
vizinho, que gerava menos cadastro e mais agenda marcada, o custo baixo estava medindo outra
coisa.

00:06:52.098 --> 00:06:53.493
O que a mesa decidiu?

00:06:53.493 --> 00:07:13.091
Em vez de dobrar, decidiu testar com um acréscimo pequeno por quatro semanas, com um critério de
corte escrito: o canal precisa manter o custo por oportunidade abaixo de um valor definido ali
mesmo. E, importante, registrou no documento da decisão os três carimbos do número que motivou o
teste.

00:07:13.091 --> 00:07:15.483
Por que esse registro importa tanto?

00:07:15.483 --> 00:07:37.672
Porque daqui a três meses, quando alguém perguntar por que aquele canal recebeu mais verba,
existe uma resposta conferível — e, se o resultado tiver frustrado, dá para descobrir se o erro
estava na premissa, na execução ou na régua. Sem registro, a mesma discussão recomeça do zero, e
a empresa aprende nada com o próprio experimento.

00:07:37.672 --> 00:07:41.924
E o erro que mais transforma número honesto em conclusão errada.

00:07:41.924 --> 00:08:01.655
O sintoma é uma frase que soa impecável: mudamos tal coisa e o resultado melhorou, logo a
mudança funcionou. Ela ignora tudo o mais que aconteceu naquele período — sazonalidade, campanha
de concorrente, mudança de preço, uma ação de outro time, ou simplesmente a variação normal de
qualquer série.

00:08:01.655 --> 00:08:02.187
A causa.

00:08:02.187 --> 00:08:20.855
A causa é não ter nada com que comparar. Sem um grupo que não recebeu a mudança, ou pelo menos
sem um período de referência escolhido antes, qualquer melhora vira crédito da última coisa que
a gente lembra de ter feito. E a memória favorece o que a gente quer que tenha funcionado.

00:08:20.855 --> 00:08:24.443
Nem toda mudança dá para testar com grupo de controle.

00:08:24.443 --> 00:08:50.950
Não dá mesmo, e a saída honesta nesses casos tem duas partes. Primeira: escrever a hipótese
antes, dizendo qual número deve se mover, em quanto tempo e por qual mecanismo. Segunda:
registrar o que mais estava acontecendo naquela janela. Quando o número se move como previsto e
nada mais grande aconteceu, a evidência é fraca porém utilizável — e você declara isso, em vez
de vender como comprovação.

00:08:50.950 --> 00:08:56.797
A prática que muda a rotina custa quatro linhas no fim de qualquer documento de decisão.

00:08:56.797 --> 00:09:14.269
Escreva o número que sustenta a decisão, a origem dele, a data em que foi medido e o método em
uma frase. Acrescente quem responde por aquele dado e a data em que a decisão será revista.
Quatro linhas que, seis meses depois, valem mais que a apresentação inteira.

00:09:14.269 --> 00:09:17.458
E quando não houver dado com os quatro carimbos?

00:09:17.458 --> 00:09:40.444
A decisão pode seguir mesmo assim — muita coisa boa se decide sem dado maduro. O que muda é o
nome que se dá a ela. Registre como aposta, com a premissa escrita e o critério que a confirma
ou a derruba. Aposta declarada é gestão de risco; aposta disfarçada de medição é o que produz
aquela reunião em que ninguém lembra por que se decidiu aquilo.

00:09:40.444 --> 00:09:53.200
No próximo episódio, o último desta base: como pedir trabalho para uma inteligência artificial
de um jeito que ela cumpra, e o que precisa ser conferido por gente antes de qualquer
publicação.