Eu Só Estudei os Sobreviventes

Por muito tempo eu continuei tirando conclusões confiantes a partir dos dados que tinha diante de mim e, por igual tempo, deixei de perceber a coisa mais importante sobre esses dados: eles já haviam sido filtrados. Filtrados pela sobrevivência. Os casos que mais importavam tinham sido silenciosamente removidos do quadro antes mesmo de eu chegar para olhar e, porque eles não estavam mais lá, nunca me ocorreu levá-los em conta.

Esse é um daqueles vieses que são famosos, que todo mundo concorda com a cabeça ao ouvir e nos quais quase todo mundo — inclusive eu — então caminha direto para dentro de qualquer forma. Conhecer o viés e estar protegido dele acabam sendo coisas muito diferentes.

A forma clássica do erro

A ilustração mais conhecida disso vem da guerra, e vale a pena relembrá-la em abstrato porque a forma é muito limpa. Imagine estudar os aviões que voltam das missões para decidir onde adicionar blindagem. Você observa onde os aviões que retornaram estão crivados de danos, e a jogada óbvia é reforçar exatamente esses pontos.

É exatamente o errado. Os aviões que você está estudando são, por definição, aqueles que conseguiram voltar. O dano que você vê neles é dano que um avião pode receber e ainda assim sobreviver. Os aviões atingidos nos lugares verdadeiramente fatais não estão diante de você para serem examinados, porque eles não voltaram. O dano contra o qual você mais precisa se proteger é precisamente o dano que você nunca vê — porque a evidência dele se removeu da sua amostra. Os sobreviventes apontam você exatamente na direção errada.

Minha versão do mesmo erro

Neste domínio, a armadilha veste roupas diferentes, mas tem o esqueleto idêntico. As coisas que ainda estão por aí para serem estudadas hoje são, necessariamente, as que sobreviveram. Os ativos que existem agora são os que não foram a zero, não desapareceram, não sumiram silenciosamente em algum ponto da história. Se eu estudo apenas o que está atualmente diante de mim, estou estudando uma população que foi pré-selecionada pela única característica de não ter morrido.

E então, com base nessa amostra selecionada, eu tiraria conclusões sobre um mundo que decididamente inclui o morrer. Eu estava efetivamente aprendendo as características dos vencedores e tratando-as como as características dos participantes, como se os dois fossem o mesmo grupo. Não são. A diferença entre eles é um cemitério para o qual eu não estava olhando.

Os mortos não aparecem nos dados

A parte genuinamente insidiosa é o mecanismo. Os fracassos se removem do seu conjunto de dados. As coisas que explodiram, que foram deslistadas, que viraram nada e foram esquecidas — elas simplesmente não estão mais diante de você. E porque não estão diante de você, não exercem peso algum sobre suas conclusões, apesar de serem o único e mais importante corpo de evidências sobre como as coisas de fato dão errado.

Então seus dados foram silenciosamente curados, e curados exatamente pelos desfechos que você mais precisa entender. Os desastres se editam para fora. O que resta é uma coleção arrumadinha de coisas que, de um jeito ou de outro, conseguiram — e uma coleção arrumadinha de sobreviventes é uma coisa profundamente enganosa de se estudar se a sua verdadeira pergunta é sobre risco, porque risco é precisamente a história daqueles que não conseguiram.

O otimismo é o resultado padrão

O que torna isso especialmente perigoso é que o viés tem uma direção consistente. Ele não espalha suas conclusões aleatoriamente; ele as empurra, todas as vezes, para o mesmo lado. O viés de sobrevivência sempre faz as coisas parecerem mais seguras, mais lucrativas e mais confiáveis do que realmente são, porque as catástrofes foram removidas de vista antes de você começar.

Isso significa que qualquer análise construída sobre sobreviventes é sistematicamente cor-de-rosa, e essa tonalidade é quase impossível de detectar por dentro, porque você não consegue ver o que está faltando. A ausência não se anuncia. Um espaço vazio onde deveriam estar cem fracassos parece exatamente um espaço vazio. Nada nos dados que você tem jamais vai espontaneamente lhe contar sobre os dados que você não tem. Você precisa saber perguntar.

Você não pode analisar o que não está lá

É por isso que a correção é tão contraintuitiva, e por que ser inteligente com os dados disponíveis não te salva. O problema não está nos dados que você tem; está nos dados que você não tem. Nenhuma quantidade de rigor aplicada a uma amostra enviesada remove o viés, porque o viés não vive na amostra — ele vive na lacuna entre a amostra e a realidade. Você pode analisar os sobreviventes de forma impecável e ainda estar completamente errado sobre o mundo, porque os sobreviventes nunca foram o mundo inteiro.

O único remédio real é ir ativamente atrás dos mortos. Buscar deliberadamente os fracassos, as coisas que não existem mais, os casos que se removeram, e recolocá-los no quadro à mão. Isso é genuinamente mais difícil, porque eles se escondem — essa é a natureza inteira do problema. Eles não vêm até você. Você tem que ir procurar a ausência, o que é uma coisa antinatural de se fazer.

Contando o silêncio

A disciplina prática que surgiu disso é uma pergunta que agora tento fazer constantemente: o que está faltando neste quadro, e por que está faltando? Sempre que um conjunto de dados parece limpo e encorajador, o reflexo correto não é sentir-se encorajado. É perguntar se ele parece assim porque a realidade é genuinamente encorajadora, ou porque os casos desencorajadores foram silenciosamente removidos antes de eu chegar para olhar.

Aprender a notar e contar o silêncio — a dar peso às coisas que estão conspicuamente ausentes — acabou sendo um dos hábitos mais importantes que construí. É uma habilidade estranha, prestar atenção às ausências, porque ausências são, por sua própria natureza, fáceis de ignorar. Mas num mundo que edita para fora os próprios fracassos, a capacidade de sentir a forma do que foi removido é a maior parte da batalha.

A lição mais profunda: a evidência ausente é a mais importante

O que em última instância tirei de tudo isso é que a evidência mais valiosa é, com muita frequência, a evidência que foi removida, justamente porque representa fracasso. O cemitério contém muito mais informação sobre risco do que o círculo dos vencedores jamais conterá — mas o cemitério é silencioso, e você tem que escolher entrar nele, porque ele nunca vai te chamar.

Então agora, quando vejo um padrão encorajador, minha primeira pergunta não é “quão encorajador é isso?”. É “quem e o que teve de desaparecer para que isto parecesse tão bom quanto parece?”. O quadro que sobrevive para chegar até você foi, quase sempre, editado pelos próprios desfechos que você mais precisa estudar. O trabalho mais difícil e mais importante é reconstruir o que foi cortado.

— Sem sinais, sem retornos, não é recomendação de investimento.