Я изучал только выживших
Долгое время я уверенно делал выводы из данных, лежавших передо мной, и столь же долго не замечал в этих данных самого важного: они уже были отфильтрованы. Отфильтрованы выживанием. Случаи, которые значили больше всего, тихо убрали из картины ещё до того, как я вообще пришёл на неё взглянуть, и поскольку их не было, мне и в голову не приходило их учитывать.
Это одно из тех искажений, которые широко известны, с которыми все согласно кивают, когда о них слышат, и в которые потом почти каждый — включая меня — всё равно ухитряется угодить напрямую. Знать о таком искажении и быть от него защищённым — это, как выясняется, совершенно разные вещи.
Классическая форма ошибки
Самая известная иллюстрация этого пришла из военного времени, и её стоит вспомнить в отвлечённом виде, потому что форма здесь предельно чистая. Представьте, что вы изучаете самолёты, вернувшиеся с боевых вылетов, чтобы решить, куда добавить броню. Вы смотрите, где вернувшиеся машины изрешечены повреждениями, и очевидное решение — укрепить именно эти места.
Это в точности неверно. Самолёты, которые вы изучаете, по определению те, что сумели вернуться. Повреждения, которые вы на них видите, — это повреждения, которые самолёт может получить и всё-таки уцелеть. Машин, поражённых в по-настоящему смертельные места, перед вами нет для осмотра, потому что они вовсе не вернулись. Повреждения, от которых вам больше всего нужно защититься, — это как раз те, которых вы никогда не видите, ведь свидетельства о них сами удалили себя из вашей выборки. Выжившие указывают вам ровно в неверном направлении.
Моя версия той же ошибки
В этой области ловушка одета иначе, но скелет у неё тот же самый. То, что и сегодня доступно для изучения, — это с необходимостью то, что выжило. Активы, существующие сейчас, — это те, что не обнулились, не исчезли, не растворились тихо где-то в истории. Если я изучаю только то, что сейчас лежит передо мной, я изучаю популяцию, заранее отобранную по единственному признаку — тому, что она не погибла.
И затем, опираясь на эту отобранную выборку, я делал бы выводы о мире, в котором гибель очень даже присутствует. По сути я изучал свойства победителей и принимал их за свойства участников, как будто это одна и та же группа. Это не так. Разница между ними — это кладбище, на которое я не смотрел.
Мёртвые не появляются в данных
По-настоящему коварная часть — в самом механизме. Провалы удаляют себя из вашего набора данных. То, что взорвалось, что было делистнуто, что свелось к нулю и забылось, — этого просто больше нет перед вами. И поскольку их нет перед вами, они вообще никак не давят на ваши выводы, хотя и являются единственным самым важным массивом свидетельств о том, как всё на самом деле идёт не так.
Так что ваши данные тихо отобраны, причём отобраны ровно теми исходами, которые вам важнее всего понять. Катастрофы вычёркивают сами себя. Остаётся аккуратная коллекция того, что так или иначе уцелело, — а аккуратная коллекция выживших крайне обманчива для изучения, если ваш настоящий вопрос про риск, потому что риск — это как раз история тех, кто не уцелел.
Оптимизм — это вывод по умолчанию
Особенно опасным это делает то, что у искажения есть устойчивое направление. Оно не разбрасывает ваши выводы как попало; оно смещает их каждый раз в одну и ту же сторону. Ошибка выжившего всегда делает вещи безопаснее, прибыльнее и надёжнее, чем они есть на самом деле, потому что катастрофы убрали из поля зрения ещё до того, как вы начали.
Это значит, что любой анализ, построенный на выживших, систематически смотрит сквозь розовые очки, и этот оттенок почти невозможно различить изнутри, потому что вы не видите того, чего не хватает. Отсутствие о себе не объявляет. Пустое место, где должна быть сотня провалов, выглядит ровно так же, как пустое место. Ничто в имеющихся у вас данных никогда само собой не расскажет вам о данных, которых у вас нет. Об этом нужно догадаться спросить.
Нельзя анализировать то, чего нет
Вот почему исправление настолько контринтуитивно и почему искушённость в работе с доступными данными вас не спасает. Проблема не в данных, которые у вас есть; она в данных, которых у вас нет. Никакая строгость, приложенная к смещённой выборке, не убирает смещение, потому что смещение живёт не в выборке — оно живёт в разрыве между выборкой и реальностью. Можно безупречно проанализировать выживших и всё равно полностью ошибаться насчёт мира, потому что выжившие никогда и не были всем миром.
Единственное настоящее лекарство — активно пойти и отыскать мёртвых. Намеренно выискивать провалы, то, чего больше не существует, случаи, которые удалили сами себя, и вручную возвращать их в картину. Это и впрямь труднее, потому что они прячутся, — в этом и состоит вся природа проблемы. Они к вам не приходят. Вам приходится идти на поиски отсутствия, а это противоестественное занятие.
Считать тишину
Практическая дисциплина, которая выросла из этого, — вопрос, который я теперь стараюсь задавать постоянно: чего не хватает в этой картине и почему этого не хватает? Всякий раз, когда набор данных выглядит чистым и обнадёживающим, правильный рефлекс — не воодушевляться. Это спросить себя, выглядит ли он так потому, что реальность действительно обнадёживает, или потому, что обескураживающие случаи тихо убрали ещё до того, как я пришёл взглянуть.
Научиться замечать и считать тишину — придавать вес тому, что бросающимся образом отсутствует, — оказалось одной из важнейших привычек, что я выработал. Это странный навык — обращать внимание на отсутствия, ведь отсутствия по своей природе легко проглядеть. Но в мире, который вычёркивает собственные провалы, способность чувствовать форму того, что было убрано, — это бо́льшая часть всей битвы.
Более глубокий урок: отсутствующее свидетельство — самое важное
В итоге я вынес из всего этого то, что самое ценное свидетельство очень часто — это свидетельство, которое было убрано, именно потому, что оно представляет провал. На кладбище куда больше информации о риске, чем когда-либо будет в кругу победителей, — но кладбище безмолвно, и вам нужно самим решиться войти в него, потому что оно никогда не позовёт вас.
Так что теперь, когда я вижу обнадёживающую закономерность, мой первый вопрос не «насколько она обнадёживает?». Он звучит так: «кто и что должен был исчезнуть, чтобы это выглядело настолько хорошо?». Картина, которая дожила до того, чтобы дойти до вас, почти всегда отредактирована ровно теми исходами, которые вам важнее всего изучить. Самая трудная и самая важная работа — восстановить то, что было вырезано.
— Никаких сигналов, никакой доходности, не является инвестиционным советом.