Филип Тетлок - Думай медленно — предсказывай точно. Искусство и наука предвидеть опасность

ежедневные флуктуации в доходах существующих инвестиций, которые, очевидно, носят эфемерный и незначительный характер, имеют тенденцию оказывать чрезмерное и даже абсурдное влияние на рынок [138].

«Многие инвесторы двигаются от акций к акциям или от паевого фонда к паевому фонду так, словно выбирают и отбрасывают карты в игре кункен», — заметил принстонский экономист Бертон Малкиел [139]. И расплачиваются за это. Многие исследования показали, что те, кто чаще торгует, получают худшую прибыль, чем те, кто придерживается старых добрых стратегий «покупать и держать». Малкиел процитировал одно исследование шестидесяти шести тысяч американских семейств за пятилетний период в 1990-е годы, когда рынок имел ежегодную прибыль 17,9 %. Семейства, торговавшие больше всего, имели прибыль только 11,4 % [140]. В торги вкладывалось много денег и усилий, и в то же время люди, которые ими занимались, получили бы большую прибыль, если бы потратили это время, например, на игру в гольф.

Как и в случае с недостаточной реакцией, ключ здесь — в приверженности, а в данном случае — в ее отсутствии. Участники торгов, которые постоянно продают и покупают, не имеют ни сознательной, ни эмоциональной привязанности к своим акциям. Они ждут, что какие-то из них упадут, и без сожалений с ними расстаются. Метафора Малкиела точна. Они привязаны к своим акциям не сильнее, чем игрок в кункен — к картам, которые держит в руке, отчего столь чрезмерно и реагируют на информацию, очевидно имеющую «эфемерный и незначительный характер».

Учитывая тот факт, что суперпрогнозисты практически не привязаны к своим прогнозам, можно ожидать от них больше чрезмерных реакций — как в случае с Дагом Лорчем и его командой, когда они поменяли вероятность с 55 на 95 %, основываясь на единственном отчете месячной давности, — чем недостаточных. Однако суперпрогнозисты зачастую умудряются избежать обеих ошибок. Они бы не были суперпрогнозистами, если бы этого не делали.

Так как же они это делают? В XIX веке, когда проза не считалась полноценной без глубокомысленной отсылки к греческой мифологии, любое обсуждение стоящих с противоположных концов опасностей вызывало ассоциации со Сциллой и Харибдой. Сцилла — чудовище, обитавшее на скале у побережья Италии. Харибда — водоворот у побережья Сицилии, недалеко от Сциллы. Моряки знали, что, если отклонятся слишком сильно в одном из двух направлений, они обречены. Суперпрогнозисты должны чувствовать то же самое, когда дело касается недостаточной и чрезмерной реакции на новую информацию, Сциллы и Харибды прогнозирования. Хорошие обновления — это поиск безопасного пути посередине.

В третьем сезоне турнира IARPA Тим Минто занял первое место с окончательным результатом Брайера 0,15 — изумительное достижение, практически сравнимое с выигрышем Кеном Дженнингсом в семидесяти четырех выпусках игры Jeopardy! подряд. Серьезной причиной такого впечатляющего результата сорокапятилетнего инженера программного обеспечения из Ванкувера было его мастерство обновлять прогнозы.

На первоначальные прогнозы Тим тратит меньше времени, чем другие лучшие прогнозисты. «Я обычно трачу от пяти до пятнадцати минут, то есть, возможно, всего около часа на новую пачку из шести-семи вопросов», — сказал он. Но на следующий день он вернется к этим вопросам, заново на них взглянет и сформирует второе мнение. Также он ищет в интернете доказательства противоположного. И занимается этим пять дней в неделю.

Все эти поиски заставляют его часто менять мнение. «Я постоянно обновляю прогнозы, — сказал он. — Так работает мое сознание, хотя чаще я применяю это на работе, в моей практике, чем в вопросах [турнира]» [141]. К моменту закрытия вопроса Тим обычно делает около дюжины прогнозов по нему; иногда общее их количество ближе к сорока или пятидесяти. На один из вопросов («Достигнут ли США и Афганистан соглашения по вопросу продолжающегося присутствия американских войск?») он сделал семьдесят семь прогнозов.

Может показаться, что капитан Минто плывет прямо к Харибде чрезмерной реакции. Но я пока не упомянул масштаб постоянных коррекций его курса. Почти во всех случаях они маленькие. И это имеет большое значение.

По мере того, как в Сирии разгоралась гражданская война и с места срывалось все больше мирных жителей, турнир IARPA спросил прогнозистов, будет ли «количество зарегистрированных сирийских беженцев, указанных в отчете Агентства ООН по делам беженцев от 1 апреля 2014 года» менее 2,6 миллиона. Вопрос задали в течение первой недели января 2014 года, так что прогнозистам нужно было заглянуть на три месяца в будущее. Ответ в итоге оказался утвердительным. Вот график обновлений прогноза Тима Минто в течение этих трех месяцев:

Как обновляется мнение у лучшего суперпрогнозиста

Тим начал с очень небольшого перевеса в сторону утвердительного ответа, что тогда имело смысл. Планку задали высокую, но ситуация в Сирии была тяжелой, и количество беженцев увеличивалось с каждым днем. Таблица демонстрирует, что случилось затем: Тим менял свой прогноз 34 раза. Некоторые изменения уводили его дальше от правильного ответа, но большинство шло в правильном направлении. Финальный результат Брайера по этому вопросу у Тима был впечатляющий — 0,07.

И обратите внимание, какие маленькие изменения делал Тим. Никаких драматических сдвигов на тридцать или сорок процентов. Среднее обновление крошечное, всего 3,5 %. Это крайне важно. Небольшое количество маленьких обновлений могло бы сдвинуть Тима в направлении недостаточной реакции. Множество больших обновлений могли бы подтолкнуть к чрезмерной. Но с большим количеством маленьких обновлений Тим благополучно проскользнул между Сциллой и Харибдой.

Может показаться, что немного странно мыслить в категориях таких крошечных изменений — «единиц сомнения», — но если у вас такое же детализированное мышление, как у Тима, то это естественно. Представьте: в начале сентября 2014 года вы прочитали, что Нейт Сильвер, выдающийся агрегатор опросов общественного мнения, дал республиканцам 60 %-ный шанс преимущества в Сенате на промежуточных выборах. Вам это кажется убедительным, поэтому в изначальном прогнозе вы указываете вероятность такого развития событий в 60 %. На следующий день вы обнаруживаете очередной опрос, который выявил, что поддержка республиканцев в предвыборной сенатской гонке в Колорадо выросла с 45 до 55 %. На сколько следует поднять процент в вашем прогнозе? Цифра должна быть больше ноля. Но, подумав, сколько еще гонок республиканцам потребуется выиграть, вы поймете, что даже победа в Колорадо серьезно ситуацию не меняет, и считаете, что максимальное число, на которое можно поднять вероятность, — 10 %. Итак, сейчас у вас есть промежуток от 1 до 10 %. Сколько гонок уже прошли благоприятно для республиканцев? Если ответ «гораздо больше, чем нужно, чтобы завоевать преимущество в Сенате», он предполагает, что следует остановиться выше по шкале. Если «еле-еле достаточно, чтобы завоевать преимущество», — ниже по шкале. На какие тенденции указывают опросы в этих гонках? Распространяются ли на них факторы, которые работают в Колорадо? Сколько времени осталось до выборов? Какова предиктивность опросов до сего момента в преддверии выборов? Каждый вопрос помогает вам прицелиться точнее. Сначала вы сужаете промежуток с 2 до 8 %, затем — с 3 до 7 %. В конце концов вы останавливаетесь на 4 % и поднимаете прогноз с 60 до 64 %.