Филип Тетлок - Думай медленно — предсказывай точно. Искусство и наука предвидеть опасность

Но преуменьшать сложность обновлений — огромная ошибка, и это едва ли не важнее. Суперпрогнозисты не просто бездумно подстраивают свои прогнозы в ответ на все, что показывают по CNN . Хорошее обновление предсказания требует такого же мастерства, как и при составлении изначального прогноза, — и зачастую таких же усилий. Иногда оно может быть даже более сложным.

«Сограждане американцы, сегодня вечером я хочу поговорить с вами о том, что Соединенные Штаты вместе со своими друзьями и союзниками сделают, чтобы ослабить и в конечном счете уничтожить террористическую группу, известную как ИГИЛ, — сказал президент Обама в начале речи, которую транслировали по телевидению в прямом эфире 10 сентября 2014 года. — Я ясно продемонстрировал, что мы будем охотиться на террористов, которые угрожают нашей стране, где бы они ни находились. Это означает, что я без колебаний предприму действия против ИГИЛ как в Сирии, так и в Ираке».

Суперпрогнозисты обратили внимание на эту речь. На повестке турнира на тот момент стоял вопрос, предпримут ли иностранные военные силы какие-то операции на территории Сирии до 1 декабря 2014 года. Заявление Обамы сделало утвердительный ответ практически определенным. Последовало множество обновлений прогнозов, которого явно требовало заявление президента Обамы, — как новые данные опросов общественного мнения, показывающие массовое увеличение поддержки кандидата. Также не вызывало сомнений, каким должно быть обновление — максимальное увеличение вероятности. Но подобное развитие событий, как и требуемый на него отклик, очевидны всем, и никто не может дать самый лучший прогноз, всего лишь основываясь на общедоступных знаниях. Здесь все дело — в верной идентификации и реагировании на менее очевидную информацию, чтобы попасть в цель раньше остальных [127].

Значительно позже изначального прогноза Билла Флэка по вопросу с Арафатом и полонием швейцарская команда объявила, что слегка задержится с результатами, потому что им нужно провести дополнительные тесты (какие именно — не уточнялось). Что это означало? Заявление швейцарцев могло не иметь вообще никакого отношения к вопросу — например, лаборант слишком бурно отпраздновал день рождения и не пришел на работу. Выяснить это было невозможно. Но Билл к тому моменту знал о полонии достаточно и был в курсе, что полоний можно найти как в результате попадания в организм в чистом виде, так и в результате разложения свинца природного происхождения. Чтобы идентифицировать истинный источник, аналитики изымают весь полоний, ждут достаточно долго, чтобы еще какое-то количество свинца, если оно присутствует, разложилось до полония, и делают еще один тест. Задержка швейцарской команды могла означать, что они обнаружили полоний — и теперь проверяют, не может ли он оказаться результатом разложения свинца. Но это только одно из возможных объяснений, поэтому Билл осторожно поднял вероятность утвердительного ответа в своем прогнозе до 65 %. Это умное обновление. Билл заметил неочевидную информацию, которая дала подсказку, и продвинул степень вероятности в правильную сторону до того, как это сделал кто-либо еще, — а в результате выяснилось, что швейцарская команда действительно нашла полоний в теле Арафата.

Итоговый результат Брайера у Билла по этому вопросу был 0,36. Может показаться, что это не так уж впечатляюще, но не забывайте, что результат Брайера имеет значение только относительно сложности решаемой проблемы, и большинство экспертов были шокированы результатами. К окончанию срока рынок прогнозов, действующий внутри турнира IARPA , оценивал вероятность утвердительного ответа всего лишь в 4,27 %, что дало результат Брайера в пять раз хуже, чем у Билла. Учитывая сложность проблемы, тот факт, что Билл по большей части видел положительный результат теста более вероятным, — по-настоящему впечатляющая точность.

Но Билл продемонстрировал и обратную сторону: что даже те, кто лучше всего обновляют свои прогнозы, могут ошибаться. В 2013 году, когда IARPA спросило, посетит ли японский премьер-министр Синдзо Абэ храм Ясукуни, Билл был практически уверен, что ответ будет отрицательным. Ясукуни был основан в 1869 году для почитания памяти японских военных, и сейчас здесь упоминается в общем около 2,5 миллиона имен солдат. Для консерваторов вроде Абэ это очень важно. Однако среди военных, которым поклоняются в храме, — около тысячи военных преступников, в том числе «класса А». Посещение Ясукуни японскими лидерами неизменно вызывает возмущение у правительств Китая и Кореи, поэтому основной союзник Японии, правительство США, постоянно предупреждает японских премьер-министров, чтобы они не портили таким образом отношения с соседями. Рассмотрев эти факты, Билл посчитал, что Абэ не станет посещать Ясукуни. Это был обоснованный прогноз. Затем кто-то из приближенных к Абэ неофициально сообщил, что тот все-таки пойдет в храм. Время для обновления прогноза? Билл посчитал, что для Абэ совершенно нелогично посещать Ясукуни, и не стал вносить коррективы. 26 декабря Абэ посетил Ясукуни — и результат Брайера у Билла тут же ухудшился.

Подобные истории, казалось бы, подразумевают, что, если вы заметите потенциально важное новое свидетельство, нужно без колебаний резко повернуть штурвал корабля. Однако давайте посмотрим, что случилось, когда Даг Лорч вышел в Северный Ледовитый океан. «Будет ли распространение льда Северного Ледовитого океана 15 сентября 2014 года меньше, чем 15 сентября 2013 года?» — спросило IARPA 20 августа 2014 года. И пусть это вопрос всего на 26 дней в будущее, он оказался очень сложным. Ученые отслеживают лед Арктики с изумительной точностью, сообщая результаты каждый день, и в середине августа 2014 распространение льда было практически таким же, как год назад. Так будет ли там больше или меньше льда 15 сентября, чем годом ранее? Все, от ученых до суперпрогнозистов, сошлись на том, что результат будет приблизительно таким же. Даг сделал первый прогноз, в котором занял разумную позицию, поставив 55 % на то, что льда будет меньше. Двумя днями позже один из членов команды Дага нашел отчет Сообщества предсказаний морского льда. Это была ценнейшая находка. Ученые сделали двадцать восемь отдельных прогнозов, используя четыре разных метода, и все, кроме трех, предсказали, что в сентябре 2014 года льда будет меньше. Единственный недостаток — отчет был месячной давности. Когда имеешь дело с ежедневно меняющейся реальностью и твой прогноз смотрит в будущее всего на двадцать шесть дней, месяц — это большой срок. И все же, как мне сказал Даг, «это было чертовски убедительно». Даг резко развернул штурвал до 95 % вероятности утвердительного ответа. За последующие несколько недель потеря льда замедлилась. 15 сентября льда было больше, чем годом ранее. Результат Брайера у Дага от этого сильно пострадал [128]. Таким образом, после того как сделано изначальное предсказание, прогнозист сталкивается с двумя опасностями. Первая — не уделить должного внимания новой информации. Это недостаточная реакция. И второе — чрезмерная реакция на новую информацию: придание ей слишком большого значения и слишком радикальное изменение прогноза. Как недостаточная, так и чрезмерная реакции могут уменьшить точность. Также, в исключительных случаях, они могут разрушить отличный прогноз.