Филип Тетлок - Думай медленно — предсказывай точно. Искусство и наука предвидеть опасность

Чтобы найти островки профессионализма в море недобросовестности, обратитесь к следующим книгам, посвященным концепциям и способам прогнозирования: Nate Silver. The Signal and the Noise: Why So Many Predictions Fail — but Some Don’t. New York: Penguin Press, 2012; Principles of Forecasting: A Handbook for Researchers and Practitioners / ed. J. Scott Armstrong. Boston: Kluwer, 2001; Bruce Bueno de Mesquita . The Predictioneer’s Game. New York: Random House, 2009. Увеличить количество этих островков, как выяснилось, сложно. Часто в книгах практически не встречается переход от учебных статистических концепций (таких как регрессия к среднему значению) к проблемам, с которыми студенты могут встретиться позже в жизни. См.: D. Kahneman and A. Tversky . On the Study of Statistical Intuitions // Cognition . 1982. № 11. P. 123–141. Такое положение вещей крайне усложняет попытки проекта «Здравое суждение» научить людей думать как суперпрогнозисты.

Bill Gates: My Plan to Fix the World’s Biggest Problems // Wall Street Journal . 2013. January 25. http://www.wsj.com/articles/SB 10001424127887323539804578261780648285770.

Intelligence Analysis: Behavioral and Social Scientific Foundations / eds. B. Fischhoff and C. Chauvin. Washington, DC: National Academies Press, 2011; Committee on Behavioral and Social Science Research to Improve Intelligence Analysis for National Security, Board on Behavioral, Cognitive, and Sensory Sciences, Division of Behavioral and Social Sciences and Education, National Research Council // Intelligence Analysis for Tomorrow: Advances from the Behavioral and Social Sciences. Washington, DC: National Academies Press, 2011.

P. E. Tetlock, B. Mellers, N. Rohrbaugh, and E. Chen. Forecasting Tournaments: Tools for Increasing Transparency and Improving the Quality of Debate // Current Directions in Psychological Science. 2014. P. 290–295.

Аарон Браун, в беседе с автором, 30 апреля 2013 года.

Paul Meehl . Clinical Versus Statistical Prediction. Minneapolis: University of Minnesota Press, 1954.

Stephen Baker . Final Jeopardy!. Boston: Houghton Mifflin Harcourt, 2011. P. 35.

Дэвид Феруччи, в беседе с автором, 8 июля 2014 года.

Archibald L. Cochrane with Max Blythe. One Man’s Medicine: An Autobiography of Professor Archie Cochrane. London: British Medical Journal, 1989.

Там же. P. 171.

Там же.

Druin Burch . Taking the Medicine: A Short History of Medicine’s Beautiful Idea, and Our Difficulty Swallowing It. London: Vintage, 2010. P. 4.

Там же. P. 37.

Ira Rutkow . Seeking the Cure: A History of Medicine in America. New York: Scribner, 2010. P. 98.

Там же. P. 94.

Burch. Taking the Medicine. P. 158.

Ричард Фейнман. Напутственная речь выпускникам в Калифорнийском технологическом институте. Пасадена, 1974 год.

Richard Feynman. The Meaning of It All: Thoughts of a Citizen-Scientist. New York: Basic Books, 2005. P. 28.

Там же. P. 27.

Cochrane with Blythe. One Man’s Medicine. P. 46, 157, 190, 211.

Daniel Kahneman. Thinking, Fast and Slow. New York: Farrar, Straus and Giroux, 2011. P. 209.

Если вы знакомы с когнитивной психологией, то знаете, что школа мысли, исследующая эвристику и искажения, не раз оспаривалась. Скептики впечатлялись тем, как удивительно точно может оперировать система 1. Люди автоматически и, похоже, самым оптимальным образом синтезируют бессмысленные фотоны и звуковые волны в язык, который мы наполняем значением ( Steven Pinker . How the Mind Works. New York: Norton, 1997). До сих пор ведутся споры о том, как часто эвристика системы 1 вводит нас в заблуждение ( Gerd Gigerenzer and PeterTodd . Simple Heuristics that Make Us Smart. New York: Oxford University Press, 1999) и как сложно преодолеть иллюзии ЧВТИЕ с помощью тренировок или стимулов ( Philip Tetlock and Barbara Mellers . The Great Rationality Debate: The Impact of the Kahneman and Tversky Research Program // Psychological Science 13. 2002. № 5. P. 94–99). Психологии еще только предстоит сложить все части этой мозаики. Однако, по моему мнению, перспектива эвристик и искажений дает самое лучшее базовое представление об ошибках, которые делают прогнозисты в реальном мире, и представляет собой самое лучшее руководство по снижению количества ошибок в прогнозах.

Michael Gazzaniga. The Mind’s Past. Berkeley: University of California Press, 1998. P. 24–25.

Ziva Kunda. Social Cognition: Making Sense of People. Cambridge, MA: MIT Press, 1999.

Kahneman. Thinking, Fast and Slow. P. 212.

Можно видеть, как это работает в ходе выборов. Когда действующий президент претендует на второй срок, многие избиратели задаются вопросом: «Хорошо ли он выполнял свою работу в первый срок?» Если серьезно задуматься, то это сложный вопрос. Он требует обзора всего, что президент сделал и не сделал в течение четырех лет, и более того — размышлений о том, как могли бы обстоять дела, если бы руководителем страны был другой человек. Даже для журналиста, освещающего деятельность Белого дома, ответ на этот вопрос потребовал бы много работы, а для человека, который близко не следит за политикой, это и вовсе непосильная задача. Неудивительно, что избиратели используют маневр «заманить и подменить». Избиратели судят о проделанной президентом работе за последние четыре года, руководствуясь тем, довольны ли они экономической ситуацией — местной и во всей стране — в последние шесть месяцев. Таким образом, вопрос «Хорошо ли президент поработал за последние четыре года?» заменяется на «Считаю ли я, что страна движется в общем и целом в правильном направлении в последние полгода?» Очень немногие избиратели признают при этом: «Мне очень сложно оценивать работу президента, поэтому я воспользуюсь вопросом-подменой». Но очень многие из нас именно так и поступают подсознательно. См., например, работу, представленную на ежегодной встрече Американской ассоциации политических наук в Чикаго в 2004 году: Christopher Achen and Larry Bartels . Musical Chairs: Pocketbook Voting and the Limits of Democratic Accountability.

Daniel Kahneman and Gary Klein . Conditions for Intuitive Expertise: A Failure to Disagree // American Psychologist 64. 2009. № 6. September. P. 515–526.

W. G. Chase and H. A. Simon. The Mind’s Eye in Chess / ed. W. G. Chase // Visual Information Processing. New York: Academic Press, 1973.

Kahneman and Klein. Conditions for Intuitive Expertise. P. 520.

Там же.

Nigel Farndale. Magnus Carlsen: Grandmaster Flash // Observer . 2013. October 19.

Peggy Noonan. Monday Morning // Wall Street Journal . 2012. November 5. http://blogs.wsj.com/peggynoonan/2012/11/05/monday-morning/.

Mark Spoonauer. The Ten Worst Tech Predictions of All Time // Laptop . 2013. August 7. blog.laptopmag.com/10-worst-tech-predictions-of-all-time.

Bryan Glick. Timing Is Everything in Steve Ballmer’s Departure — Why Microsoft Needs a New Vision // Computer Weekly Editor’s Blog . 2013. August 27. http://www.computerweekly.com/blogs/editors-blog/2013/08/timing-is-everything-in-steve.html.

«Starr Report: Narrative». Nature of President Clinton’s Relationship with Monica Lewinsky. Washington, DC: US Government Printing Office, 2004. Footnote 1128.

Sameer Singh. Tech-Thoughts. 2013. November 18. http://www.tech-thoughts.net/2013/11/smartphone-market-share-by-countryq3-2013.html#.VQM0QEJYW-Q.

Barry Ritholtz. 2010 Reminder: QE = Currency Debasement and Inflation // The Big Picture . 2013. November 15. http://www.ritholtz.com/blog/2013/11/qe-debasement-inflation/print/.

Похожая проблема возникает с предсказанием Стива Балмера относительно iPhone . Данные о доле iPhone , которые я предоставил, относятся к ситуации на рынке через 6 лет после запуска iPhone , а через семь лет это число было еще больше. Так что, в принципе, Балмер мог бы возразить, что в его предсказании подразумевался срок два-три года или пять лет. Это, по существу, способ защиты, противоположный формулировке «погодите, все еще будет». Пусть этот аргумент тенденциозен и своекорыстен, но его можно использовать, что приведет именно к тем препирательствам, которых мы хотим избежать при оценке точности прогноза.