Во власти цифр. Как числа управляют нашей жизнью и вводят в заблуждение [заметки]

Шрифт

Интервал

Национальная аллея (англ. National Mall) – комплекс парков, памятников и музеев в Вашингтоне, в восточном конце которого расположено здание Капитолия. – Здесь и далее, если не указано иное, постраничные примеч. перев.

«Наш мир в данных» (англ.).

Я уже писала о встрече с Хуанитой в своем блоге Out of the Blauw и в блоге организации Oikocredit Nederland. Поскольку я не сумела связаться с ней и показать ей это изложение, ее имя изменено. Глава 1. Числа могут спасать

Индекс массы тела. – Примеч. ред.

В рассказе о Флоренс Найтингейл я использовала ее биографию: Bostridge М. Florence Nightingale – The Woman and Her Legend. Viking, 2008, и статью Cara Giaimo. Florence Nightingale Was Born 197 Years Ago, and Her Infographics Were Better Than Most of the Internet’s, опубликованную 12 мая 2017 г. на сайте Atlas Obscura.

Сейчас Ускюдар, район в азиатской части Стамбула.

Партенопея – название древнегреческой колонии, находившейся на месте нынешнего Неаполя. Имя Флоренс (Florence) – английский вариант названия города Флоренции.

Florence Nightingale. Notes on Matters Affecting the Health, Efficiency, and Hospital Administration of the British Army. L., Harrison and Sons, 1858. Она использовала данные, собранные британскими и французскими статистиками. См.: Lynn McDonald. Florence Nightingale, Statistics and the Crimean War. Statistics in Society, май 2013 г.

Hugh Small. Florence Nightingale’s Hockey Stick // Royal Statistical Society, 7 октября 2010 г.

Iris Veysey. A Statistical Campaign: Florence Nightingale and Harriet Martineau’s England and her Soldiers // Science Museum Group Journal, 3 мая 2016 г.

Harold Raugh. The Victorians at War, 1815–1914: An Encyclopedia of British Military History (ABC–CLIO, 2004).

Lynn McDonald. Florence Nightingale and Hospital Reform: Collected Works of Florence. Wilfrid Laurier University Press, 2012. P. 442.

Hugh Small. Florence Nightingale’s Statistical Diagrams. Доклад на исследовательской конференции, организованной музеем Флоренс Найтингейл, 18 марта 1998 г.

В Нидерландах эти записи начали вносить в Реестр рождений, смертей и браков в 1811 г. В некоторых регионах Франции такая система была внедрена еще в 1796 г.

Ian Hacking. Biopower and the Avalanche of Printed Numbers. Humanities in Society, 1982.

Meg Leta Ambrose. Lessons from the Avalanche of Numbers: Big Data in Historical Perspective // Journal of Law and Policy for the Information Society, 2015.

При написании этого абзаца я опиралась на книгу Yuval Noah Harari. Sapiens. Harvill Secker, L., 2014. (Русское изд.: Харари Ю. Н. Sapiens. Краткая история человечества / Пер. с англ. Л. Сумм. М.: Синдбад, 2016.)

Пер. с англ. Л. Сумм.

При написании этого абзаца я опиралась на книгу James Scott. Seeing Like a State. Yale University Press, New Haven, 1998. (Скотт Дж. Благими намерениями государства. Почему проваливались проекты улучшения человеческой жизни / Пер. с англ. Э. Н. Гусинского и Ю. И. Турчаниновой. М.: Университетская книга, 2005.)

Journalier – дневной, суточный (фр.).

Ken Alder. A Revolution to Measure: The Political Economy of the Metric System in France // Values of Precision. Princeton University Press, 1995. P. 39–71.

James Scott. Seeing Like a State. Yale University Press, New Haven, 1998.

Ken Alder. A Revolution to Measure: The Political Economy of the Metric System in France // Values of Precision. Princeton University Press, 1995. P. 39–71.

На это замечание меня навел Джеймс Скотт. Вот что он пишет в своей книге Seeing Like a State. Yale University Press, New Haven, 1998: «В качестве централизующей единицы универсальный метр, заменяющий более старые, своеобразные способы измерений, можно сравнить с национальным языком, заменяющим существующую путаницу диалектов» (пер. с англ. Э. Н. Гусинского и Ю. И. Турчаниновой).

Mars Climate Orbiter Mishap Investigation Board, Phase I Report, 10 ноября 1999 г.

Это происходило в эпоху Просвещения и «научной революции», когда ученые основывали свое мышление и свои исследования на разуме и универсальных принципах.

Appendix G: Weights and Measures, CIA World Factbook, по состоянию на 26 июля 2018 г.

Meg Leta Ambrose. Lessons from the Avalanche of Numbers: Big Data in Historical Perspective // Journal of Law and Policy for the Information Society, 2015.

Эту фразу можно найти в работе Ian Hacking. Biopower and the Avalanche of Printed Numbers, Humanities in Society, 1982. В этой же статье Хакинг описывает перечень заболеваний, составленный Уильямом Фарром и его коллегами.

На это замечание меня навел Юваль Ной Харари, который пишет в книге Sapiens: «…именно математические символы сделались всемирным письменным языком» (пер. с англ. Л. Сумм).

Hans Nissen, Peter Damerow and Robert Englund. Archaic Bookkeeping: Early Writing and Techniques of Economic Administration in the ancient Near East. University of Chicago Press, 1994.

Census, Wikipedia, по состоянию на 26 июля 2018 г. (См. статью «Перепись населения» в Википедии.)

Jelke Bethlehem. The Rise of Survey Sampling, Centraal Bureau voor de Statistiek, 2009.

Экспоненциальным назвал рост этого периода Ян Хакинг в работе Biopower and the Avalanche of Printed Numbers, Humanities in Society, 1982. Оставшаяся часть этого абзаца также основана на статье Хакинга.

General Register Office, Wikipedia, по состоянию на 28 июля 2018 г.

Ian Hacking. Biopower and the Avalanche of Printed Numbers, Humanities in Society, 1982.

Мои мысли об Адольфе Кетле основаны на книге Todd Rose. The End of Average. Harper Collins, 2016.

Найтингейл назвала Кетле «создателем статистики» в адресованном ему письме. Gustav Jahoda. Quetelet and the Emergence of the Behavioral Sciences, SpringerPlus, 2015.

В результате этой революции Бельгия получила независимость от Нидерландов.

Кетле видел в «среднем человеке» не только статистическое понятие, но и идеализированный образ человечества.

Stephen Stigler. Darwin, Galton and the Statistical Enlightenment, Journal of the Royal Statistical Society, 2010.

Я узнала об Арчибальде Кокране из книги Philip Tetlock and Dan Gardner. Superforecasting. Random House Books, 2016. Этот раздел основан на автобиографии Кокрана под названием One Man’s Medicine (BMJ Books, L., 1989), написанной в соавторстве с Максом Блайтом.

Marcus White. James Lind: The Man who Helped to Cure Scurvy with Lemons. BBC News, 4 октября 2016 г. Сейчас мы знаем, что цитрусы содержат витамин C, который может предотвращать цингу или излечивать от нее.

Nutritional yeast, Wikipedia, по состоянию на 26 июля 2018 г. (См. статью «Пищевые дрожжи» в Википедии.)

В автобиографии Кокрана не уточняется, какие именно последствия он имел в виду.

Описание этого случая основано на автобиографии Арчи Кокрана One Man’s Medicine. BMJ Books, L., 1989. Эта история также рассказывается в книге Philip Tetlock and Dan Gardner. Superforecasting. Random House Books, 2016. (Цитаты из этой книги приводятся по изданию: Тетлок Ф., Гарднер Д. Думай медленно… предсказывай точно. Искусство и наука предвидеть опасность / Пер. с англ. В. Дегтяревой. М.: АСТ, 2018.)

David Isaacs. Seven Alternatives to Evidence Based Medicine, BMJ, 18 декабря 1999 г.

Это явление также называют «когнитивным диссонансом».

Этот эксперимент описан в книге Vinayak Prasad and Adam Cifu. Ending Medical Reversal. Johns Hopkins University Press, Baltimore, 2015. В более ранней работе эти же исследователи рассмотрели все статьи, опубликованные за десятилетний период в одном научном журнале. Они получили поразительные результаты: почти в 140 случаях общепризнанные методы оказались недействующими. (Prasad et al. A Decade of Reversal: An Analysis of 146 Contradicted Medical Practices. Mayo Clinical Proceedings. 18 июля 2013 г.)

Sanne Blauw. Vijf woorden die volgens statistici de wereld kunnen redden, De Correspondent, 10 февраля 2017 г.

Anushka Asthana. Boris Johnson Left Isolated as Row Grows over £ 350m Post-Brexit Claim, Guardian. 17 сентября 2017 г.

Called to Account, The Economist. 3 сентября 2016 г. Глава 2. Бессмысленный спор об IQ и цвете кожи

В рассказе об истории измерения IQ я с благодарностью использовала книгу Stephen Jay Gould. The Mismeasure of Man. W. W. Norton & Co., 1981. В позднейших исследованиях некоторые аспекты книги Гулда были поставлены под вопрос, но это не относится к его рассказу об измерении IQ. Желающим почитать еще об этой дискуссии я рекомендую работу Jason Lewis, David DeGusta, Marc Meyer, Janet Monge, Alan Mann and Ralph Holloway. The Mismeasure of Science: Stephen Jay Gould versus Samuel George Morton on Skulls and Bias // PLoS Biology. 7 июня 2011 г., а также Michael Weisberg and Diane Paul. Morton, Gould, and Bias: A Comment on «The Mismeasure of Science» // PloS Biology. 19 апреля 2016 г.

Ассистент Йеркса Э. Г. Боринг выбрал 160 000 респондентов и проанализировал их данные.

Jeroen Pen. «Racisme? Het gaat op de arbeidsmarkt om IQ». Brandpunt+. 9 июня 2016 г.

В этом абзаце я использовала статью Gavin Evans. The Unwelcome Revival of «Race Science» // Guardian. 2 марта 2018 г.

Margalit Fox. Arthur R. Jensen Dies at 89; Set Off Debate About I. Q. // New York Times. 1 ноября 2012 г.

Richard Herrnstein and Charles Murray. The Bell Curve. Free Press, 1994.

Nicholas Wade. A Troublesome Inheritance. Penguin, L., 2014. (Уэйд Н. Неудобное наследство. Гены, расы и история человечества / Пер. с англ. А. Олефир. М.: Альпина нон-фикшн, 2018.) Около 140 генетиков написали письмо протеста против утверждений Уэйда, см. Letters: «A Troublesome Inheritance» // New York Times, 8 августа 2014 г.

D. J. Kevles. Testing the army’s intelligence: Psychologists and the military in World War I. Journal of American History, 1968.

Дискриминационные квоты были введены изощренным образом: квота устанавливалась на уровне 2 процентов от числа иммигрантов из данной страны, уже поселившихся в США. При этом были использованы данные переписи 1890 г., в которых было сравнительно мало выходцев из Южной и Восточной Европы, а не более недавней переписи 1920 г.

Шести миллионам, по оценке Allan Chase. The Legacy of Malthus. Knopf, N. Y., 1977. Чейз предполагает, что объемы иммиграции не изменились по сравнению с периодом до 1924 г.

Andrea DenHoed. The Forgotten Lessons of the American Eugenics Movement, New Yorker. 27 апреля 2016 г.

Графики взяты из работы William Dickens and James Flynn. Black Americans Reduce the Racial IQ Gap: Evidence from Standardization Samples Psychological Science, 2006. Я использую результаты тестов по шкале интеллекта Векслера для взрослых за 1995 г.

Malcolm Gladwell. None of the Above, New Yorker. 17 декабря 2007 г.

David Reich. How Genetics Is Changing Our Understanding of Race // New York Times. 23 марта 2018 г.

D’Vera Cohn. Millions of Americans Changed their Racial or Ethnic Identity from One Census to the Next, Pew Research Center, 5 мая 2014 г.

При измерении уровня IQ тестирование проводят на репрезентативной выборке, а затем результаты пересчитывают так, чтобы они соответствовали «нормальному распределению» со средним значением, равным 100 баллам, а баллы 85 процентов участников составляли от 85 до 115.

Inkomens van personen, cbs.nl (по состоянию на 6 сентября 2018 г.).

История Бине излагается в книге Stephen Jay Gould, The Mismeasure of Man. W. W. Norton & Co., 1996. P. 176–184.

От греческих слов κρανίο (череп) и μετρέω (измеряю).

Крайне мала (фр.).

В этом описании денег и других искусственных концепций я опираюсь на книгу Юваля Ноя Харари Sapiens. Harvill Secker, L., 2014.

Я рассказываю об истории ВВП, опираясь на книгу Diane Coyle. GDP: A Brief but Affectionate History. Princeton University Press, 2014.

Хотя Кузнеца часто считают изобретателем ВВП, он развивал уже существовавшие методики, например созданные британским статистиком Колином Кларком.

Simon Kuznets. National Income, 1929–1932, National Bureau of Economic Research, 7 июня 1934 г.

Строго говоря, это был не ВВП, а «валовой национальный продукт» (ВНП). ВВП – это стоимость товаров и услуг внутри данной страны, а ВНП измеряет стоимость товаров и услуг, произведенных жителями этой страны (даже если эти услуги на самом деле оказываются за ее границами).

К примеру, нидерландский премьер-министр Марк Рютте повысил налоги и сократил бюджетные расходы для стимуляции экономики, что должно было привести к выходу из рецессии. Бюро анализа экономической политики Нидерландов считает, что страна находится в рецессии, когда ВВП сокращается на протяжении минимум двух кварталов.

Это интермеццо написано на основе моей статьи Hoe precieze cijfers ons misleiden and de geschiedenis bepalen // De Correspondent, 1 декабря 2015 г.

Enrico Berkes and Samuel Williamson. Vintage Does Matter, The Impact and Interpretation of Post War Revisions in the Official Estimates of GDP for the United Kingdom, measuringworth.com, по состоянию на 15 августа 2018 г. Следует отметить, что новые наборы данных составлялись ежегодно, благодаря чему можно было увидеть расхождения с предыдущим годом.

Shane Legg and Marcus Hutter. A collection of definitions of intelligence // Frontiers in Artificial Intelligence and Applications, 2007.

Wechsler Adult Intelligence Scale, Wikipedia, по состоянию на 30 июля 2018 г. (см. статью «Тест Векслера» в Википедии).

Я узнала о Лурии из лекции Джеймса Флинна на конференции TED под названием Why Our IQ Levels Are Higher than Our Grandparents, март 2013 г. Рассказ о поездке Лурии в Узбекистан можно найти в его автобиографии: The Autobiography of Alexander Luria: A Dialogue with The Making of Mind, написанной в соавторстве с Майклом Коулом и Карлом Левитиным (Psychology Press, 1979, republished in 2010). (Лурия А. Р. Этапы пройденного пути: Научная автобиография. М.: Изд-во Моск. ун-та, 2001.)

Цит. по изд.: Лурия А. Р. Этапы пройденного пути: Научная автобиография. М.: Изд-во Моск. ун-та, 2001.

Эти примеры основаны на речи Бобби Кеннеди о ВВП, произнесенной 18 марта 1968 г.

Anne Roeters. Een week in kaart, Sociaal and Cultureel Planbureau, 2017.

Tucker Higgins. Trump Suggests Economy Could Grow at 8 Or 9 Percent If He Cuts the Trade Deficit, CNBC, 27 июля 2018 г.

Дефицит бюджета может быть не более 3 процентов ВВП, а национальный долг не может превышать 60 процентов ВВП. Странам с более высоким ВВП легче выполнить эти требования.

GCSE (General Certificate of Secondary Education, «Общий аттестат о среднем образовании») – выпускные экзамены по отдельным предметам в средних школах Великобритании. A-levels – экзамены продвинутого уровня по профильным предметам.

Многие программы подготовки в коммерческих компаниях и на государственной службе включают в себя оценку учащихся, в которую входит тестирование на IQ или аналогичные тесты.

Мой рассказ о Спирмене основан на изложении в книге: Stephen Jay Gould. The Mismeasure of Man. W. W. Norton & Co., 1981.

Он использовал метод «факторного анализа», позволяющий сводить целую гору чисел к общим факторам. Спирмен заключил, что многие различия между детьми можно объяснить всего одним фактором.

Stephen Jay Gould. The Mismeasure of Man. W. W. Norton & Co., 1981.

Charles Spearman. General Intelligence Objectively Measured and Determined // The American Journal of Psychology, апрель 1904 г.

Edwin Boring. Intelligence as the Tests Test It, New Republic, 1923.

В «Структурном плане Национальной полиции Нидерландов на 2003–2006 гг.» (Landelijk Kader Nederlandse Politie 2003–2006) были установлены нормы по штрафам для разных подразделений полиции. В более поздних соглашениях между правительством и полицией требования по количеству штрафов были отменены, но полиция продолжала использовать нормы выработки. Нормы по штрафам в конце концов запретил Иво Опстельтен (министр правосудия и безопасности, член либеральной партии VVD). Я уже говорила о нормах на штрафы в статье Hoe cijferdictatuur het werk van leraren, agenten and artsen onmogelijk maakt, написанной совместно с Джесси Фредериком и опубликованной в De Correspondent 5 января 2016 г.

Peter Campbell, Adrian Boyle and Ian Higginson. Should We Scrap the Target of a Maximum Four Hour Wait in Emergency Departments? BMJ, 2017.

Эта формулировка закона Гудхарта взята из работы Marilyn Strathern. «Improving Ratings»: Audit in the British University System, European Review, июль 1997 г. Чарльз Гудхарт впервые сформулировал свою идею в двух статьях 1975 г. Более подробную информацию см.: K. Alec Chrystal and Paul Mizen. Goodhart’s Law: Its Origins, Meaning and Implications for Monetary Policy in Central Banking, Monetary Theory and Practice. Edward Elgar Publishing, 2003.

Stephen Jay Gould. The Mismeasure of Man. W. W. Norton & Co., 1981.

100

Kevin McGrew. The Cattel – Horn – Carroll Theory of Cognitive Abilities // Contemporary Intellectual Assessment: Theories, Tests, and Issues. The Guilford Press, 1996.

101

Этот абзац написан на основе книги Diane Coyle. GDP: A Brief but Affectionate History. Princeton University Press, 2014. (Койл С. ВВП. Краткая история, рассказанная с пиететом / Пер. с англ. А. Гусева. М.: Издательский дом ВШЭ, 2016.)

102

Он получил «Премию по экономическим наукам имени Альфреда Нобеля». Строго говоря, это не Нобелевская премия, но ее часто так называют.

103

Human Development Report 2019, United Nations Development Programme, 2019. (С последним на момент перевода изданием – «Докладом о человеческом развитии 2020» – можно ознакомиться по адресу: http://hdr.undp.org/sites/default/files/hdr2020_ru.pdf.) Имея дело с такого рода цифрами, важно помнить, что они всегда бывают определены с некоторой погрешностью, о которой говорится в главе 3. Это означает, что различия между показателями некоторых стран могут быть статистически незначимыми, потому что данные всегда содержат некоторое количество «шума».

104

В последнем на момент перевода этой книги отчете за 2020 г. на первом месте по-прежнему находится Норвегия, а на последнем (189-м) – Нигер. Великобритания переместилась на 13-ю позицию, а Российская Федерация занимает 52-ю.

105

Het bestverkochte boek ooit (met deze titel).

106

Jinek. KRO-NCRV. 21 декабря 2017 г.

107

Maarten Back. AD publiceert alleen nog de 75 beste olliebollenkramen, NRC, 22 декабря 2017 г.

108

Herm Joosten. Voor patiënten is de AD ziekenhuis-lijst (vrijwel) zinloos, de Volkskrant, 10 октября 2014 г.

109

Иногда в дело незаметно для авторов вмешиваются этические соображения. Изучавший ИЧР экономист Мартин Раваллион получил странный результат: страна с низкой ожидаемой продолжительностью жизни тем не менее может получить высокий ИЧР благодаря даже небольшому росту доходов. В результате того, что разные аспекты были сгруппированы в одно число, они стали взаимозаменяемыми. Вычисления Раваллиона привели его к абсурдному выводу: человеческая жизнь в одних странах сто́ит меньше, чем в других. На самом дне оказалась Зимбабве, в которой лишний год жизни человека эквивалентен пятидесяти евроцентам. В то же время в богатых странах его цена поднимается до 8000 евро и даже выше. См.: Martin Ravallion. Troubling Tradeoffs in the Human Development Index. Journal of Development Economics, ноябрь 2012 г.

110

Я уже писала об определении голода в статье Waarom we veel minder weten van ontwikkelingslanden dan we denken, De Correspondent, 30 июня 2015 г.

111

FAO – от англ. Food and Agriculture Organization.

112

The State of Food Insecurity in the World, Food and Agriculture Organization, 2012.

113

James Flynn. Why Our IQ Levels Are Higher than Our Grandparents, TED.com, март 2013 г.

114

Предшествующие исследователи отмечали нечто подобное в некоторых наборах данных, но Джеймс Флинн первым изучил это явление систематически.

115

В некоторых странах также наблюдается «антиэффект Флинна», то есть снижение уровня IQ. Данные по норвежским мужчинам показывают, что их IQ уменьшился между 1975 и 1990 гг. См.: Bernt Bratsberg and Ole Rogeberg. Flynn Effect and Its Reversal Are Both Environmentally Caused, PNAS, 26 июня 2018 г.

116

Йеркс называл отстающих в обучении термином moron (англ. дебил, идиот), который в наши дни используется только в качестве бранного слова.

117

Carl Brigham. A Study of American Intelligence. Princeton University Press, 1923.

118

Когда он изучал философию, некто сказал ему, что ему никогда не стать настоящим философом. «Никогда! – писал он в 1909 году. – Какое знаменательное слово! Некоторые из мыслителей недавнего времени, по-видимому, оказали моральную поддержку таким прискорбным вердиктам своими утверждениями, что уровень интеллекта человека – величина неизменная, не поддающаяся увеличению. Следует оспаривать такой брутальный пессимизм и бороться с ним; нужно постараться доказать, что он не имеет под собой никаких оснований!» См.: Gould, p. 183, 184.

119

Diane Coyle. GDP: A Brief but Affectionate History. Princeton University Press, 2014.

120

Malcolm Gladwell. None of the above, New Yorker. 17 декабря 2007 г. Курсив Гладуэлла.

121

Anandi Mani, Sendhil Mullainathan, Eldar Shafir and Jiaying Zhao. Poverty Impedes Cognitive Function, Science, 30 августа 2013 г.

122

Tamara Daley, Shannon Whaley, Marian Sigman, Michael Espinosa and Charlotte Neumann. IQ On the Rise: The Flynn Effect in Rural Kenyan Children, Psychological Science, май 2003 г.

123

William Dickens and James Flynn. Black Americans Reduce the Racial IQ Gap: Evidence from Standardization Samples // Psychological Science, 2006.

124

Angela Hanks, Danyelle Solomon, Christian Weller. Systematic Inequality: How America’s Structural Racism Helped Create the Black-White Wealth Gap, Center for American Progress. 21 февраля 2018 г.

125

Alana Semuels. Good School, Rich School; Bad School, Poor School // The Atlantic (25 августа 2016 г.); Alvin Chang. Living in a Poor Neighborhood Changes Everything about Your Life // Vox.com, 4 апреля 2018 г.

126

Marianne Bertrand and Esther Duflo. Field Experiments on Discrimination // Handbook of Field Experiments. Elsevier, 2017. Глава 3. Что говорит о выборках одно сомнительное сексологическое исследование

127

Трумэн уже был президентом, потому что занял эту должность после смерти Франклина Д. Рузвельта.

128

Газета положилась на мнение своего политического обозревателя Артура Сирса Хеннинга, который предсказал исход выборов, опираясь на опросы общественного мнения и другие источники информации. См. также Craig Silverman. The Untold Story of «Dewey Defeats Truman» // Huffington Post, 5 декабря 2008 г.

129

Michael Barbaro. How Did the Media – How Did We – Get This Wrong? // New York Times, 9 ноября 2016 г.

130

Точнее, Ванг заявил, что съест насекомое, если Трамп наберет более 240 голосов в коллегии выборщиков. Трамп набрал 290. См.: Sam Wang. Sound Bites and Bug Bites // Princeton Election Consortium, 4 ноября 2016 г. Ванг опубликовал свое обещание в твиттере 19 октября 2016 г.

131

Следует отметить, что у английского слова nutty кроме прямого значения – «ореховый» – есть и переносное – «безумный», «чокнутый».

132

Alexandra King. Poll Expert Eats Bug on CNN After Trump Win // CNN, 12 ноября 2016 г.

133

Jelke Bethlehem. The Rise of Survey Sampling // Centraal Bureau voor de Statistiek, 2009.

134

Tom Smith. The First Straw? A Study of the Origins of Election Polls // Public Opinion Quarterly, 1990.

135

Смит утверждал, что выборы 1824 г. были «первыми, в которых была серьезная борьба» начиная с 1800-го. После 1800 г. в систему были внесены изменения, в результате которых исход выборов должен был в основном решаться большинством населения.

136

Sarah Igo. The Averaged American: Surveys, Citizens and the Making of a Mass Public. Harvard University Press, Cambridge, Mass., 2007.

137

Такие трещины появились в картине социологических опросов не впервые. В 1936 г. журнал Literary Digest – бывший до этого самым авторитетным изданием в этой области – предсказал победу Альфа Лэндона. Лэндон проиграл. Год спустя журнал Literary Digest был вынужден закрыться.

138

Alfred Kinsey. Wardell Pomeroy and Clyde Martin, Sexual Behavior in the Human Male. W. B. Saunders Company, 1948.

139

Frederick Mosteller. The Pleasures of Statistics: The Autobiography of Frederick Mosteller. Springer, 2010.

140

David Spiegelhalter. Sex by Numbers. Profile Books, L., 2015.

141

Thomas Rueb. Eén op de tien wereldburgers is homoseksueel // nrc.nl, 24 июля 2012 г.

142

Sarah Igo. The Averaged American: Surveys, Citizens and the Making of a Mass Public. Harvard University Press, Cambridge, Mass., 2007.

143

В приведенном в этой главе описании исследований Кинси и отчета трех статистиков я использовала следующие три книги: James Jones. Alfred C. Kinsey: A Life. Norton, N. Y., 1997; Sarah Igo. The Averaged American: Surveys, Citizens and the Making of a Mass Public. Harvard University Press, Cambridge, Mass., 2007; David Spiegelhalter. Sex by Numbers. Profile Books, L., 2015.

144

Cynipidae – семейство орехотворок из отряда перепончатокрылых насекомых.

145

Кинси утверждал в своем отчете, что в общей сложности потребуются 100 000 наблюдений. Он надеялся опубликовать расширенный вариант исследования, но этого так и не случилось.

146

The Kinsey Interview Kit // The Kinsey Institute for Research in Sex, Gender and Reproduction, 1985.

147

Курсив в цитате мой.

148

David Spiegelhalter. Sex by Numbers. Profile Books, L., 2015.

149

Эти цифры были взяты из исследования Natsal-3 и упоминаются в главе 3 книги David Spiegelhalter. Sex by Numbers.

150

Michele Alexander and Terri Fisher. Truth and consequences: Using the bogus pipeline to examine sex differences in self-reported sexuality // Journal of Sex Research, 2003. Этот эксперимент обсуждается в главе 3 книги David Spiegelhalter, Sex by Numbers. Число 2,6 сексуального партнера было получено в группе, в которой существовала возможность, что при интервью также присутствует другой студент. В другой исследовательской группе, в которой респонденты находились в запертом помещении, среднее число сексуальных партнеров было равно 3,4.

151

Guy Harling, Dumile Gumede, Tinofa Mutevedzi, Nuala McGrath, Janet Seeley, Deenan Pillay, Till W. Bärnighausen and Abraham J. Herbst. The Impact of Self-Interviews on Response Patterns for Sensitive Topics: A Randomized Trial of Electronic Delivery Methods for a Sexual Behaviour Questionnaire in Rural South Africa // BMC Medical Research Methodology, 2017.

152

Читатели, заставшие последние годы Советского Союза, вероятно, еще помнят сходную операцию по изъятию из обращения 50- и 100-рублевых купюр, которую провел в январе 1991 г. премьер-министр СССР В. С. Павлов.

153

Я узнала об этом опросе из передачи More or Less («Более или менее») 4-й программы радио BBC, которая рассказывала о нем 5 декабря 2017 г. Критические замечания, которые я высказываю здесь и в следующем разделе, также обсуждались в этой передаче. Ведущий передачи Тим Харфорд говорил с Притхвираджем Мукерджи, который написал в твиттере с ярлыком @peelaraja: «Если вы будете учиться на моем курсе маркетинговых исследований и составите такой опрос, я поставлю вам неуд». 21 ноября 2016 г.

154

Jelke Bethlehem. Terrorisme een groot probleem? Het is maar net hoe je het vraagt // peilingpraktijken.nl, 2 октября 2014 г.

155

David Spiegelhalter. Sex by Numbers.

156

«Сексуальное поведение самки человека» (Sexual Behavior in the Human Female), 1953.

157

На странице 6 отчета говорится, что число черных мужчин, принявших участие в исследовании, было слишком мало, чтобы о них можно было что-нибудь сказать.

158

Internet Users per 100 Inhabitants // unstats.un.org, по состоянию на 31 июля 2018 г.

159

Jeffrey Arnett. The Neglected 95 %: Why American Psychology Needs to Become Less American // American Psychologist, октябрь 2008 г.

160

Weird (англ.) – странный, ненормальный.

161

Joseph Henrich. Steven Heine and Ara Norenzayan. The Weirdest People in the World? // Behavioral and Brain Sciences, июнь 2010 г.

162

Одно из возможных объяснений состоит в том, что люди, живущие в современном обществе, привыкли к прямым углам, например, зданий или городских площадей. Это приучило наш мозг к некоторому приему зрительного восприятия, который, как оказывается, и порождает иллюзию Мюллера-Лайера.

163

Этот и следующий абзацы основаны на книге Angela Saini. Inferior. HarperCollins Publishers, 2018.

164

Drug Safety: Most Drugs Withdrawn in Recent Years Had Greater Health Risks for Women, United States Government Accountability Office, 19 января 2001 г.

165

Archibald Cochrane and Max Blythe. One Man’s Medicine. BMJ Books, L., 1989.

166

Dana Carney, Amy Cuddy and Andy Yap. Power Posing: Brief Nonverbal Displays Affect Neuroendocrine Levels and Risk Tolerance // Psychological Science, 2010. В 2018 г. Кадди в сотрудничестве с двумя коллегами представила исследование, показывавшее, что экспансивная поза действительно производит позитивный эффект, но, когда данные были заново проанализированы другими исследователями, никаких доказательств воздействия властной позы снова не было найдено. См.: Marcus Crede. A Negative Effect of a Contractive Pose Is Not Evidence for the Positive Effect of an Expansive Pose: Commentary on Cuddy, Schultz, and Fosse, 2018, неопубликованная рукопись, SSRN, 12 июля 2018 г.

167

Eva Ranehill, Anna Dreber, Magnus Johannesson, Susanne Leiberg, Sunhae Sul and Roberto Weber. Assessing the Robustness of Power Posing: No Effect on Hormones and Risk Tolerance in a Large Sample of Men and Women // Psychological Science, 2015.

168

Katherine Button, John Ioannidis, Claire Mokrysz, Brian Nosek, Jonathan Flint, Emma Robinson and Marcus Munafò. Power failure: why small sample size undermines the reliability of neuroscience // Nature Reviews: Neuroscience, май 2013 г.

169

Во всех трех случаях победил Франклин Д. Рузвельт.

170

Эта история описана в: Sarah Igo. The Averaged American: Surveys, Citizens and the Making of a Mass Public. Harvard University Press, Cambridge, Mass., 2007.

171

Возможно, вы заметили, что число 18 000 не соответствует количеству участников в двух отчетах, 11 000. Кинси с коллегами опросили 18 000 человек, но некоторые наблюдения не были включены в отчеты, например касающиеся чернокожих мужчин или людей, опрошенных после публикации отчетов.

172

Техническая деталь: по случайности может получиться и нерепрезентативный срез популяции, но, зная вероятность такого события из процесса рандомизации, можно вычислить степень нерепрезентативности.

173

Об этом рассказывалось в серии «Кинси» (Kinsey) американского документального сериала «Американский опыт» (American Experience), впервые вышедшей в эфир 14 февраля 2015 г.

174

Richard Pérez-Peña. 1 in 4 Women Experience Sex Assault on Campus // New York Times, 21 сентября 2015 г. Я узнала об этом опросе из статьи на сайте Huffington Post: Brian Earp. 1 in 4 Women: How the Latest Sexual Assault Statistics Were Turned into Click Bait by the New York Times, 28 сентября 2015 г.

175

David Cantor, Reanne Townsend and Hanyu Sun. Methodology Report for the AAU Campus Climate Survey on Sexual Assault and Sexual Misconduct, Westat, 12 апреля 2016 г.

176

Я использовала следующие расчеты. Если оставшиеся 80 процентов – жертвы: (0,2 × 0,25) + (0,8 × 1) = 0,85 (85 %). Если оставшиеся 80 процентов – не жертвы: (0,2 × 0,25) + (0,8 × 0) = = 0,05 (5 %).

177

В погрешности учитываются отказы от ответов, причем предполагается, что выборка репрезентативна и вопросы задаются корректно.

178

Зайдите на сайт https://goodcalculators.com/margin-of-error-calculator/ и введите в графу «Population Size» значение численности населения – это та группа, которая нас интересует. Во времена Кинси суммарная численность американских мужчин составляла 60 миллионов человек. В этом (гипотетическом) примере численность выборки (Sample Size) равна 100, а процентная доля (Proportion Percentage) – 50 %. Получающаяся погрешность равна 9,8 %, то есть процентная доля могла составлять от 40,2 % до 59,8 % (этот интервал получен для уровня достоверности 95 %).

179

David Weigel. State Pollsters, Pummeled by 2016, Analyze What Went Wrong, Washington Post, 30 декабря 2016 г.

180

Поскольку в США используется система коллегии выборщиков, кандидат, победивший в народном голосовании, не обязательно становится победителем президентских выборов.

181

Я выбрала ABC News/Washington Post потому, что эта организация получила на веб-сайте FiveThirtyEight оценку A+, высочайшую для социологической службы. Погрешность 4 % упоминается в статье: Scott Clement and Dan Balz. Washington Post – ABC News Poll: Clinton Holds Four-Point Lead in Aftermath of Trump Tape, Washington Post, 16 октября 2016 г.

182

Nate Silver. The Real Story of 2016, fivethirtyeight.com, 19 января 2017 г.

183

NOS Nederland Kiest: De Uitslagen, NOS, 18 марта 2015 г. Реплика Стакс была произнесена в 02:07:50.

184

James Jones. Alfred C. Kinsey: A Life. Norton, 1997.

185

John Bancroft. Alfred Kinsey’s Work 50 Years on, в новом издании книги Sexual Behavior in the Human Female. Indiana University Press, 1998.

186

Мистером X этот человек назван в биографии Кинси, написанной Джонсом. Глава 4. Курение вызывает рак легких (но аисты детей не приносят)

187

В разговоре о табачной промышленности в этой главе я использовала следующие источники: Robert Proctor. Golden Holocaust: Origins of the Cigarette Catastrophe and the Case for Abolition. University of California Press, 2011; Naomi Oreskes and Erik Conway. Merchants of Doubt: How a Handful of Scientists Obscured the Truth on Issues from Tobacco Smoke to Global Warming. Bloomsbury, 2012; и Tim Harford. Cigarettes, Damn Cigarettes and Statistics, Financial Times, 10 апреля 2015 г.

188

Ernest Wynder. Evarts Graham and Adele Croninger. Experimental Production of Carcinoma with Cigarette Tar, Cancer Research, декабрь 1953 г.

189

Background Material on the Cigarette Industry Client, меморандум от 15 декабря 1953 г., который можно найти в Библиотеке отраслевых документов (Industry Documents Library), собрании документов табачной промышленности.

190

За исключением компании Ligget & Myers, которая предпочла не иметь никакого отношения к этому предприятию.

191

A Frank Statement to Cigarette Smokers, 4 января 1954 г.

192

Naomi Oreskes and Erik Conway. Merchants of Doubt. Bloomsbury, L., 2012. P. 15.

193

Darrell Huff. How to Lie with Statistics. Victor Gollancz, 1954. Я использовала издание 1991 г., вышедшее в издательстве Penguin. (Хафф Д. Как лгать при помощи статистики / Пер. с англ. Е. Э. Лалаян. М.: Альпина Паблишер, 2015.)

194

J. Michael Steele. Darrell Huff and Fifty Years of How to Lie with Statistics, Statistical Science, Institute of Mathematical Statistics, 2005.

195

Хафф приводил этот пример не в книге, а в своей речи на заседании Сенатского комитета по торговле в 1965 г., о котором пойдет речь далее, и в неопубликованной рукописи другой книги – «Как лгать при помощи статистики о курении» (How to Lie with Smoking Statistics).

196

NUcheckt: Helpt gin-tonic tegen hooikoorts? NU.nl, 3 мая 2018 г.

197

Anouk Broersma. Wegscheren schaamhaar vergroot kans op soa, de Volkskrant, 6 декабря 2016 г.

198

Liesbeth De Corte. Chocolade is wél gezond, maar enkel en alleen de pure variant, AD. 5 мая 2018 г.

199

Sumner Petroc. Vivian-Griffiths Solveiga, Boivin Jacky, Williams Andy, Venetis Christos A, Davies Aimée et al. The association between exaggeration in health related science news and academic press releases: retrospective observational study, BMJ, 10 декабря 2014 г.

200

Jonathan Schoenfeld and John Ioannidis. Is Everything We Eat Associated with Cancer? A Systematic Cookbook Review // American Journal of Clinical Nutrition, январь 2013 г.

201

Я также пишу о Пауле в статье Deze statistische fout wordt in bijna elk debat gemaakt (en zo pik je haar eruit) // De Correspondent, 8 марта 2016 г.

202

Одна из игр Британской национальной лотереи.

203

Lotto Odds. https://www.lottery.co.uk/lotto/odds, по состоянию на 10 января 2020 г.

204

www.tylervigen.com/spurious-correlations, по состоянию на 3 августа 2018 г.

205

Randall Munroe. Significant, xkcd.com. https://xkcd.com/882/

206

Brian Wansink, David Just and Collin Payne. Can Branding Improve School Lunches? // Archives of Pediatrics and Adolescent Medicine, октябрь 2012 г.

207

Brian Wansink and Koert van Ittersum. Portion Size Me: Plate-Size Induced Consumption Norms and Win-Win Solutions for Reducing Food Intake and Waste, Journal of Experimental Psychology: Applied, декабрь 2013 г.

208

Stephanie Lee. Here’s How Cornell Scientist Brian Wansink Turned Shoddy Data into Viral Studies about How We Eat // BuzzFeed News, 25 февраля 2018 г.

209

Archibald Cochrane and Max Blythe. One Man’s Medicine.

210

Пер. с англ. Е. Э. Лалаян.

211

В этом случае может играть некоторую роль и еще один фактор – курение. Курильщики часто бывают более худыми и имеют меньшую продолжительность жизни. Andrew Stokes and Samuel Preston. Smoking and Reverse Causation Create an Obesity Paradox in Cardiovascular Disease, Obesity, 2015.

212

В этой главе речь идет в основном о раке легких, а не о других разнообразных вредных последствиях, например других типах рака или сердечной недостаточности.

213

Я уже говорила об этих новостях в своей лекции на конференции TEDx. How to Defend Yourself against Misleading Statistics in the News, TEDx Talks, 3 ноября 2016 г.

214

Moeten we misschien iets minder vlees eten? // Zondag met Lubach (Sunday with Lubach) // VPRO, 1 ноября 2015 г.

215

Martijn Katan. NRC Opinie 29–10–2015: Vleeswaren en darmkanker, mkatan.nl, 29 октября 2015 г.

216

Q&A on the Carcinogenicity of the Consumption of Red Meat and Processed Meat, World Health Organization, октябрь 2015 г.

217

Fritz Lickint. Tabak und Tabakrauch als ätiologischer Faktor des Carcinoms // Zeitschrift for Krebsforschung und klinische Onkologie, декабрь 1930 г.

218

Richard Doll and Austin Bradford Hill. A Study of the Aetiology of Carcinoma of the Lung // British Medical Journal, 1952.

219

Robert Proctor. Golden Holocaust: Origins of the Cigarette Catastrophe and the Case for Abolition.

220

Табачную промышленность обязали предать свою документацию гласности. Со всеми материалами можно ознакомиться на веб-сайте Библиотеки исторических документов табачной отрасли (Legacy Tobacco Documents Library).

221

The only #climatechange chart you need to see http://natl.re/wPKpro (h/t @PowelineUS), @NationalReview в Twitter, 14 декабря 2015 г.

222

Roz Pidcock. How Do Scientists Measure Global Temperature, CarbonBrief, 16 января 2015 г.

223

GISS Surface Temperature Analysis. data.giss.nasa.gov, по состоянию на 8 января 2018 г.

224

Roz Pidcock. Scientists Compare Climate Change Impacts at 1.5C and 2C. CarbonBrief, 21 апреля 2016 г.

225

Речь идет о «скользящем среднем», которое вычисляют по пятилетнему периоду, который каждый раз сдвигается на год.

226

Statement by Darrell Huff, Truth Tobacco Industry Document.

227

Ronald Fisher. Smoking. The Cancer Controversy: Some Attempts to Assess the Evidence. F.R.S. Oliver and Boyd, 1959.

228

David Salsburg. The Lady Tasting Tea. A.W.H. Freeman, 2001.

229

David Roberts. The 2 Key Points Climate Skeptics Miss. Vox.com. 11 декабря 2015 г.

230

Claude Teague. Survey of Cancer Research, 1953.

231

Точнее, компания учредила этот фонд и выделила чуть менее миллиарда долларов на его поддержку в течение 12 лет.

232

WHO Statement on Philip Morris Funded Foundation for a Smoke-Free World. World Health Organization. 28 сентября 2017 г.

233

Naomi Oreskes and Erik Conway. Merchants of Doubt: How a Handful of Scientists Obscured the Truth on Issues from Tobacco Smoke to Global Warming. Bloomsbury, L., 2012.

234

Martijn Katan. Hoe melkvet gezond wordt. mkatan.nl, 30 января 2010 г.

235

Christie Aschwanden. There’s No Such Thing As «Sound Science». FiveThirtyEight, 6 декабря 2017 г.

236

Личное сообщение сына Давида Даубе, упомянутое в Robert Proctor. Golden Holocaust: Origins of the Cigarette Catastrophe and the Case for Abolition.

237

Alex Reinhart. Huff and Puff // Significance, октябрь 2014 г. Глава 5. Не стоит слишком увлекаться числами в будущем

238

История Дженифер позаимствована из выступления Шивани Сироя на конференции TED: Shivani Siroya. A Smart Loan for People with No Credit History (Yet). TED.com (февраль 2016 г.

239

При написании этой главы я с благодарностью использовала книгу Cathy O’Neil. Weapons of Math Destruction. Crown, 2016. (О’Нил К. Убийственные большие данные. Как математика превратилась в оружие массового поражения / Пер. с англ. В. Дегтярева. М.: АСТ, 2018.)

240

Sean Trainor. The Long, Twisted History of Your Credit Score // Time, 22 июля 2015 г.

241

Числа играют роль и в распознавании лиц, так как оно требует измерить параметры лица.

242

Data Never Sleeps 8.0. domo.com, по состоянию на 26 ноября 2020 г.

243

Brian Resnick. How Data Scientists Are Using AI for Suicide Prevention. Vox.com, 9 июня 2018 г.

244

Celine Herweijer. 8 Ways AI Can Help Save the Planet. World Economic Forum, 24 января 2018 г.

245

No Longer Science Fiction, AI and Robotics Are Transforming Healthcare. PWC Global, по состоянию на 15 августа 2018 г.

246

Mallory Soldner. Your Company’s Data Could End World Hunger. TED.com, сентябрь 2016 г.

247

Louise Fresco. Zeg me wat u koopt en ik zeg wat u stemt // NRC, 16 ноября 2016 г.

248

Marc Hijink. Hoe bepaalt de verzekeraar hoe veilig jij rijdt? // NRC, 5 апреля 2018 г.

249

Maurits Martijn. Baas Belastingdienst over big data: «Mijn missie is gedragsverandering» // De Correspondent, 21 апреля 2015 г.

250

Julia Dressel and Hany Farid. The Accuracy, Fairness, and Limits of Predicting Recidivism // ScienceAdvances, 17 января 2018 г.

251

Brian Christian and Tom Griffiths. Algorithms to Live by. Henry Holt and Company, 2016.

252

Русское издание: О’Нил К. Убийственные большие данные. Как математика превратилась в оружие массового поражения / Пер. с англ. В. Дегтярева. М.: АСТ, 2018.

253

Cathy O’Neil. Weapons of Math Destruction.

254

Термин «машинное обучение» ввел в оборот в 1959 г. информатик Артур Сэмюэл, давший ему следующее определение: «область знания, дающая компьютерам способность обучаться, не будучи явно запрограммированными».

255

Our Story. zestfinance.com, по состоянию на 14 августа 2018 г.

256

Zest Automated Machine Learning. zestfinance.com, по состоянию на 14 августа 2018 г.

257

В этом абзаце я использовала статью Karlijn Kuijpers. Thomas Muntz, Tim Staal. U staat op een zwarte lijst’ De Groene Amsterdammer, 25 октября 2017 г.

258

Vattenfall – шведская транснациональная энергетическая компания; Vodafone – британский транснациональный оператор сотовой связи.

259

Julia Dressel and Hany Farid. The Accuracy, Fairness and Limits of Predicting Recidivism. ScienceAdvances, 17 января 2018 г.

260

Background Checking – The Use of Credit Background Checks in Hiring Decisions // Society for Human Resource Management, 19 июля 2012 г. Теоретически кандидат может не дать разрешения на такую проверку. Но на самом деле у него нет выбора: отказавшись от проверки, он может потерять шансы на получение работы.

261

Amy Traub. Discredited // Demos, февраль 2013 г.

262

Credit Reports. Last Week Tonight with John Oliver, HBO, 10 апреля 2016 г.

263

В упомянутом выше обзоре 45 процентов работодателей называли причиной проверки стремление предотвратить преступления, а 19 процентов – оценку надежности работника.

264

Jeremy Bernerth, Shannon Taylor, H. Jack Walker and Daniel Whitman. An Empirical Investigation of Dispositional Antecedents and Performance-Related Outcomes of Credit Scores. Journal of Applied Psychology, 2012.

265

Kristle Cortés, Andrew Glover and Murat Tasci. The Unintended Consequences of Employer Credit Check Bans on Labor and Credit Markets. Working Paper no. 16–25R 2, Federal Reserve Bank of Cleveland, январь 2018 г.

266

Seth Stephens-Davidowitz. Everybody Lies. Bloomsbury Publishing, L., 2017.

267

Sean Illing. Proof That Americans Are Lying About Their Sexual Desires. Vox.com, 2 января 2018 г.

268

«All data is credit data». Дуглас Меррил произнес эту фразу в докладе на конференции TEDx New credit scores in a new world: Serving the Underbanked, 13 апреля 2012 г.

269

Karlijn Kuijpers, Thomas Muntz and Tim Staal. U staat op een zwarte lijst. De Groene Amsterdammer, 25 октября 2017 г.

270

Report to Congress Under Section 319 of the Fair and Accurate Credit Transactions Act of 2003, Federal Trade Commission, декабрь 2012 г.

271

Lauren Brennan, Mando Watson, Robert Klaber and Tagore Charles. The Importance of Knowing Context of Hospital Episode Statistics When Reconfiguring the NHS. BMJ, 2012.

272

Jim Finkle and Aparajita Saxena. Equifax Profit Beats Street View as Breach Costs Climb. Reuters, 1 марта 2018 г.

273

Cathy O’Neil. Weapons of Math Destruction.

274

Stat Oil // Economist, 9 февраля 2013 г.

275

Ron Lieber. American Express Kept a (Very) Watchful Eye on Charges. New York Times, 30 января 2009 г.

276

Компания и социальная сеть, функционирование которых запрещено на территории Российской Федерации.

277

Robinson Meyer. Facebook’s New Patent, “Digital Redlining”, and Financial Justice // The Atlantic, 25 сентября 2015 г.

278

Stat Oil // Economist, 9 февраля 2013 г.

279

Chris Anderson. The End of Theory // Wired, 23 июня 2008 г.

280

Jesse Frederik. In de economie valt een appel níét altijd naar beneden (ook al zeggen economen vaak van wel) // De Correspondent, 24 сентября 2015 г.

281

Erick Schonfeld. Eric Schmidt Tells Charlie Rose Google is «Unlikely» to Buy Twitter and Wants to Turn Phones into TVs. TechCrunch, 7 марта 2009 г.

282

Точнее говоря, алгоритм должен был предсказывать число посещений врачей. См.: David Lazer, Ryan Kennedy, Gary King and Alessandro Vespignani. The Parable of Google Flu: Traps in Big Data Analysis // Science, 14 марта 2014 г. Я также использовала эту статью в следующих абзацах.

283

Эта корреляция не вполне случайна, так как сезон турниров баскетбольных команд американских старших школ более или менее совпадает с сезоном гриппа.

284

В рассказе об этом эксперименте я использовала книгу: Tim Harford. The Logic of Life. Random House, 2009; и статью: Roland Fryer. Jacob Goeree and Charles Holt. Experience-Based Discrimination: Classroom Games // The Journal of Economic Education, весна 2005 г.

285

Харфорд Т. Логика жизни, или Экономика обо всем на свете / Пер. с англ. В. Мишучкова. М.: BestBusinessBooks, 2011.

286

Planning Outline for the Construction of a Social Credit System (2014–2020), translated into English by Rogier Creemers, China Copyright and Media, 14 июня 2014 г. Следующая цитата также позаимствована из этого документа.

287

Rogier Creemers. China’s Social Credit System: An Evolving Practice of Control. SSRN, 9 мая 2018 г.

288

Веб-сайт Alipay, intl.alipay.com, по состоянию на 27 ноября 2020 г.

289

При написании этого абзаца я обращалась к источнику: Charlie Campbell. How China Is Using «Social Credit Scores» to Reward and Punish Its Citizens // Time, 16 января 2019 г.

290

Mara Hvistendahl. Inside China’s Vast New Experiment in Social Ranking // Wired, 14 декабря 2017 г.

291

Paul Lewis. «Fiction is Outperforming Reality»: How YouTube’s Algorithm Distorts the Truth // Guardian, 2 февраля 2018 г.

292

FTC Report Confirms Credit Reports Are Accurate. CISION PR Newswire, 11 февраля 2013 г.

293

Maurits Martijn, Dimitri Tokmetzis. Je hebt wél iets te verbergen // De Correspondent, 2016. Глава 6. Значимость чисел определяет наша психология

294

Een glas alcohol is eigenlijk al te veel // nos.nl, 13 апреля 2018 г.

295

Переработанный вариант этой главы был опубликован в De Correspondent под названием Waarom slimme mensen domme dingen zeggen’ 18 июля 2018 г. Эта глава частично основана на статье Tim Harford. Your Handy Postcard-Sized Guide to Statistics // timharford.com, опубликованной ранее в газете Financial Times, 8 февраля 2018 г.

296

Angela Wood et al. Risk Thresholds for Alcohol Consumption: Combined Analysis of Individual-Participant Data for 599 912 Current Drinkers in 83 Prospective Studies // The Lancet, 14 апреля 2018 г.

297

@VinayPrasadMD в твиттере, 28 апреля 2018 г.

298

Skills Matter: Further Results from the Survey of Adult Skills. OECD Publishing, 2016.

299

PISA 2012 Results: Ready to Learn Students’ Engagement, Drive and Self-Beliefs. Vol. III. OECD Publishing, 2013.

300

Sanne Blauw. Waarom we slechte cijfers zoveel aandacht geven // De Correspondent, 15 июня 2017 г.

301

Sanne Blauw. Het twaalfde gebod: wees je bewust van je eigen vooroordelen // De Correspondent, 24 февраля 2016 г.

302

Dan Kahan, Ellen Peters, Erica Cantrell Dawson and Paul Slovic. Motivated Numeracy and Enlightened Self-Government. Behavioural Public Policy, май 2017 г. В описании этого исследования я с благодарностью использовала статью Ezra Klein. How Politics Makes Us Stupid // Vox.com, 6 апреля 2014 г.

303

Респондентов спрашивали об их политических и идеологических предпочтениях. В зависимости от их ответов Кахан и его коллеги относили их, как принято в научной литературе, к одной из двух групп – «либеральных демократов» или «консервативных республиканцев».

304

Эти результаты многократно воспроизводились не только Каханом и его коллегами, но и другими исследователями. См., например: Dan Kahan, Asheley Landrum, Katie Carpenter, Laura Helft and Kathleen Hall Jamieson. Science Curiosity and Political Information Processing. Advances in Political Psychology, 2017.

305

Beth Kowitt. The Paradox of American Farmers and Climate Change // fortune.com, 29 июня 2016 г.

306

Ezra Klein. How Politics Makes Us Stupid. Vox.com, 6 апреля 2014 г.

307

Een extra glas alcohol kan je leven met 30 minuten verkorten // AD, 13 апреля 2018 г.

308

Dan Kahan, Asheley Landrum, Katie Carpenter, Laura Helft and Kathleen Hall Jamieson. Science Curiosity and Political Information Processing. Advances in Political Psychology, 2017. В описании этого исследования я с благодарностью использовала статью Brian Resnick. There May Be an Antidote to Politically Motivated Reasoning. And It’s Wonderfully Simple // Vox.com, 7 февраля 2017 г.

309

Далее в этой главе я называю интерес к науке «любознательностью».

310

Tim Harford. Your Handy Postcard-Sized Guide to Statistics.

311

Animal Models in Alcohol Research. Alcohol Alert, апрель 1994 г.

312

Chiara Scoccianti, Béatrice Lauby-Secretan, Pierre-Yves Bello, Véronique Chajes and Isabelle Romieu. Female Breast Cancer and Alcohol Consumption: A Review of the Literature // American Journal of Preventive Medicine, 2014.

313

Richtlijnen goede voeding 2015, De Gezondheidsraad, 2015.

314

Roni Caryn Rabin. Major Study of Drinking Will Be Shut Down // New York Times, 15 июня 2018 г.

315

Roni Caryn Rabin. Federal Agency Courted Alcohol Industry to Fund Study on Benefits of Moderate Drinking // New York Times, 17 марта 2018 г.

316

Owen Dyer. $ 100m Alcohol Study Is Cancelled amid Pro-Industry «Bias» // BMJ, 19 июня 2018 г. Послесловие. Как поставить числа на место

317

Sanne Blauw. Waarom je beter geluk dan rendement kunt meten // De Correspondent, 20 марта 2015 г.

318

OECD Better Life Index. http://www.oecdbetterlifeindex.org, по состоянию на 17 августа 2018 г.

319

Monitor brede welvaart 2018, Centraal Bureau voor de Statistiek, 2018.

320

AEA RCT Registry. http://www.socialscienceregistry.org, по состоянию на 16 августа 2018 г. Другой пример – «зарегистрированные отчеты» Центра открытой науки.

321

Estimating the Reproducibility of Psychological Science. Open Science Collaboration, Science, 2015.

322

См., например, «Международный журнал повторных работ в области эмпирической экономики» (International Journal for Re-Views in Empirical Economics).

323

Geert Bors. Leraar zijn in relatie (2): je bent je eigen instrument. Stichting NIVOZ, 4 июля 2018 г.

324

«Я преподаю [в среднем профессиональном училище], не выставляя ученикам оценки, уже три года. Это такое облегчение! У учеников больше мотивации, атмосфера расслабленная (без угрозы контрольных). Очень горжусь маленькими разбойниками. Но в нашей школе так работаю только я. Начальные классы тоже хотят ввести эту систему», @bijlesduits в твиттере, 30 мая 2018 г.

325

Sheila Sitalsing. Dappere verkoopsters van de Bijenkorf bewijzen: protesteren tegen onzin heeft zin. de Volkskrant, 22 мая 2018 г.

326

Steeds meer beoordelingen: «Dit geeft alleen maar stress» // Nieuwsuur, 24 апреля 2018 г.

327

http://www.openschufa.de, по состоянию на 27 ноября 2020 г.

328

Шесть вопросов, входящих в этот список, составлены по образцу других похожих списков, например, в статье Тима Харфорда «Удобное руководство по статистике открыточного формата» (Tim Harford. Your Handy Postcard-Sized Guide to Statistics), в последней главе книги «Как лгать при помощи статистики» Даррелла Хаффа и в статье Мишель Нейхейс «Карманное руководство по профилактике брехни» (Michelle Nijhuis. The Pocket Guide to Bullshit Prevention).

329

Хафф Д. Как лгать при помощи статистики / Пер. с англ. Е. Э. Лалаян. М.: Альпина Паблишер, 2015.

330

Элленберг Дж. Как не ошибаться. Сила математического мышления / Пер. с англ. Н. Г. Яцюк. М.: Манн, Иванов и Фербер, 2017.

331

Скотт Дж. С. Благими намерениями государства. Почему и как проваливались проекты улучшения условий человеческой жизни / Пер. с англ. Э. Н. Гусинского и Ю. И. Турчаниновой. М.: Университетская книга, 2011.

332

Харари Ю. Н. Sapiens. Краткая история человечества / Пер. с англ. Л. Сумм. М.: Синдбад, 2016.

333

Койл Д. ВВП. Краткая история, рассказанная с пиететом / Пер. с англ. А. Гусева. М.: Издательский дом ВШЭ, 2016.

334

Фрай Х. Hello World. Как быть человеком в эпоху машин / Пер. с англ. Ю. Плискиной. М.: Corpus (АСТ), 2021.

335

Канеман Д. Думай медленно… решай быстро / Пер. с англ. А. Андреева, Ю. Деглиной и Н. Парфенова. М.: АСТ, 2014.

336

Тетлок Ф., Гарднер Д. Думай медленно… предсказывай точно. Искусство и наука предвидеть опасность / Пер. с англ. В. Дегтяревой. М.: АСТ, 2018.