Наукообразная чушь. Разоблачение мошенничества, предвзятости, недобросовестности и хайпа в науке - Стюарт Ричи

индукции, которая, по сути, гласит, что корреляция – это даже не корреляция, поскольку нет рациональных оснований утверждать, что события, произошедшие в прошлом, произойдут снова. (Классическая задачка: докажите, что солнце взойдет завтра утром; “Так всегда было раньше” – на самом деле не логическое основание для веры в завтрашний восход.) Эта проблема обсуждается в философии уже сотни лет, и, хотя немало чрезвычайно умных мыслителей пытались ее разрешить, многие думают, что она абсолютно неразрешима. Замечательное обсуждение см. тут: Henderson L. The Problem of Induction. Stanford Encyclopedia of Philosophy. Winter 2019.

506

Adams R. C. et al. Claims of Causality in Health News: A Randomised Trial. BMC Medicine. 17, no. 1 (2019): 91.

507

Boutron I. et al. Three Randomized Controlled Trials Evaluating the Impact of “Spin” in Health News Stories Reporting Studies of Pharmacologic Treatments on Patients’/Caregivers’ Interpretation of Treatment Benefit. BMC Medicine. 17, no. 1 (2019): 105.

508

От англ. churnalism.

509

Davies N. Flat Earth News: An Award-Winning Reporter Exposes Falsehood, Distortion and Propaganda in the Global Media. London: Vintage Books, 2009; Jackson D., Moloney K. Inside Churnalism: PR, Journalism and Power Relationships in Flux. Journalism Studies. 17, no. 6 (2016): 763–80.

510

Dumas-Mallet E. et al. Poor Replication Validity of Biomedical Association Studies Reported by Newspapers. PLOS ONE. 12, no. 2 (2017): e0172650.

511

Оригинальная цитата: “Молва летит на крыльях, правда, прихрамывая, плетется вослед…” (Пер. М. Шерешевской. Цит. по: Англия в памфлете. М.: Прогресс, 1987.)

512

Это не значит, что научно-популярные книги, написанные неспециалистами, нужно сбросить со счетов: они также подвержены серьезным проблемам. В своей рецензии на сборник эссе Малкольма Гладуэлла “Что видела собака” Стивен Пинкер ввел термин “проблема значений айгона” (Igon Values Problem) для описания случая, когда Гладуэлл исказил понятие “собственные значения” (eigenvalues; математическое понятие, важное для статистического анализа) – скорее всего, он услышал, как один из его собеседников произнес это, а затем не удосужился поискать нужное слово для проверки. [Отметим, что в опубликованном переводе этой книги на русский язык, выполненном Е. Бакушевой, словосочетание igon value вообще пропало. (Прим. перев.)] “Значения айгона” частенько встречаются в научно-популярной литературе, обнажая пробелы в понимании, которые могут возникнуть, если автор не является экспертом в рассматриваемом вопросе. Однако, как мы вскоре увидим, и ученые, даже пишущие о тех областях, которыми сами занимаются, способны создавать книги с проблемами ничуть не лучше “значений айгона”. Pinker S. Malcolm Gladwell, Eclectic Detective. New York Times. 7 Nov. 2009.

513

Dweck C. S. Mindset: The New Psychology of Success. New York: Ballantine Books, 2008. Еще у Двек есть очень популярное выступление на TEDx, с общим количеством просмотров 13,5 миллиона на момент написания этих строк (10,2 миллиона на сайте TED и 3,3 миллиона на YouTube), где она заявляет, что это “базовое человеческое право детей, всех детей, – жить там, где поощряется развитие”. Dweck C. The Power of Believing That You Can Improve. TEDxNorrkoping. Nov. 2014.

514

Там же.

515

Yettick H. et al. Mindset in the Classroom: A National Study of K-12 Teachers. Editorial Projects in Education. Education Week Research Center, 2016. Обратите внимание: выборка нерепрезентативна, так что будьте бдительны. В феврале 2020 года Google при поиске по слову mindset (“образ мышления”) только в доменах “.sch.uk”, то есть исключительно на сайтах школ Великобритании, показывал 43 200 результатов. Согласитесь, это дает некоторое представление о популярности идеи. Сейчас в Великобритании чуть больше 32 тысяч школ. Key UK Education Statistics. British Educational Suppliers Association. 28 Oct. 2019.

516

Sisk V. F. et al. To What Extent and Under Which Circumstances Are Growth Mind-Sets Important to Academic Achievement? Two Meta-Analyses. Psychological Science. 29, no. 4 (2018): 549–71. О дальнейшей работе той же группы исследователей, скептически относящихся к установкам на развитие, см. Burgoyne A. P. et al. How Firm Are the Foundations of Mind-Set Theory? The Claims Appear Stronger Than the Evidence. Psychological Science. 31, no. 3 (2020): 258–267.

517

Для фанатов статистики: корреляционный эффект соответствовал коэффициенту корреляции Пирсона, равному 0,10, а экспериментальный эффект – d-значению Коэна, равному 0,08. Представить себе, что означает d-значение 0,08 помимо перекрывания распределений на 96,8 %, можно так: допустим, мы наугад выбираем человека из группы, прошедшей тренинг, и смотрим, выше или ниже его отметки по отношению к среднему в контрольной группе. Если бы эффекта от тренинга не было, вероятность такого отклонения равнялась бы 50 % (средние одинаковы). Метаанализ показал, что эффект от тренинга такой, как если бы студенты, прошедшие обучение по формированию подвижного образа мышления, с вероятностью 52,3 % имели отметки выше среднего в контрольной группе. Вычислено здесь: https://rpsychologist.com/d3/cohend.

518

В метаанализе обнаружились некоторые свидетельства того, что для детей, находящихся в группе риска (из бедных семей, например), польза от тренингов по подвижному образу мышления больше. Это подтвердилось в недавнем масштабном исследовании, проведенном сторонниками установок на развитие, результаты которого оказались в целом схожи с результатами метаанализа. Yeager D. S. et al. A National Experiment Reveals Where a Growth Mindset Improves Achievement. Nature. 573, no. 7774 (2019): 364–9.

519

Если вам интересна наглядная иллюстрация того, как хайп провоцирует ощущение научной “ползучей миссии”, прочитайте статью, опубликованную Двек и ее коллегами в журнале Science в 2011 году, где выдвинуто предположение – на основании довольно хило выглядящих доказательств, – что концепцию подвижного образа мышления можно использовать для содействия миру на Ближнем Востоке. Halperin E. et al. Promoting the Middle East Peace Process by Changing Beliefs About Group Malleability. Science. 333, no. 6050 (2011): 1767–9.

520

Другой пример хайпа в образовании до некоторой степени вытекает из концепции подвижного образа мышления: это “упорство”. Психолог Анжела Дакворт продвигала идею, что способность настойчиво заниматься увлекшей вас задачей и не сдаваться, даже когда жизнь чинит препятствия, – это ключ к жизненному успеху, причем способность эта куда важнее, чем врожденный талант. Идея стала крайне популярной: на момент написания этих строк выступление Дакворт на конференции TED на эту тему набрало 25,5 миллиона просмотров