Цифры врут. Как не дать статистике обмануть себя - Том Чиверс

двумя явлениями: например, между потреблением газированных напитков и проявлением жестокости или между вейпингом и курением травки. Однако наличие корреляции еще не означает, что одно явление влечет за собой другое, – возможно, происходит что-то иное. Если исследование не относится к рандомизированным экспериментам, причинно-следственную связь доказать очень сложно. Остерегайтесь говорить «видеоигры вызывают жестокость» или «ютуб провоцирует экстремизм», если исследование этого не показывает. (Подробности см. в главе 8.)

8. Избегайте выборочного представления фактов и не забывайте о случайных колебаниях

Если вы заметите, что за период с 2010 по 2018 год что-то выросло на 50 %, проверьте, был бы подъем столь же внушительным, если бы вы начали строить график с 2008 или 2006 года. Иногда числа слегка колеблются, и если выбрать за начало отсчета точку, в которой значение было крайне низким, можно выдать случайное колебание за удивительное явление. Это в особенности касается относительно редких событий, таких как убийства и самоубийства. (Подробности см. в главе 16.)

9. Осторожнее с рейтингами

Спустилась ли Великобритания с пятого на седьмое место в рейтинге экономик мира? Занимает ли данный университет 48-е место в мире? Что это значит? В зависимости от выбранных за основу чисел это может значить очень много или ничего. Предположим, Дания занимает первое место в мире по числу общественных дефибрилляторов (1000) на миллион человек, а Великобритания – 17-е со своими 968-ю. Разница невелика, особенно если сравнивать со странами, в которых вообще нет дефибрилляторов. Означает ли в данном случае 17-е место, что органы здравоохранения Великобритании бессердечно пренебрегают необходимостью обеспечить население средствами первой помощи? Вероятно, нет. Говоря о рейтингах, всегда объясняйте, на каких числах они основаны и как распределяются места. (Подробности см. в главе 13.)

10. Всегда давайте ссылки на источники

Это ключевой момент. Давайте ссылку или указывайте в сносках, откуда вы взяли числа. Исходный источник: научное исследование (страница журнала или страница doi.org), бюллетень Национальной статистической службы Великобритании, опрос YouGov. Если вы этого не делаете, то очень усложняете читателям самостоятельную проверку данных.

11. Если вы ошиблись – признайте это

Крайне важно: если вы сделали ошибку и вам на нее указали, не расстраивайтесь. Такое случается постоянно. Просто скажите спасибо, исправьте ошибку и двигайтесь дальше.

Если вы ученый, вы тоже можете помочь. Как и от СМИ, от вас нельзя ожидать, что вы – в одиночку – преодолеете все структурные проблемы в науке, публикационный сдвиг и погоню за новизной (хотя если вы проводите только заявленные или предварительно зарегистрированные исследования, то вы молодец). Но вы можете следить, чтобы все пресс-релизы о ваших исследованиях описывали их точно. Если ваше исследование чего-то не показало, то важно прямо об этом сказать. Например, если вы обнаружили, что любители кроссвордов с меньшей вероятностью заболевают Альцгеймером, но не обнаружили причинно-следственной связи, то в пресс-релизе стоит указать: «Это не означает, что разгадывание кроссвордов предохраняет от Альцгеймера». Радует, что проведенное в 2019 году исследование группы ученых Кардиффского университета показало: такого рода предупреждения снижают уровень дезинформации в описаниях исследований, опубликованных в СМИ, хотя и не сокращают количество публикаций. Журналисты с той же вероятностью пишут об исследованиях, но реже склонны искажать их результаты.

Конечно, большинство наших читателей (мы надеемся) – не журналисты и не ученые, а простые крестьяне с мозолистыми руками, возделывающие поля, или что там делают обычные люди. И мы бы хотели, чтобы вас это тоже обеспокоило.

Попытка внести эти изменения сродни попытке изменить избирательную систему. Для перехода к новой системе голосования – например, от системы относительного большинства, которая применяется в британском парламенте, к системе пропорционального представительства, в той или иной форме используемой во многих других европейских странах, – нужно сначала одержать победу по старой системе. А после того как ваша политическая партия победила по старой системе, у вас нет особого стимула ее менять, потому что вы у власти.

Точно так же многие ученые и журналисты знают, что с представлением чисел есть проблемы. Многие из них это открыто признают. Придя же к власти (став профессорами или заняв высшие должности в журналистике), они оказываются внутри системы, и у них нет особого стимула ее менять.

Но если читатели станут требовательнее, если они начнут посылать в газеты вопросы типа: «Почему вы не указали абсолютный риск?» или «Разве это число – не результат выборочного представления фактов?» – стимулы появятся. Если вы будете следить за новостями, отмечать, когда они искажаются теми способами, которые мы тут описали, и вежливо на это указывать, вы поможете постепенно улучшить систему. По крайней мере, мы на это надеемся.

Так что, если вы согласны, мы начинаем кампанию на howtoreadnumbers.com. И тогда все станут лучше разбираться в статистике.

Ну… может быть.

Источник: https://xkcd.com/552/

Благодарности

За помощь с этой книгой мы бы хотели поблагодарить многих людей. Ниже мы перечислим их в произвольном порядке.

Агента Уилла Франсиса и издателя Дженни Лорд – за то, что они заинтересовались нашей идеей и помогли превратить ее в живую книгу, которую, надеемся, будут охотно покупать.

Сару Чиверс, сестру Тома, которая (к нашему удобству!) занимается графическим дизайном и сделала все чудесные иллюстрации.

Пита Этчеллса, Стюарта Ритчи, Стиана Уэстлейка, Майка Стори, Джека Бейкера, Хольгера Визе и человека под псевдонимом Unlearning Economics за примеры, идеи и правки в текст.[44]

Стивена, отца Дэвида, за пример из главы 3 с Джо Уиксом, который разбирался с вероятностями. (Стивен не пропустил ни одного занятия, которые Джо проводил на ютубе во время локдауна.) И Энди, отца Тома, за правки в текст.

Аду и Билли, детей Тома, за то, что они лишь изредка врывались к нему в кабинет и отвлекали его.

И, конечно, наших жен Эмму Чиверс и Сузанн Браун.

Мы хотели бы также специально отметить Кевина Макконвея, почетного профессора прикладной статистики в Открытом университете, который прочел всю книгу, выловил в ней кучу ошибок и терпеливо исправил их очень четко и с юмором. Некоторые неточности, несомненно, все же ускользнули от его пристального внимания, но это наша вина, а мы хотели бы с искренней благодарностью поклониться ему. Слава королю Кевину!

Примечания

1

Перевод С. Рюмина. – Прим. ред.

2

По состоянию на 30.05.2022 от коронавируса в России умерло 379 029 человек. См.: https://coronavirusstat.ru. – Прим. ред.

3

Принадлежит компании Meta, которая признана экстремистской организацией и запрещена в РФ. – Прим. ред.

4

Рассчитывается так: (90 × 2,9 + 10 × 1) / 100 = 2,1. – Прим. авт.

5

Гаусс-бластер – мощное оружие в игре Warhammer. – Прим. ред.

6