Бен Голдакр - Обман в науке

Зачем нам нужна статистика, почему мы что-то измеряем и почему мы считаем? Если научный метод имеет какой-то авторитет или, как я предпочитаю говорить, ценность — это потому, что он представляет собой системный подход, и ценность его определяется тем, что все другие методы могут вводить в заблуждение. Когда мы рассуждаем неформально — называйте это интуицией, если хотите, — мы используем методы, основанные на практике, а не на науке (так называемые правила большого пальца), которые упрощают проблемы ради эффективности. Многие из этих упрощений характеризуются как «эвристические» методы (то есть методы догадок) и являются эффективными способами получения знания во многих обстоятельствах.

За удобство приходится платить заблуждениями, поскольку в этих методах есть уязвимые места. Это похоже на то, как в живописи эксплуатируются особенности нашего восприятия: отдаленные объекты кажутся маленькими, а перспектива может нас обмануть и заставить поверить в то, что мы видим три измерения вместо реальных двух. Но мы контролируем это, используя аппарат контроля глубины. Когда же познавательная система — аппарат верификации — сбита с толку, то так же, как мы видим глубину на плоской картине, мы приходим к ошибочным выводам об абстрактных вещах. Мы ошибочно принимаем нормальные сбои за значимые модели или приписываем причинную связь явлениям, в которых она отсутствует.

Это иллюзии познания, параллель с оптическими иллюзиями. Они могут также нас обманывать, и именно они заставляют нас заниматься наукой, а не основывать свои взгляды на интуиции или информации о сути предмета, почерпнутой из популярных СМИ, потому что окружающая действительность не предоставляет нам тщательно сведенные в таблицы данные по методам и исходам лечения. Вместо этого она дает нам время от времени случайные, разрозненные кусочки, и попытка построить широкую картину мира на основании памяти о вашем собственном опыте будет похожа на рассматривание потолка Сикстинской капеллы через длинную тонкую картонную трубку: вы можете запомнить отдельные фрагменты там и тут, но без системы и модели вы никогда не увидите целостную картину.

Давайте начнем.

Как человеческие существа, мы обладаем врожденной способностью делать что-нибудь из ничего. Мы видим фигуры, когда смотрим на облака, и человека, когда смотрим на луну; игроки в азартные игры убеждены, что у них есть «счастливые дорожки»; мы берем веселую музыкальную запись, поигрываем ее задом наперед и слышим скрытые послания о пришествии сатаны. Наша способность находить закономерности — это то, что позволяет нам понимать мир, но иногда, из-за нашего чрезмерного желания что-то найти, мы видим закономерности там, где их нет.

В науке, если вы хотите изучить явление, иногда полезно свести его к простейшей и наиболее контролируемой форме. Среди людей, занимающихся спортом, существует мнение, что у спортсменов, как и у игроков (только с большим основанием), есть свои «счастливые дорожки». Можно объяснять это по-разному: уверенностью в себе, лучшей подготовкой, хорошей разминкой; возможно, это существует в некоторых играх, однако статистики после некоторого анализа не нашли взаимосвязи между, скажем, удачной первой подачей и удачной следующей.

Поскольку «счастливая дорожка» или «полоса везения» — это очень популярные заблуждения, они представляют собой отличную модель для того, чтобы посмотреть, как мы воспринимаем случайную последовательность событий. Это было продемонстрировано американским социальным психологом Томасом Джиловичем в классическом эксперименте. Он показал баскетбольным болельщикам случайную последовательность, состоящую из символов О и X, объяснив, что они обозначают попадания и промахи игрока, а затем спросил, думают ли они, что эти последовательности демонстрируют «полосу везения». Перед вами случайная последовательность символов из этого эксперимента. Вы можете подумать, что она создана с помощью подбрасывания монеты несколько раз подряд.

ОХХХОХХХОХХОООХООХХОО

Участники эксперимента были убеждены, что эта последовательность является примером «полосы везения» или «счастливой дорожки», и легко видеть почему, если вы посмотрите внимательно: шесть из первых восьми ударов были в цель. Нет, подождите, восемь из первых одиннадцати. Не может быть, чтобы это была случайность.

Этот эксперимент показывает, насколько плохо мы умеем определять случайные последовательности. Мы ошибаемся в том, как они должны выглядеть: мы ожидаем большего чередования, поэтому по-настоящему случайные последовательности кажутся нам демонстрирующими какую-то закономерность. Наша интуиция в самых общих наблюдениях, например в попытке найти определенную модель в случайном шумовом фоне, часто нас подводит.