«Руководство скептика по Вселенной»: Как отличить реальность от вымысла в мире, который тонет в фальши. - Steven Novella

Дениализм стремится лишить нас силы науки, нападая на те выводы, для честной оценки которых отрицателям не хватает интеллектуального мужества. Но дениализм — это не столько характеристика конкретных людей, сколько модель поведения, против которой нам нужно всегда оставаться начеку. И прежде всего — в отношении самих себя.

24. Запись в «Руководстве скептика»: П-хакинг и другие изъяны научных исследований. Раздел: Наука и лженаука. См. также: Лженаука.

Существует множество способов повлиять на результаты кажущихся строгими научных исследований. Критически важно уметь оценивать надежность исследований, чтобы понимать, стоит ли воспринимать их заявления всерьез.

Природа науки — это не неуклонное линейное движение к Истине, а, скорее, извилистый путь, изобилующий тупиками и разворотами, который, тем не менее, в конечном итоге постепенно приближает нас к лучшему, пусть и предварительному, пониманию мира природы.

— Массимо Пильюччи

Я наблюдал, как моя дочь Джулия играет в роботов-боксёров Rock’em Sock’em с моим четырёхлетним племянником Диланом (сыном Джея). В одном раунде робот Дилана снёс голову роботу Джулии, и мальчик объявил себя победителем. В следующем раунде Джулия ударила первой, и у робота Дилана послушно отлетела голова. Дилан снова объявил, что выиграл. В ответ на недоуменные расспросы Джулии он объяснил, что в этом раунде победителем считается как раз тот робот, который потерял голову.

Все мы помним подобное по своему первому опыту совместных игр: маленькие дети порой пытаются изменить правила, уже увидев результат. Сейчас мы смеемся над этим, потому что их жалкие попытки смухлевать слишком очевидны и шиты белыми нитками. Даже став чуть старше — не говоря уже о взрослых, — мы понимаем, что правила нужно устанавливать заранее и строго их придерживаться. Нельзя, увидев исход игры, заявить, что именно при таком раскладе ты и победил.

Тем не менее, взрослые продолжают так делать. Даже уважаемые ученые порой поддаются искушению подправить правила уже после того, как результаты стали известны, — просто делают они это гораздо тоньше и изощреннее. И порой даже сами не осознают, что лукавят.

Правила науки куда важнее любой игры. Они созданы специально для того, чтобы исключить любые манипуляции, будь то намеренные или случайные. Строгое следование этим правилам перевернуло наше понимание Вселенной и во многом помогает нам отличать истину от принятия желаемого за действительное. Тем не менее, многое из того, что выдается за научные исследования, имеет изъяны или носит предварительный характер. А кое-что и вовсе представляет собой полную чушь.

В мире проводится так много исследований — буквально миллионы новых работ публикуются каждый год, — что при желании можно найти научное подтверждение практически любому утверждению (если, конечно, не побрезговать предвзятым отбором фактов).

Как же отличить надежное, солидное научное исследование от низкосортного? Давайте устроим «глубокое погружение» в стиле SGU.

Вот пример сомнительного исследования, которое мы обсуждали в эфире в начале 2017 года: «Эффекты поля сознания и снижение уровня убийств в городах США: оценка проспективного квазиэксперимента». Эта работа вышла из стен Университета менеджмента Махариши.

Идея заключается в том, что сознание — это поле, и существует единое вселенское поле сознания, частью которого мы все являемся. Когда отдельные люди занимаются трансцендентальной медитацией (ТМ), они влияют не только на собственное сознание, но и на всё поле целиком.

Суть этого и других подобных исследований ТМ состоит в том, чтобы подтвердить уже имеющееся убеждение (они вовсе не проверяют его), что если достаточное количество людей пошлет позитивные вибрации во вселенское поле сознания, то обществу в целом станет лучше. Сколько же людей для этого нужно? Что ж, у них есть ответ. Это квадратный корень из одного процента населения (берем численность населения, делим на 100, а затем извлекаем квадратный корень из полученного числа). Почему? Да потому что математика!

Вообще-то раньше требовался один процент населения. Но затем (когда им не удалось набрать нужное количество людей, чтобы повлиять на мир) они «обнаружили», что истинное число составляет всего лишь квадратный корень из этого одного процента.

По всей видимости, эффекта «доза-реакция» здесь нет — есть лишь пороговый эффект: стоит перешагнуть магический рубеж, и этот эффект начинает действовать. Этот порог выражается простой математической формулой, благодаря чему всё это звучит весьма наукообразно. Никакого теоретического обоснования под этим нет; всё это гораздо ближе к магическим ритуалам и нумерологии, нежели к научному процессу. (Реальный мир не основан на десятичной системе счисления — это лишь человеческая условность. Нет никаких причин, по которым любая природная константа выражалась бы таким круглым числом, как 1 процент).

Вот что, по их утверждениям, было сделано в ходе эксперимента: они отслеживали уровень убийств в 206 крупнейших городах США, по которым имелась статистика ФБР. Затем они сравнили базовый период (с 2002 по 2006 год) с периодом вмешательства (с 2007 по 2010 год). Период вмешательства начался в январе 2007 года, когда «численность группы трансцендентальной медитации и ТМ-Сидхи превысила 1725 участников». Авторы утверждают, что до этой даты уровень убийств рос, но как только зарегистрировался участник под номером 1725 (ведь 1724 было мало!), показатели поползли вниз.

Что действительно забавно, так это откровенный фреквентистский (когда выводы строятся исключительно на статистике) бред, который они несут в своем пресс-релизе. Они утверждают, будто «рассчитали, что вероятность того, что тенденция к снижению уровня убийств была вызвана простой случайностью, составляет 1 к 10 триллионам».

То есть, по их мнению, вероятность того, что уровень убийств снизился с 2007 по 2010 год случайно, составляла один к триллиону.

Это отличный пример того, как можно подтасовать результаты, — именно потому, что авторы изо всех сил пытаются придать своему труду форму серьезного научного исследования, хотя на самом деле изучают чистой воды магию.

На самом же деле уровень преступности и убийств снижался на протяжении предыдущих сорока лет. Снижение, показанное в исследовании, было лишь продолжением долгосрочной тенденции. Кроме того, они выбрали произвольный период исследования (почему именно 2002–2006 годы?) и произвольный период последующего наблюдения. На самом деле в период последующего наблюдения число медитирующих временами опускалось ниже «волшебного» числа. В этом исследовании так много произвольных допущений, что вы можете заставить цифры говорить всё что угодно. (Видите ли, на этот раз