Какие же данные опровергают наличие причинно-следственной связи?
Эти данные можно разделить на две категории:
• причина есть, а следствия нет;
• причины нет, а следствие есть.
То есть фактически ученый при проверке гипотезы о наличии причинно-следственной связи заполняет следующую таблицу.
При этом в пустых ячейках указывается количество случаев, выраженное, например, в процентах.
Но давайте рассмотрим правильную процедуру проверки на более конкретном примере – проверим действенность лекарственного средства.
Лекарство от легковерия
Итак, мы с вами решили проверить действенность лекарства от легковерия. Мы уже много знаем о том, каковы ограничения нашего разума и как их следует преодолевать, поэтому в процессе проверки лекарства будем обязательно рассматривать не только ситуацию «выпил лекарство – избавился от легковерия», но и ситуации:
• «выпил лекарство – не избавился от легковерия»;
• «не выпил лекарство, а от легковерия избавился».
И начнем мы с ситуации «выпил лекарство – не избавился от легковерия»
.Мы даем лекарство от легковерия группе наших испытуемых и получаем следующие данные.
Как вы считаете, можно ли признать наше лекарство действенным?
Конечно, нельзя! И дело тут не только в том, что помогает оно лишь в очень малом проценте случаев (пылесос, который включается только в одном случае из десяти, или мобильный телефон, который успешно набирает номер в одном случае из десяти, обычно отдают в ремонт).
Дело тут еще и в том, что такой результат – 10 % – может быть просто статистической погрешностью, возникать случайно. Другими словами, лекарство А не просто помогает только в 10 % случаев, оно вообще не помогает, а исчезновение заболевания в этих 10 % случаев связано с другими факторами или вообще с тем, что заболевание проходит само.
К сожалению, в реальной жизни нас зачастую не волнует, что «действенность» лекарства (рекомендации, метода) проявляется лишь в малом проценте случаев. Мы считаем, что если хоть кому-то помогло, то игра стоит свеч, а лекарство – потраченных на него денег.
Другими словами, если хоть раз в жизни нам «помог» экстрасенс, мы всю жизнь будем считать, что экстрасенсорика существует. Если хоть один раз в жизни мы увидели вещий сон, то мы будем считать, что вещие сны имеют место. Если хотя бы один рецепт из какой-нибудь эзотерической книжки или из книжки серии «Помоги себе сам» нам «помог», мы будем снова и снова покупать такие книжки, веря в то, что подобная литература содержит полезные советы и действенные рекомендации.
И это очень серьезная ловушка, в которую постоянно попадает наш разум.
Но давайте предположим, что, проверяя на действенность лекарство от легковерия, мы получили иные данные.
Можем ли мы в этом случае сделать вывод о том, что лекарство действенно?
На первый взгляд, мы должны обрадоваться и провозгласить: «Мы нашли лекарство от легковерия! Целых 90 % испытуемых избавились от легковерия после его приема!»
Но не все так просто. Почему?
Потому что мы еще не завершили проверку и нам надо посмотреть на ситуацию «не выпил лекарство, а от легковерия избавился»
.Давайте этим и займемся.
Для этого мы набрали определенное количество легковерных людей, выждали месяц и проверили, не пройдет ли легковерие само по себе, без всяких лекарств.
Допустим, через месяц мы получили следующие данные.
Что же мы видим?
Мы видим, что наши изначальные представления о том, что лекарство от легковерия очень эффективно («целых 90 % испытуемых избавились от легковерия!»), оказались ложными, поскольку и без всякого лекарства 90 % испытуемых избавляются от легковерия.
Итак, чтобы сделать вывод о том, помогает ли лекарство от легковерия, необходимо рассмотреть не только ситуацию «выпил лекарство – избавился от легковерия», но и ситуации «выпил лекарство – не избавился от легковерия» и «не выпил лекарство, а от легковерия избавился».
Кстати, таблица, с которой мы работали все это время, настолько важна для дальнейшего изложения, что будем называть ее волшебной.
Но и это еще не все. Мы кое о чем забыли.
Верно, когда много
Когда я учился в школе, в кабинете математики у нас висел среди прочих небольшой плакат, на котором было написано:
«Статистика. Верно, когда много».
И это очень правильная максима. Действительно, если мы имеем дело с неким явлением, для установления которого единичного эксперимента мало, то очень важно рассмотреть достаточно много случаев, когда это явление может проявиться.