Ах, обмануть меня нетрудно
Jun. 6th, 2024 08:24 pm![[personal profile]](https://www.dreamwidth.org/img/silk/identity/user.png){kind=small}
zlata_gl Ложь, наглая ложь и статистика. Приемы, которые помогут видеть правду за цифрами - Тим Харфорд
Оказывается, я уже читала одну его книжку - "Экономист под прикрытием".
Некоторая информация - на память, чтобы потом найти можно было.
Очень неоднозначное отношение к пионеру "недоверчивого отношения к статистике".
Если вы читали «Как лгать при помощи статистики», вы наверняка пришли к такому выводу. Эту остроумную и циничную книжку выпустил в 1954 малоизвестный тогда американский журналист-фрилансер Дарелл Хафф. The New York Times немедленно написала на нее восторженный отзыв, и с тех пор было продано более миллиона экземпляров этой книги, что, возможно, сделало ее самой популярной книгой по статистике на свете.
Книга заслуживает и славы, и похвалы. Это – настоящее чудо популярной статистики. Среди любителей чисел Дарелл стал легендой. Бен Голдакр, эпидемиолог и автор бестселлера «Обман в науке», восхищается тем, какую «бомбу» написал «брюзга Хафф». Американский писатель Чарльз Уилан говорит, что его книга «Голая статистика» вдохновлена «классической» работой Хаффа. Через 50 лет со дня выхода книги Хаффа известный журнал «Статистическая наука» организовал в его честь ретроспективу.
Я и сам раньше так думал. Подростком я зачитывался книгой «Как лгать при помощи статистики». Эта блестящая, хлесткая, да еще и забавно проиллюстрированная книга позволила мне проникнуть за завесу статистических манипуляций и научила меня распознавать обман.
Хафф использует море примеров.
Скачано, будет прочитано.
Однако
Дарелл Хафф напечатал свою книгу в 1954 году. Но в том же году случилось кое-что другое: британские ученые Ричард Долл и Остин Брэдфорд Хилл выпустили одно из первых убедительных исследований, демонстрирующих, что курение сигарет приводит к раку легких.
Без статистики Долл и Хилл никогда не пришли бы к этому выводу. За 15 лет число случаев рака легких в Соединенном Королевстве выросло в шесть раз. Уже в 1950 году страна лидировала по числу случаев заболеваний, а число смертей от рака легких впервые превысило число смертей от туберкулеза. Статистический подход нужен был уже хотя бы для того, чтобы заметить эти изменения. Доктора-одиночки располагали информацией лишь о единичных случаях.
Статистика была необходима и чтобы доказать, что убивают именно сигареты. Многие тогда полагали, что рак легких возникает из-за автомобилей. В этом была своя логика. В первой половине двадцатого века автомобили стали привычным явлением, а вместе с ними появились и выхлопные газы, и всепроникающий запах новых асфальтовых дорог...
Коллеги начали свое исследование первого января 1948 года...
В октябре 1949 года, меньше чем через два года после начала исследований, Долл бросил курить. Ему было 37, и всю свою взрослую жизнь он был курильщиком. Что же обнаружили Долл и Хилл? Курение не просто удваивает, утраивает или учетверяет риск рака легких. Курение увеличивает этот риск в 16 раз.
Результаты исследования Хилл и Долл опубликовали в сентябре 1950 года и тут же принялись за более масштабное, длительное и амбициозное исследование. Хилл написал каждому врачу в Соединенном королевстве – а было их 59 600 – и попросил заполнить «опросник» касательно здоровья и курения. Рассуждали они так: врачи с легкостью смогут описать, что и когда они курили. Они внесены в медицинский реестр, значит, их всегда можно будет найти без труда. А когда доктор умирает и устанавливают причину его смерти, этой информации точно можно доверять. Доллу и Хиллу просто нужно было немножко подождать.
На призыв Хилла откликнулись более 40 тысяч врачей, но рады ему были далеко не все. Следует понимать, что курение в то время было крайне распространено. Неудивительно, что в первоначальной выборке Долла и Хилла 85 % врачей-мужчин курили. Кому приятно слушать, что ты медленно, но верно ведешь себя к верной гибели – тем более если твой метод самоубийства вызывает такую сильную зависимость?
Однажды на лондонской вечеринке Хилла остановил какой-то сердитый врач и выдал: «Так это вы хотите, чтобы мы бросили курить». «Вовсе нет, – ответил Хилл, который в то время еще курил трубку. – Если вы продолжите курить, мне любопытно знать, как вы умрете. Если бросите курить – мне тоже любопытно, как вы умрете. Так что выбор – курить или не курить – за вами. Мне это безразлично. И так и так все подсчитаю».
Не правда ли, обаятельный парень?
После Дарелла Хаффа многие стали считать статистику всего лишь трюком фокусника: забавно, но и только. Еще задолго до коронавируса я опасался, что такой подход ни к чему хорошему не приведет. Нам больше не кажется, что статистика помогает понять, как устроен мир. Не то что бы мы по умолчанию считаем все статистические данные ложными – но нам кажется, что отделить правду от лжи просто невозможно. Поэтому каждый человек верит в то, во что хочет (об этом еще поговорим в следующей главе), а в остальном мы ведем себя как Хафф: пожимаем плечами или цинично усмехаемся, а то и то и другое сразу.
Это не просто досадный подход – это трагедия. Если мы поверим, что больше неспособны понять, что правда, а что ложь, то потеряем важнейший инструмент. Именно этот инструмент доказал нам, что сигареты смертельно опасны. Этот инструмент – наша единственная надежда найти выход из коронавирусного кризиса, да и вообще понять, как устроен наш непростой мир. Но если мы привыкнем отвергать всякую неприятную нам статистическую информацию, этот инструмент нам не поможет. Конечно, я не призываю к легковерности, но лекарство от легковерности – не отрицание всего вообще, а способность оценить достоверность информации с уверенностью, любознательностью и здоровым скептицизмом...
Мне становилось все более не по себе, когда поклонники нашей радиопрограммы восхищались тем, как мы «разоблачаем статистические мифы». Да, конечно, мы занимались разоблачениями, и это было здорово. Но потихоньку, узнавая все больше и больше, я понял, что самое приятное – не разносить в клочья ложь, а пытаться найти истину.
В ходе работы над «Более-менее» я узнал, что здравый смысл – удивительно надежное подспорье для анализа данных. Главные принципы этого подхода я и опишу в этой книге.
Почти все исследователи и продюсеры, как и я, не учились толком работать с числами. Но даже в узкоспециализированных областях зачастую достаточно было задать ряд простых вопросов и, может быть, воспользоваться поисковиком, чтобы получить интересные результаты. Конечно, в некоторых случаях нам не помешала бы ученая степень по статистике, но задавать правильные вопросы мы могли и без нее. Сможете и вы.
Оптимист, однако.
Но некоторые примеры - действительно поддаются проверке.
Весной 1965 года комитет в Сенате США обсуждал, следует ли печатать предупреждение о вреде курения на пачках сигарет. Это был вопрос жизни и смерти. По мнению квалифицированного эксперта, научные данные вызывали сомнения – и он обратился к истории о детях и аистах. Он объяснил, что между числом новорожденных и числом аистов в данной местности существует прямая корреляция18. Но – продолжил эксперт – старая байка о том, что аисты приносят детей, не становится от этого правдой. Корреляция не означает причинно-следственную связь. Аисты не приносят детей. Чем обширнее местность, тем больше в ней места и для детей, и для аистов. Точно так же корреляция курения и рака легких ни в коем случае не означает, что курение вызывает рак легких.
– Вы и правда думаете, что связывать курение с болезнью так же бессмысленно, как связывать аистов с детьми? – спросил председатель. Эксперт ответил, что да.
А звали его Дарелл Хафф.
Лоббисты-табачники заплатили ему, чтобы он сделал то, в чем был мастер, и он сплел сеть из остроумных примеров, горсточки знаний по статистике и цинизма, чтобы люди сомневались, что сигареты опасны. Он даже работал над продолжением своей знаменитой книги, хотя оно так и не было напечатано. Называлось оно «Как лгать при помощи статистики о курении».
Попробую поискать эту информацию.
Сомнение – мощное оружие, а статистика – уязвимая мишень. Нужно, чтобы кто-то ее защищал. Да, лгать при помощи статистики легко – но еще легче лгать без статистики.
Как сказал тот раввин из анекдота: "И ты тоже права".
Когда говорят об искусстве убеждать, обычно представляют людей, которых хитростью склонили верить в то, во что верить не следует, – и это понятно. Мы обсудим этот вопрос в следующей главе. Но иногда проблема заключается не в том, что мы слишком легковерны, а в том, что мы ничему не верим. Курильщики любили сигареты, были физически зависимы от никотина и хотели всеми правдами и неправдами продолжать курить. Они пожимали плечами и говорили, что не могут разобраться во всей этой бестолковой информации – а производители табака именно этого и ждали. Их задачей было не убедить курильщиков в безвредности сигарет, а посеять сомнения в статистических данных, доказывающих их вред.
Выяснилось, что производить сомнения – проще простого. Лет 20 тому назад психологи Кари Эдвардс и Эдвард Смит провели такой эксперимент: они попросили американцев назвать «за» и «против» проблемных вопросов, таких как: можно ли делать аборт, шлепать ли детей, разрешать ли геям усыновление, какая должна быть квота на представителей меньшинств при приеме на работу и приговаривать ли к смертной казни лиц до 16. Разумеется, опрашиваемые продемонстрировали предвзятость: им сложнее было разработать аргументацию в подтверждение противной им позиции. Но, что более интересно, Эдвардс и Смит показали, что эта предвзятость более очевидна в негативной аргументации. Сомневаться оказалось легче, чем верить. Испытуемым было гораздо легче приводить доводы против не одобряемой ими позиции, чем приводить доводы за позицию, которую они разделяли. В чем сила? В сомнении.
Кроме того, сомнение привлекательно, так как является неотъемлемой частью научных исследований и споров. Всех нас в школе учили – или должны были учить – подвергать данные сомнению. Девиз одного из старейших научных обществ, британского Королевского Общества – nullius in verba, то есть «не верь никому на слово». Группа лоббистов, отрицающая статистические данные, без труда покажет, что тот или иной аспект данной науки не до конца проработан, отметит, что проблема очень, очень запутанная, и призовет ученых продолжить исследования. И все эти заявления покажутся нам научно обоснованными и даже мудрыми, но они создают опасную иллюзию, что на самом деле никто ничего не знает. Методы табачных производителей получили широкое распространение...
Есть известная история про телескоп Галилея: даже когда римско-католическая церковь обвинила отца астрономии в ереси, старшие кардиналы так и не посмотрели в его телескоп, говоря, что все это просто фокусы. Галилео видел на луне горы? Наверняка это было пятнышко на стекле. Он видел спутники Юпитера? Вздор! Они были в самом телескопе. Они даже одним глазом не глянули.
История про подделку картины Вермеера (спросила у Вики, это художник 17 века), которую хитрый ловкач впарил эксперту-коллекционеру Бредиусу.
И никто не узнал БЫ, если БЫ по случаю Ван Мегерен не сознался сам.
Он продал другую подделку под Вермеера ни много ни мало - самому Герингу (во время оккупации Голландии немцами).
После войны Мегерена обвинили в сотрудничестве с оккупантами. А за это можно было и "вышку" получить.
И тогда он рассказал, как обжулил Геринга.
Продемонстрировав свою технологию.
И превратился из предателя в "народного героя".
Но как могли так лопухнуться эксперты ?
Очень хотели верить.
Пааадумаешь, "пилтдаунский череп" !
Картины продавали за миллионы.
У Бредиуса было с полдюжины неочевидных причин полагать, что «Эммаус» был написан Вермеером, и они перевесили очевидное доказательство противного: эта картина на вермееровскую вообще не похожа...
История Абрахама Бредиуса показывает, что эксперты тоже попадаются на удочку мотивированной аргументации. В каких-то случаях их знания могут им только помешать. Как писал французский сатирик Мольер: «Ученый дурак глупее дурака неученого».
Наша эмоциональная реакция на статистическое или научное утверждение – тема отнюдь не второстепенная. Наши эмоции могут влиять на наши убеждения больше любой логики, да так часто и происходит. Мы можем убедить самих себя в удивительных вещах и подвергать сомнению неопровержимые факты, если дело касается наших политических взглядов, привычки пить кофе, нежелания взглянуть в лицо диагнозу ВИЧ-инфекции или любой теории, которая находит в нас эмоциональный отклик.
Но не стоит отчаиваться! Эмоции можно научиться контролировать – это часть процесса взросления. Первым делом надо эти эмоции заметить. Когда вам показывают статистику, обращайте внимание на свою реакцию. Если вы чувствуете гнев, торжество, желание отрицать – остановитесь на минутку, а затем поразмыслите. Не надо быть роботом безо всяких эмоций, но, помимо чувств, не забывайте также и мыслить.
Странности статистики младенческой смертности.
Смертность новорожденных в Соединенном королевстве сильно отличалась от региона к региону. Может, врачи и медсестры могут как-то спасти этих детей? В больницы с низкой смертностью отправили медиков. Их задачей было узнать, какие методы достойны подражания, и подумать, есть ли смысл полностью изменить систему помощи матерям и детям у себя в больницах.
Но доктору Люси Смит из Лестерского университета упорно казалось, что здесь что-то не так. Поэтому она детально изучила данные двух групп больниц: одной в центральных графствах Англии, а другой в Лондоне. ...
Когда беременность прерывается на двенадцатой или тринадцатой неделе, любой врач назовет это выкидышем. Если ребенок родится недоношенным на двадцать четвертой неделе или позже, это, в соответствии с законами Соединенного королевства, должно быть зарегистрировано как рождение. Но если беременность прерывается накануне этого срока, скажем, на двадцать второй или двадцать третьей неделе, не очень понятно, как описать эту ситуацию...
Когда беременность прерывается на двенадцатой или тринадцатой неделе, любой врач назовет это выкидышем. Если ребенок родится недоношенным на двадцать четвертой неделе или позже, это, в соответствии с законами Соединенного королевства, должно быть зарегистрировано как рождение. Но если беременность прерывается накануне этого срока, скажем, на двадцать второй или двадцать третьей неделе, не очень понятно, как описать эту ситуацию. ..
Та же проблема возникает, если сравнивать данные по разным периодам в одной и той же стране. Когда в 2015 и 2016 году в Англии и Уэльсе выросла смертность младенцев, хотя до этого она стабильно снижалась, журналисты стали бить тревогу – что неудивительно. «Медики сообщают, что причинами могут быть ожирение, бедность, курение и недостаток акушерок», – писала газета «The Guardian».
Такая вероятность есть. Но группа врачей в письме «Британскому медицинскому журналу» отметила, что в официальной статистике также отмечается резкий рост живых рождений на 22 неделе беременности и даже раньше. Похоже, что все больше врачей следовали примеру центральных графств и вместо «поздних выкидышей» регистрировали живое рождение, за которым последовала преждевременная смерть. И этого было достаточно, чтобы объяснить рост статистики младенческой смертности.
Оказывается, существует не только "3 пишем, 2 в уме", но и обратное явление: кто-то учитывает "пятимесячных новорожденных", не боясь "испортить статистику".
В США невероятно высокая для такой обеспеченной страны смертность младенцев: в 2010 это была 6,1 смерть на тысячу живорождений. В то же время в Финляндии эта доля составляет всего лишь 2,3. Оказывается, что американские врачи, как и их коллеги в центральных графствах Англии, намного чаще регистрируют беременность, оборвавшуюся на 22 неделе, не как выкидыш, а как живое рождение, за которым последовала ранняя смерть...
Если посмотреть на информацию о рожденных после 24 недели, то статистика по США падает с 6,1 до 4,2 смертей на 1000 живых рождений. В Финляндии же изменение незначительно: с 2,3 до 2,1.
Все равно в США - вдвое больше.
Контингент, однако...
Статистика как дисциплина основана на измерениях и подсчетах. Майкл Бластлэнд, один из создателей программы «Более-менее», говорит так: представьте себе двух овец в поле. Сколько в поле овец? Ясное дело, две. Только вот одна овца – не овца, а ягненок. А другая на позднем сроке беременности – точнее, у нее сейчас схватки, и она вот-вот родит. Сколько, значит, овец? Одна? Две? Две с половиной?
...
Вот, например, число 39 773. Это число смертей от огнестрельного оружия в США в 2017 году (это самая актуальная информация от Национального совета по технике безопасности). Это число (или близкое к нему) всплывает всякий раз, когда в новостях пишут о массовой стрельбе, – хотя большая часть этих смертей совершенно никак не связана с этими ужасными событиями...
«Смерть от огнестрельного оружия» – термин вроде бы несложный: вот огнестрельное оружие, а вот смерть, что тут непонятного.
Но точно так же звучит и «овца», так что давайте остановимся и поразмыслим. Даже «2017 год» – понятие не такое простое, как можно подумать. К примеру, в 2016 году в Соединенном королевстве резко выросло число убийств. Произошло это потому, что наконец-то завершилось расследование, в ходе которого было официально вынесено решение, что 96 человек, погибшие в давке на футбольном стадионе «Хиллсборо» в 1989 году, были преступно убиты. Сначала эти смерти рассматривались как следствие несчастного случая, но в 2016 они официально стали считаться убийствами. Это исключительный случай, но задержки между смертью и официальной регистрацией ее причины происходят нередко.
Но главная проблема тут – что именно мы имеем в виду под «смертью». Да, это термин однозначный. Но число «39 773» мы обычно слышим, когда на экране показана вереница машин медиков и полиции, приехавших на место ужасающей бойни. Естественно, что мы связываем это число с убийствами или даже с массовыми убийствами. На самом деле около 60 % смертей от огнестрельного оружия в США – самоубийства, а не убийства и не несчастные случаи
Интересный пример, как перевираются цифры при списывании одним журналистом у другого.
«Oxfam: Состояние 85 самых богатых людей равно состоянию беднейшей половины человечества». Это заголовок из статьи, напечатанной в январе 2014 года в «The Guardian»...
Через три года Oxfam внес поправки в этот анализ – и поправки серьезные: пресловутые 85 миллиардеров превратились в 8 миллиардеров. Что случилось? Неужели проблема неравенства ухудшилась в 10 раз? Или миллиардеры стали в 10 раз богаче? Или бедняки умудрились лишиться девяти десятых своих средств? Нет, не было никакой экономической катастрофы. Оценка Oxfam была совершенно неинформативным, сенсационным способом осмыслить неравенство.
То, как резко изменилось число в заголовке, уже говорит о том, что этот способ осмысления неравенства сообщает нам мало полезной информации. Изумление и экзальтация некоторых репортажей об исследовании – еще один знак того, что это число попросту сбивало людей с толку. И если «The Guardian» верно передала информацию от Oxfam, сообщив, что 85 человек обладали тем же состоянием, что и беднейшая половина мира, то в инфографике «The Independent» сообщалось, что 85 самых богатых людей обладают таким же состоянием, что и все остальные люди на планете, вместе взятые. (В рекламном ролике документального фильма BBC о сверхбогатых была указана та же ошибочная информация.) Это даже близко не стоит от первоначального заявления, хотя, возможно, вы не сразу поймете почему...
«The Independent» и BBC спутали «состояние беднейшей половины населения» и «состояние всех, кто не является миллиардером». Эта ошибка может показаться незначительной, но на деле мы говорим о разнице между менее чем двумя триллионами долларов и более чем 200 триллионами. Из-за того, что журналисты не подумали как следует, что именно сообщают, они допустили стократную ошибку.
Кроме того, «The Independent» подарил нам прекрасный образец неправильной статистики. Газета сообщала, что «85 самых богатых людей – 1 %» имеет столько же средств, что и «все остальные люди на земле – 99 %». Из этого следует, что на планете живет 8500 людей. Если предыдущая ошибка была стократной, то указанное здесь число было почти в миллион раз меньше, чем реальное...
Глупо винить Oxfam, организацию, которая проводит кампании и собирает денежные средства, в том, что она выбирает сенсационные заголовки. И она уж точно не виновата в том, что полученные ею данные журналисты переврали кто во что горазд.
Как всё это знакомо !
Типа "треть израильских детей недоедают", а то и "голодают".
30 лет назад я собирала подобные коллекции и писала похожие инструкции по "защите ушей от лапши".
Однако есть в книжке и другое.
Рассказы о неизвестных героях.
Про тихих незаметных людей, которые шли в "незримый бой" против богатых и власть имущих.
Таких, как Флоренс Найтингель, мать-основательница целой отрасли науки - медицинской статистики.
Что я знала о ней ?
Но она любила мечтать о том, как завидна судьба мисс Найтингель, этой тихой, скромной девушки, о которой никто не знает ничего, о которой нечего знать, кроме того, за что она любимица всей Англии: молода ли она? богата ли она или бедна? счастлива ли она сама или несчастна? об этом никто не говорит, об этом никто не думает, все только благословляют девушку, которая была ангелом-утешителем в английских госпиталях Крыма и Скутари и по окончании войны, вернувшись на родину с сотнями спасенных ею, продолжает заботиться о больных…
Ага, кто угадает, не ходя по линку, откуда это ?
А это - одна из женщин - выдающихся ученых, которых в 19 веке было - по пальцам перечесть.
Кстати, она была знакома с Адой Лавлейс, тоже основательницей новой науки - программирования.
Это я у Вики спросила про нее.
Гордость мирового феминизма.
Ого, сколько уже накатала !
Остановливаюсь.
Напоследок - хорошая цитата для спорщиков:
В следующий раз, когда вы попадете в горячий спор о политике, попробуйте не требовать от противника доказательств своей позиции, а попросите ее объяснить. Он, значит, хочет ввести гарантированный базовый доход, или фиксированный налог, или систему иммиграции, основанную на баллах, или всеобщее медицинское страхование. Как интересно. А что, собственно говоря, он под этим подразумевает? Возможно, в попытках объяснить это ваш противник узнает что-то новое – да и вы, может быть, тоже. И не исключено, что и вы, и он обнаружите, что переоценивали и свои знания, и свои разногласия.
Кстати, я не раз применяла.
Иногда помогает.
Оказывается, я уже читала одну его книжку - "Экономист под прикрытием".
Некоторая информация - на память, чтобы потом найти можно было.
Очень неоднозначное отношение к пионеру "недоверчивого отношения к статистике".
Если вы читали «Как лгать при помощи статистики», вы наверняка пришли к такому выводу. Эту остроумную и циничную книжку выпустил в 1954 малоизвестный тогда американский журналист-фрилансер Дарелл Хафф. The New York Times немедленно написала на нее восторженный отзыв, и с тех пор было продано более миллиона экземпляров этой книги, что, возможно, сделало ее самой популярной книгой по статистике на свете.
Книга заслуживает и славы, и похвалы. Это – настоящее чудо популярной статистики. Среди любителей чисел Дарелл стал легендой. Бен Голдакр, эпидемиолог и автор бестселлера «Обман в науке», восхищается тем, какую «бомбу» написал «брюзга Хафф». Американский писатель Чарльз Уилан говорит, что его книга «Голая статистика» вдохновлена «классической» работой Хаффа. Через 50 лет со дня выхода книги Хаффа известный журнал «Статистическая наука» организовал в его честь ретроспективу.
Я и сам раньше так думал. Подростком я зачитывался книгой «Как лгать при помощи статистики». Эта блестящая, хлесткая, да еще и забавно проиллюстрированная книга позволила мне проникнуть за завесу статистических манипуляций и научила меня распознавать обман.
Хафф использует море примеров.
Скачано, будет прочитано.
Однако
Дарелл Хафф напечатал свою книгу в 1954 году. Но в том же году случилось кое-что другое: британские ученые Ричард Долл и Остин Брэдфорд Хилл выпустили одно из первых убедительных исследований, демонстрирующих, что курение сигарет приводит к раку легких.
Без статистики Долл и Хилл никогда не пришли бы к этому выводу. За 15 лет число случаев рака легких в Соединенном Королевстве выросло в шесть раз. Уже в 1950 году страна лидировала по числу случаев заболеваний, а число смертей от рака легких впервые превысило число смертей от туберкулеза. Статистический подход нужен был уже хотя бы для того, чтобы заметить эти изменения. Доктора-одиночки располагали информацией лишь о единичных случаях.
Статистика была необходима и чтобы доказать, что убивают именно сигареты. Многие тогда полагали, что рак легких возникает из-за автомобилей. В этом была своя логика. В первой половине двадцатого века автомобили стали привычным явлением, а вместе с ними появились и выхлопные газы, и всепроникающий запах новых асфальтовых дорог...
Коллеги начали свое исследование первого января 1948 года...
В октябре 1949 года, меньше чем через два года после начала исследований, Долл бросил курить. Ему было 37, и всю свою взрослую жизнь он был курильщиком. Что же обнаружили Долл и Хилл? Курение не просто удваивает, утраивает или учетверяет риск рака легких. Курение увеличивает этот риск в 16 раз.
Результаты исследования Хилл и Долл опубликовали в сентябре 1950 года и тут же принялись за более масштабное, длительное и амбициозное исследование. Хилл написал каждому врачу в Соединенном королевстве – а было их 59 600 – и попросил заполнить «опросник» касательно здоровья и курения. Рассуждали они так: врачи с легкостью смогут описать, что и когда они курили. Они внесены в медицинский реестр, значит, их всегда можно будет найти без труда. А когда доктор умирает и устанавливают причину его смерти, этой информации точно можно доверять. Доллу и Хиллу просто нужно было немножко подождать.
На призыв Хилла откликнулись более 40 тысяч врачей, но рады ему были далеко не все. Следует понимать, что курение в то время было крайне распространено. Неудивительно, что в первоначальной выборке Долла и Хилла 85 % врачей-мужчин курили. Кому приятно слушать, что ты медленно, но верно ведешь себя к верной гибели – тем более если твой метод самоубийства вызывает такую сильную зависимость?
Однажды на лондонской вечеринке Хилла остановил какой-то сердитый врач и выдал: «Так это вы хотите, чтобы мы бросили курить». «Вовсе нет, – ответил Хилл, который в то время еще курил трубку. – Если вы продолжите курить, мне любопытно знать, как вы умрете. Если бросите курить – мне тоже любопытно, как вы умрете. Так что выбор – курить или не курить – за вами. Мне это безразлично. И так и так все подсчитаю».
Не правда ли, обаятельный парень?
После Дарелла Хаффа многие стали считать статистику всего лишь трюком фокусника: забавно, но и только. Еще задолго до коронавируса я опасался, что такой подход ни к чему хорошему не приведет. Нам больше не кажется, что статистика помогает понять, как устроен мир. Не то что бы мы по умолчанию считаем все статистические данные ложными – но нам кажется, что отделить правду от лжи просто невозможно. Поэтому каждый человек верит в то, во что хочет (об этом еще поговорим в следующей главе), а в остальном мы ведем себя как Хафф: пожимаем плечами или цинично усмехаемся, а то и то и другое сразу.
Это не просто досадный подход – это трагедия. Если мы поверим, что больше неспособны понять, что правда, а что ложь, то потеряем важнейший инструмент. Именно этот инструмент доказал нам, что сигареты смертельно опасны. Этот инструмент – наша единственная надежда найти выход из коронавирусного кризиса, да и вообще понять, как устроен наш непростой мир. Но если мы привыкнем отвергать всякую неприятную нам статистическую информацию, этот инструмент нам не поможет. Конечно, я не призываю к легковерности, но лекарство от легковерности – не отрицание всего вообще, а способность оценить достоверность информации с уверенностью, любознательностью и здоровым скептицизмом...
Мне становилось все более не по себе, когда поклонники нашей радиопрограммы восхищались тем, как мы «разоблачаем статистические мифы». Да, конечно, мы занимались разоблачениями, и это было здорово. Но потихоньку, узнавая все больше и больше, я понял, что самое приятное – не разносить в клочья ложь, а пытаться найти истину.
В ходе работы над «Более-менее» я узнал, что здравый смысл – удивительно надежное подспорье для анализа данных. Главные принципы этого подхода я и опишу в этой книге.
Почти все исследователи и продюсеры, как и я, не учились толком работать с числами. Но даже в узкоспециализированных областях зачастую достаточно было задать ряд простых вопросов и, может быть, воспользоваться поисковиком, чтобы получить интересные результаты. Конечно, в некоторых случаях нам не помешала бы ученая степень по статистике, но задавать правильные вопросы мы могли и без нее. Сможете и вы.
Оптимист, однако.
Но некоторые примеры - действительно поддаются проверке.
Весной 1965 года комитет в Сенате США обсуждал, следует ли печатать предупреждение о вреде курения на пачках сигарет. Это был вопрос жизни и смерти. По мнению квалифицированного эксперта, научные данные вызывали сомнения – и он обратился к истории о детях и аистах. Он объяснил, что между числом новорожденных и числом аистов в данной местности существует прямая корреляция18. Но – продолжил эксперт – старая байка о том, что аисты приносят детей, не становится от этого правдой. Корреляция не означает причинно-следственную связь. Аисты не приносят детей. Чем обширнее местность, тем больше в ней места и для детей, и для аистов. Точно так же корреляция курения и рака легких ни в коем случае не означает, что курение вызывает рак легких.
– Вы и правда думаете, что связывать курение с болезнью так же бессмысленно, как связывать аистов с детьми? – спросил председатель. Эксперт ответил, что да.
А звали его Дарелл Хафф.
Лоббисты-табачники заплатили ему, чтобы он сделал то, в чем был мастер, и он сплел сеть из остроумных примеров, горсточки знаний по статистике и цинизма, чтобы люди сомневались, что сигареты опасны. Он даже работал над продолжением своей знаменитой книги, хотя оно так и не было напечатано. Называлось оно «Как лгать при помощи статистики о курении».
Попробую поискать эту информацию.
Сомнение – мощное оружие, а статистика – уязвимая мишень. Нужно, чтобы кто-то ее защищал. Да, лгать при помощи статистики легко – но еще легче лгать без статистики.
Как сказал тот раввин из анекдота: "И ты тоже права".
Когда говорят об искусстве убеждать, обычно представляют людей, которых хитростью склонили верить в то, во что верить не следует, – и это понятно. Мы обсудим этот вопрос в следующей главе. Но иногда проблема заключается не в том, что мы слишком легковерны, а в том, что мы ничему не верим. Курильщики любили сигареты, были физически зависимы от никотина и хотели всеми правдами и неправдами продолжать курить. Они пожимали плечами и говорили, что не могут разобраться во всей этой бестолковой информации – а производители табака именно этого и ждали. Их задачей было не убедить курильщиков в безвредности сигарет, а посеять сомнения в статистических данных, доказывающих их вред.
Выяснилось, что производить сомнения – проще простого. Лет 20 тому назад психологи Кари Эдвардс и Эдвард Смит провели такой эксперимент: они попросили американцев назвать «за» и «против» проблемных вопросов, таких как: можно ли делать аборт, шлепать ли детей, разрешать ли геям усыновление, какая должна быть квота на представителей меньшинств при приеме на работу и приговаривать ли к смертной казни лиц до 16. Разумеется, опрашиваемые продемонстрировали предвзятость: им сложнее было разработать аргументацию в подтверждение противной им позиции. Но, что более интересно, Эдвардс и Смит показали, что эта предвзятость более очевидна в негативной аргументации. Сомневаться оказалось легче, чем верить. Испытуемым было гораздо легче приводить доводы против не одобряемой ими позиции, чем приводить доводы за позицию, которую они разделяли. В чем сила? В сомнении.
Кроме того, сомнение привлекательно, так как является неотъемлемой частью научных исследований и споров. Всех нас в школе учили – или должны были учить – подвергать данные сомнению. Девиз одного из старейших научных обществ, британского Королевского Общества – nullius in verba, то есть «не верь никому на слово». Группа лоббистов, отрицающая статистические данные, без труда покажет, что тот или иной аспект данной науки не до конца проработан, отметит, что проблема очень, очень запутанная, и призовет ученых продолжить исследования. И все эти заявления покажутся нам научно обоснованными и даже мудрыми, но они создают опасную иллюзию, что на самом деле никто ничего не знает. Методы табачных производителей получили широкое распространение...
Есть известная история про телескоп Галилея: даже когда римско-католическая церковь обвинила отца астрономии в ереси, старшие кардиналы так и не посмотрели в его телескоп, говоря, что все это просто фокусы. Галилео видел на луне горы? Наверняка это было пятнышко на стекле. Он видел спутники Юпитера? Вздор! Они были в самом телескопе. Они даже одним глазом не глянули.
История про подделку картины Вермеера (спросила у Вики, это художник 17 века), которую хитрый ловкач впарил эксперту-коллекционеру Бредиусу.
И никто не узнал БЫ, если БЫ по случаю Ван Мегерен не сознался сам.
Он продал другую подделку под Вермеера ни много ни мало - самому Герингу (во время оккупации Голландии немцами).
После войны Мегерена обвинили в сотрудничестве с оккупантами. А за это можно было и "вышку" получить.
И тогда он рассказал, как обжулил Геринга.
Продемонстрировав свою технологию.
И превратился из предателя в "народного героя".
Но как могли так лопухнуться эксперты ?
Очень хотели верить.
Пааадумаешь, "пилтдаунский череп" !
Картины продавали за миллионы.
У Бредиуса было с полдюжины неочевидных причин полагать, что «Эммаус» был написан Вермеером, и они перевесили очевидное доказательство противного: эта картина на вермееровскую вообще не похожа...
История Абрахама Бредиуса показывает, что эксперты тоже попадаются на удочку мотивированной аргументации. В каких-то случаях их знания могут им только помешать. Как писал французский сатирик Мольер: «Ученый дурак глупее дурака неученого».
Наша эмоциональная реакция на статистическое или научное утверждение – тема отнюдь не второстепенная. Наши эмоции могут влиять на наши убеждения больше любой логики, да так часто и происходит. Мы можем убедить самих себя в удивительных вещах и подвергать сомнению неопровержимые факты, если дело касается наших политических взглядов, привычки пить кофе, нежелания взглянуть в лицо диагнозу ВИЧ-инфекции или любой теории, которая находит в нас эмоциональный отклик.
Но не стоит отчаиваться! Эмоции можно научиться контролировать – это часть процесса взросления. Первым делом надо эти эмоции заметить. Когда вам показывают статистику, обращайте внимание на свою реакцию. Если вы чувствуете гнев, торжество, желание отрицать – остановитесь на минутку, а затем поразмыслите. Не надо быть роботом безо всяких эмоций, но, помимо чувств, не забывайте также и мыслить.
Странности статистики младенческой смертности.
Смертность новорожденных в Соединенном королевстве сильно отличалась от региона к региону. Может, врачи и медсестры могут как-то спасти этих детей? В больницы с низкой смертностью отправили медиков. Их задачей было узнать, какие методы достойны подражания, и подумать, есть ли смысл полностью изменить систему помощи матерям и детям у себя в больницах.
Но доктору Люси Смит из Лестерского университета упорно казалось, что здесь что-то не так. Поэтому она детально изучила данные двух групп больниц: одной в центральных графствах Англии, а другой в Лондоне. ...
Когда беременность прерывается на двенадцатой или тринадцатой неделе, любой врач назовет это выкидышем. Если ребенок родится недоношенным на двадцать четвертой неделе или позже, это, в соответствии с законами Соединенного королевства, должно быть зарегистрировано как рождение. Но если беременность прерывается накануне этого срока, скажем, на двадцать второй или двадцать третьей неделе, не очень понятно, как описать эту ситуацию...
Когда беременность прерывается на двенадцатой или тринадцатой неделе, любой врач назовет это выкидышем. Если ребенок родится недоношенным на двадцать четвертой неделе или позже, это, в соответствии с законами Соединенного королевства, должно быть зарегистрировано как рождение. Но если беременность прерывается накануне этого срока, скажем, на двадцать второй или двадцать третьей неделе, не очень понятно, как описать эту ситуацию. ..
Та же проблема возникает, если сравнивать данные по разным периодам в одной и той же стране. Когда в 2015 и 2016 году в Англии и Уэльсе выросла смертность младенцев, хотя до этого она стабильно снижалась, журналисты стали бить тревогу – что неудивительно. «Медики сообщают, что причинами могут быть ожирение, бедность, курение и недостаток акушерок», – писала газета «The Guardian».
Такая вероятность есть. Но группа врачей в письме «Британскому медицинскому журналу» отметила, что в официальной статистике также отмечается резкий рост живых рождений на 22 неделе беременности и даже раньше. Похоже, что все больше врачей следовали примеру центральных графств и вместо «поздних выкидышей» регистрировали живое рождение, за которым последовала преждевременная смерть. И этого было достаточно, чтобы объяснить рост статистики младенческой смертности.
Оказывается, существует не только "3 пишем, 2 в уме", но и обратное явление: кто-то учитывает "пятимесячных новорожденных", не боясь "испортить статистику".
В США невероятно высокая для такой обеспеченной страны смертность младенцев: в 2010 это была 6,1 смерть на тысячу живорождений. В то же время в Финляндии эта доля составляет всего лишь 2,3. Оказывается, что американские врачи, как и их коллеги в центральных графствах Англии, намного чаще регистрируют беременность, оборвавшуюся на 22 неделе, не как выкидыш, а как живое рождение, за которым последовала ранняя смерть...
Если посмотреть на информацию о рожденных после 24 недели, то статистика по США падает с 6,1 до 4,2 смертей на 1000 живых рождений. В Финляндии же изменение незначительно: с 2,3 до 2,1.
Все равно в США - вдвое больше.
Контингент, однако...
Статистика как дисциплина основана на измерениях и подсчетах. Майкл Бластлэнд, один из создателей программы «Более-менее», говорит так: представьте себе двух овец в поле. Сколько в поле овец? Ясное дело, две. Только вот одна овца – не овца, а ягненок. А другая на позднем сроке беременности – точнее, у нее сейчас схватки, и она вот-вот родит. Сколько, значит, овец? Одна? Две? Две с половиной?
...
Вот, например, число 39 773. Это число смертей от огнестрельного оружия в США в 2017 году (это самая актуальная информация от Национального совета по технике безопасности). Это число (или близкое к нему) всплывает всякий раз, когда в новостях пишут о массовой стрельбе, – хотя большая часть этих смертей совершенно никак не связана с этими ужасными событиями...
«Смерть от огнестрельного оружия» – термин вроде бы несложный: вот огнестрельное оружие, а вот смерть, что тут непонятного.
Но точно так же звучит и «овца», так что давайте остановимся и поразмыслим. Даже «2017 год» – понятие не такое простое, как можно подумать. К примеру, в 2016 году в Соединенном королевстве резко выросло число убийств. Произошло это потому, что наконец-то завершилось расследование, в ходе которого было официально вынесено решение, что 96 человек, погибшие в давке на футбольном стадионе «Хиллсборо» в 1989 году, были преступно убиты. Сначала эти смерти рассматривались как следствие несчастного случая, но в 2016 они официально стали считаться убийствами. Это исключительный случай, но задержки между смертью и официальной регистрацией ее причины происходят нередко.
Но главная проблема тут – что именно мы имеем в виду под «смертью». Да, это термин однозначный. Но число «39 773» мы обычно слышим, когда на экране показана вереница машин медиков и полиции, приехавших на место ужасающей бойни. Естественно, что мы связываем это число с убийствами или даже с массовыми убийствами. На самом деле около 60 % смертей от огнестрельного оружия в США – самоубийства, а не убийства и не несчастные случаи
Интересный пример, как перевираются цифры при списывании одним журналистом у другого.
«Oxfam: Состояние 85 самых богатых людей равно состоянию беднейшей половины человечества». Это заголовок из статьи, напечатанной в январе 2014 года в «The Guardian»...
Через три года Oxfam внес поправки в этот анализ – и поправки серьезные: пресловутые 85 миллиардеров превратились в 8 миллиардеров. Что случилось? Неужели проблема неравенства ухудшилась в 10 раз? Или миллиардеры стали в 10 раз богаче? Или бедняки умудрились лишиться девяти десятых своих средств? Нет, не было никакой экономической катастрофы. Оценка Oxfam была совершенно неинформативным, сенсационным способом осмыслить неравенство.
То, как резко изменилось число в заголовке, уже говорит о том, что этот способ осмысления неравенства сообщает нам мало полезной информации. Изумление и экзальтация некоторых репортажей об исследовании – еще один знак того, что это число попросту сбивало людей с толку. И если «The Guardian» верно передала информацию от Oxfam, сообщив, что 85 человек обладали тем же состоянием, что и беднейшая половина мира, то в инфографике «The Independent» сообщалось, что 85 самых богатых людей обладают таким же состоянием, что и все остальные люди на планете, вместе взятые. (В рекламном ролике документального фильма BBC о сверхбогатых была указана та же ошибочная информация.) Это даже близко не стоит от первоначального заявления, хотя, возможно, вы не сразу поймете почему...
«The Independent» и BBC спутали «состояние беднейшей половины населения» и «состояние всех, кто не является миллиардером». Эта ошибка может показаться незначительной, но на деле мы говорим о разнице между менее чем двумя триллионами долларов и более чем 200 триллионами. Из-за того, что журналисты не подумали как следует, что именно сообщают, они допустили стократную ошибку.
Кроме того, «The Independent» подарил нам прекрасный образец неправильной статистики. Газета сообщала, что «85 самых богатых людей – 1 %» имеет столько же средств, что и «все остальные люди на земле – 99 %». Из этого следует, что на планете живет 8500 людей. Если предыдущая ошибка была стократной, то указанное здесь число было почти в миллион раз меньше, чем реальное...
Глупо винить Oxfam, организацию, которая проводит кампании и собирает денежные средства, в том, что она выбирает сенсационные заголовки. И она уж точно не виновата в том, что полученные ею данные журналисты переврали кто во что горазд.
Как всё это знакомо !
Типа "треть израильских детей недоедают", а то и "голодают".
30 лет назад я собирала подобные коллекции и писала похожие инструкции по "защите ушей от лапши".
Однако есть в книжке и другое.
Рассказы о неизвестных героях.
Про тихих незаметных людей, которые шли в "незримый бой" против богатых и власть имущих.
Таких, как Флоренс Найтингель, мать-основательница целой отрасли науки - медицинской статистики.
Что я знала о ней ?
Но она любила мечтать о том, как завидна судьба мисс Найтингель, этой тихой, скромной девушки, о которой никто не знает ничего, о которой нечего знать, кроме того, за что она любимица всей Англии: молода ли она? богата ли она или бедна? счастлива ли она сама или несчастна? об этом никто не говорит, об этом никто не думает, все только благословляют девушку, которая была ангелом-утешителем в английских госпиталях Крыма и Скутари и по окончании войны, вернувшись на родину с сотнями спасенных ею, продолжает заботиться о больных…
Ага, кто угадает, не ходя по линку, откуда это ?
А это - одна из женщин - выдающихся ученых, которых в 19 веке было - по пальцам перечесть.
Кстати, она была знакома с Адой Лавлейс, тоже основательницей новой науки - программирования.
Это я у Вики спросила про нее.
Гордость мирового феминизма.
Ого, сколько уже накатала !
Остановливаюсь.
Напоследок - хорошая цитата для спорщиков:
В следующий раз, когда вы попадете в горячий спор о политике, попробуйте не требовать от противника доказательств своей позиции, а попросите ее объяснить. Он, значит, хочет ввести гарантированный базовый доход, или фиксированный налог, или систему иммиграции, основанную на баллах, или всеобщее медицинское страхование. Как интересно. А что, собственно говоря, он под этим подразумевает? Возможно, в попытках объяснить это ваш противник узнает что-то новое – да и вы, может быть, тоже. И не исключено, что и вы, и он обнаружите, что переоценивали и свои знания, и свои разногласия.
Кстати, я не раз применяла.
Иногда помогает.
