Инструмент. Опирается на чтение исследований и причинную цепь.
Фактов о здоровье слишком много, чтобы их запомнить, и они устаревают. Метод проверки устаревает медленнее — и работает с утверждениями, которых вы никогда не видели.
Здесь он изложен по шагам. Все примеры — из разборов, сделанных в этой книге.
Устройство типичного неверного текста
Сначала о том, что мы ищем. Убедительный неверный текст почти никогда не состоит из выдумок.
Он собран из настоящих кирпичей: реальных фактов, реальных исследований, реальных имён. Ломается он в соединениях.
В таком тексте установленный факт, правдоподобная догадка и опровергнутое утверждение поданы одним голосом, с одной интонацией уверенности.
Читатель не может их различить — потому что автор их не разделил. Именно поэтому в этой книге на каждом утверждении стоят плашки уверенности и доказательности. Это не украшение, а защита от того самого приёма.
Шаг 1. Найти несущую цитату
У любого построения есть одно звено, без которого рушится всё остальное. Найти его — половина работы.
Приём простой: спросить себя, что должно быть правдой, чтобы весь текст имел смысл. Обычно это одно механистическое утверждение, а не итоговый совет.
В разборе про йод и бром вся конструкция держалась на утверждении, что фермент щитовидной железы собирает гормон из брома. Всё остальное — следствия. Прямая проверка показала, что этот фермент бром как субстрат не использует вообще. факт in vitro
Балка выбита — держаться нечему, независимо от того, сколько верных фактов лежит рядом.
Шаг 2. Проверить внутреннюю связность
Часть проверок делается вообще без литературы, и это самый дешёвый шаг.
Тот же разбор: утверждалось, что гормон получается нерабочим, а анализы при этом в норме. Но если гормон не работает, обратная связь не срабатывает, и управляющий гормон гипофиза обязан вырасти — как разобрано в контуре. «Анализы в норме» внутри этой же модели невозможны.
Ищите такие места: текст, противоречащий сам себе, не нуждается во внешнем опровержении.
Шаг 3. Проверить масштаб
Механизм может существовать, но работать при дозах, к жизни отношения не имеющих.
В том же примере: порог симптомов бромного отравления — около 500 мг/л в крови, обычный уровень у человека 3–5 мг/л. Разрыв примерно стократный, и бытовая экспозиция его не закрывает.
Отсюда общее правило: «вещество Х вредно» — не утверждение, пока не названа доза. Вредно всё, вопрос в количестве.
Шаг 4. Проверить арифметику
Тут работают три вопроса со страницы о чтении исследований: с какой величины до какой, цифру мерили или событие, на ком и сколько времени.
Отдельно проверяйте единицы. В разобранном тексте рекомендация звучала как «10–13 микрограммов», хотя по смыслу и по устройству препарата речь шла о миллиграммах — расхождение в тысячу раз. Такие ошибки видны из внутренней арифметики самого текста, если её проделать.
Шаг 5. Проверить источники — и на кого они ссылаются
Самый интересный шаг, и он часто даёт неожиданное.
В разборе про йод авторитетами были названы два конкретных исследователя. При проверке выяснилось, что единственная рецензируемая работа о японском потреблении йода прямо называет их источником завышенных оценок — тех самых, на которых стоял весь аргумент. факт обзор
Плюс обнаружилось, что один из них основал компанию, производящую именно тот препарат, который его протокол предписывает. Это не делает утверждение ложным автоматически — но это надо знать.
Есть ли он вообще. Ссылка на «исследования показали» без указания — не источник.
Говорит ли он то, что ему приписывают. Расхождение встречается чаще, чем кажется, и проверяется за минуту.
Какая это ступень. Опыт на клетках, поданный как основание для практического совета, — типичная подмена.
Что продаёт автор. Совпадение рекомендации с ассортиментом — не преступление, но контекст.
Шаг 6. Посмотреть на структуру самого текста
Признаки, которые не доказывают неправоту, но заметно повышают её вероятность.
| Признак | Почему настораживает |
|---|---|
| Нет ни одного «не знаю» | в любой реальной теме есть неизвестное; его отсутствие — признак отбора фактов |
| Одна причина для многих болезней | «всё от закисления», «всё от паразитов» — тело так не устроено |
| Заранее объяснено, почему врачи против | непроверяемая защита, встроенная в утверждение до возражений |
| Титровать до появления симптомов | убирает единственную обратную связь и объявляет ухудшение успехом |
| Любой исход подтверждает теорию | непроверяемое утверждение ничего не сообщает о мире |
Последний пункт стоит распознавать особенно. «Стало лучше — работает; стало хуже — это очищение, продолжайте» — конструкция, которая не может быть опровергнута, а значит и не может быть проверена.
Шаг 7. Спросить, что утверждение предсказывает
Предыдущий шаг отсеивает то, что проверить нельзя. Этот работает с тем, что проверить можно, — и он самый быстрый из всех, потому что не требует ни литературы, ни специальных знаний.
Приём: развернуть утверждение вперёд. Если оно верно — что должно было случиться в мире? А теперь посмотреть, случилось ли.
Утверждение: медицине выгодно, чтобы люди болели, — потому здоровыми нас делать не станут.
Разворачиваем. Если верно, то, во-первых, лекарств, вылечивающих массовую болезнь насовсем, появляться не должно. Во-вторых, если такое всё же появится, изобретатель должен разбогатеть.
Смотрим. Средство, вылечивающее гепатит C за два месяца, появилось в 2013 году — первое предсказание не сбылось. Фирма, его выпустившая, за следующие годы потеряла треть выручки, и в отчёте прямо названа причина: пациентов стало меньше — второе тоже. Разобрано на странице о вирусах.
Ценность шага в том, что он не требует спорить о мотивах. Мотивы непроверяемы, а следствия проверяемы — и когда следствия не подтверждаются дважды подряд, спор о мотивах теряет смысл.
Работает он в обе стороны, и это важно. Если ваше собственное убеждение не предсказывает ничего, что можно было бы пойти и проверить, — оно того же качества, что и разбираемое.
Особый случай: «это замалчивают»
Отдельный разбор заслуживает довод, который встречается в каждой горячей теме и устроен хитрее прочих: доказательств нет, потому что их скрывают.
Хитрость в том, что он питается собственным опровержением. Нашли вред — значит правда. Не нашли — значит скрыли. Любой исход подтверждает довод, а по шестому шагу это и есть признак утверждения, которое ничего не сообщает о мире.
Но отмахиваться нельзя, и вот почему: замалчивание бывает настоящим. Данные о сердечных рисках рофекоксиба придерживали годами: редакция журнала, напечатавшего то исследование, пять лет спустя официально заявила, что часть случаев инфаркта, известных авторам до публикации, в статью не попала. факт
Второй случай — «Исследование 329» по пароксетину у подростков. Когда работу разобрали заново по исходным данным, выяснилось, что препарат не оказался эффективным ни по одному заранее заявленному показателю, а число серьёзных нежелательных явлений в публикации было занижено. факт РКИ
Оба случая доказаны, оба разбирались в судах.
Рофекоксиб и «Исследование 329» — это чьи-то решения, за которые судили. Но гораздо больше данных исчезает без всякого умысла, и это измерено.
Взяли реестр FDA, куда испытания подают заранее, до того как известен исход. 74 испытания антидепрессантов. Не опубликован 31% — и почти все неопубликованные оказались отрицательными: из них 22 не вышли вовсе, ещё 11 вышли в изложении, создающем впечатление успеха. По литературе выходило, что положительны 94% испытаний; по реестру — около половины. факт обзор
Никто ничего не прятал специально: авторы отрицательных результатов реже берутся их дописывать, журналы реже их берут. Это называется публикационным смещением и разобрано на соседней странице.
Вывод для нашего спора получается обоюдоострый, и обе стороны им обычно недовольны. Тому, кто говорит «замалчивают», приходится признать: да, картина в литературе смещена — но не в ту сторону, о которой он думает, и не по сговору. Тому, кто отвечает «всё публикуется», приходится признать, что это просто неправда.
Значит вопрос не «бывает ли», а как отличить обыденное смещение от направленного сокрытия. Способ тот же, что в седьмом шаге: спросить, что довод предсказывает.
| Если замалчивание работает, мы не увидим | Что видно на деле |
|---|---|
| признаний вреда от самого надзора | система измерила и опубликовала собственную слепоту: она ловит от 12 до 76% даже тяжёлых событий факт когорта |
| отозванных продуктов | ротавирусную вакцину отозвали в течение года после лицензирования |
| выплаченных компенсаций | за нарколепсию после противогриппозной вакцины 2009 года компенсации выплачены |
| работающих в науке несогласных | исследователи, публикующие о вреде адъювантов, восемнадцать лет в университете и продолжают публиковаться; отозванные работы выходили заново |
Четыре предсказания, четыре промаха. Это не доказывает, что скрывать нечего, — это показывает, что механизм сокрытия, которым объясняют отсутствие данных, не работает так, как ему приписывают.
Рассказ ходит с 2015 года: группа врачей обнаружила, что в вакцины намеренно введён фермент нагалаза, вызывающий рак, — и все они погибли при странных обстоятельствах.
Шаг первый — несущее утверждение. Оно про фермент. Смотрим, что это: альфа-N-ацетилгалактозаминидаза, собственный человеческий фермент, лизосомный, кодируется геном NAGA. Он есть у каждого в каждой клетке. Его нехватка — это болезнь, наследственная, с именем: болезнь Шиндлера. факт обзор
То есть вещество, которое «подмешивают, чтобы вызвать рак», организм производит сам, и без него человек болен. Балка выбита на первом шаге.
Шаг пятый — открыть источники. Работы, на которых стоит вся конструкция, отозваны: три уведомления об отзыве подряд, в трёх разных журналах. Причина в одном из них — нарушения в документах об одобрении этического комитета. факт
И смерти. Достаточно прочитать сам рассказ до конца: двое погибших — мануальные терапевты, один — отставной окулист, пропавший на прогулке в горах, ещё одна убита — дело раскрыто, её убийство заказал муж ради страховки. Исследователем вакцин не был ни один. Причины смерти перечислены в тех же публикациях, которые называют их загадочными.
В мае 2020 года в Питтсбурге застрелили учёного. Рядом нашли мёртвым второго человека — самоубийство. Заголовки: «убит вирусолог, который был близок к разгадке коронавируса».
Проверяем несущее слово — «вирусолог». Погибший был Research Assistant Professor вычислительной и системной биологии. С вирусом в лаборатории он не работал; он писал компьютерные модели. Его работы по коронавирусу — симулятор заражения ткани и перебор уже существующих лекарств на пригодность. Это не расшифровка вируса и не поиск его происхождения.
Проверяем предсказание. Если убивали, чтобы остановить работу, — работа не должна была выйти. Она вышла: в 2021 году, в рецензируемом журнале, коллеги дописали и опубликовали её с его фамилией в списке авторов. факт обзор
Полиция установила личный конфликт. Загадочность держалась целиком на одном подменённом слове: «вирусолог» и «вычислительный биолог» — разные люди, и первый существовал только в заголовке.
Услышав «замалчивают», легко ответить «значит всё в порядке». Это такая же непроверяемая позиция, только с другого конца.
Правильный ответ — третий: назвать, чем именно меряли. Довод «причину смерти всё равно запишут другую» верен для систем, где врач должен приписать причину. Он перестаёт работать там, где сравнивают целые группы по сплошным записям или где человека сравнивают с ним же самим до и после. В таких работах, чтобы вред нашёлся, не нужно ничьего согласия его признать.
«Кто говорит» — не ответ на «верно ли»
Приём, который в горячих темах встречается чаще любого другого: вместо утверждения разбирают того, кто его произнёс.
Он ходовой в обе стороны, и обе выглядят одинаково:
— Вы так говорите, потому что вам платит фарма.
— Вы так говорите, потому что вы расист.
Ни одно из этих предложений не содержит сведений о предмете спора. Оба говорят о говорящем.
И тем не менее мотив знать надо. Эта книга сама указывает, когда автор рекомендации продаёт то, что рекомендует: у Гая Абрахама, чей йодный протокол — это дозировка его собственного товара; у врача, который ссылается на отозванную работу и торгует своим методом лечения. Указывает намеренно.
Разница вот в чём. Мотив — это указание, где искать, а не приговор.
| Что даёт найденный мотив | Чего он не даёт |
|---|---|
| причину проверять внимательнее обычного | ответа, верно утверждение или нет |
| подсказку, где вероятнее подвох: в отборе данных, в дозе, в том, с чем сравнивали | права пропустить проверку |
| основание требовать раскрытия связей | основание объявить сказанное ложью |
Проверка простая. Уберите человека целиком. Останутся утверждение и данные. Оно стоит или падает?
Если падает — говорить о мотивах не было нужды: хватило бы разбора. Если стоит — мотив его не опрокинет, кем бы автор ни был.
У автора работы 1998 года, с которой началась тема прививок и аутизма, были четыреста тысяч фунтов от юристов, судившихся с производителями, и патент на конкурирующую вакцину. Но работу похоронило не это, а подделанные данные, которые проверили отдельно. Мотив подсказал, куда смотреть. Опровергла проверка.
Особый случай: верно, но не потому
Самый трудный для распознавания вариант — и не самый безобидный.
В разборе «закисления организма» совет есть больше овощей верен. Обоснование — что они «ощелачивают кровь» — неверно: контролируемое измерение показало сдвиг крови на 0,014 единицы при сдвиге мочи на 1,02. факт РКИ
Почему это не безобидно: от неверного обоснования человек делает следующий шаг. Покупает воду с pH, потом ионизатор, а иногда отказывается от настоящего лечения — потому что поверил в механизм, а не в совет.
Проверять надо и то, и другое отдельно: верен ли совет и верно ли объяснение. Это разные вопросы, и они часто расходятся.
И обратная сторона метода
Скепсис без границ так же бесполезен, как доверчивость.
Есть утверждения, выдерживающие любую проверку: причинная роль ЛПНП, вред курения, польза вакцинации, обратимость раннего диабета при снижении веса. Отвергать их «на всякий случай» — не критическое мышление, а его имитация.
Не отвергать, а сортировать. Разложить утверждения по ступеням: вот твёрдое, вот правдоподобное, вот неизвестное, вот опровергнутое.
Тот, кто верит всему, и тот, кто не верит ничему, одинаково беспомощны перед новым утверждением. Работает только различение.
Короткая версия
- Что должно быть правдой, чтобы всё это имело смысл? Это и есть несущая цитата — проверьте её первой.
- Не противоречит ли текст сам себе? Бесплатная проверка.
- Какие дозы и какой разрыв с реальными?
- С какой величины до какой, цифра или событие?
- Существует ли источник и говорит ли он это?
- Есть ли в тексте хоть одно «неизвестно»?
- Может ли это в принципе оказаться неверным? Если нет — это не утверждение о мире.
- Что это предсказывает — и случилось ли оно? Спор о мотивах непроверяем, о следствиях — проверяем.
- Уберите автора — утверждение устоит? Мотив показывает, где искать подвох, но проверку не заменяет.
- Если говорят «это замалчивают» — что именно должно было бы не найтись? И помните, что данные теряются и без всякого умысла: это измерено.
- Совет и обоснование верны по отдельности? Верный совет с неверным объяснением ведёт к следующему шагу, который будет уже неверным.
Куда идти дальше
- Как читать исследования — что делать с найденной работой
- Причинная цепь — главный вопрос к любому утверждению
- Как читать про лекарства — отдельный набор ловушек
- Галогены — метод, применённый к живому мифу целиком
Страница объясняет способ проверки. Она не ставит диагнозов и не назначает лечения.
Источники
- Curfman GD, Morrissey S, Drazen JM. N Engl J Med 2005;353:2813Заявление редакции: часть случаев инфаркта, известных авторам до публикации, в статье не показали.
- Le Noury J et al. BMJ 2015;351:h4320Переразбор по исходным данным: эффективности нет ни по одному заранее заявленному показателю, вред занижен.
- Schindler D et al. N Engl J Med 1989;320:1735Первоописание болезни Шиндлера: нехватка того самого фермента, который в мифе изображён вводимым ядом.
- J Med Virol 2014;86:1272 · уведомление об отзывеОдно из трёх уведомлений об отзыве работ этой серии. Остальные два — Cancer Immunol Immunother 2008 и Int J Cancer 2008.
- Chen F et al. Mol Syst Biol 2021;17:e10239Работа, дописанная коллегами и вышедшая с фамилией Liu B в авторах. Перебор существующих лекарств, не вирусология.
- Miller ER et al. Vaccine 2020;38:7458Измеренное занижение: система ловит 12–76% даже тяжёлых событий. Опубликовано теми, кто её и ведёт.
- Taurog A, Dorris ML. Arch Biochem Biophys 1991 · PMID 1898006Несущая цитата, на проверке которой рухнул разобранный миф.
- Zava TT, Zava DT. Thyroid Res 2011;4:14Пример источника, опровергающего тех, на кого сам же ссылается миф.
- Sainani KL. PM&R 2012Арифметическая часть проверки.