Подлог в кохреньовском CD003177

«Английские учёные доказали, что люди

падают с велосипедов потому,

что теряют равновесие»

I. Shah, «The Natives are Restless»,

Octagon Press, 1987.

Все мы знакомы с низкопробными постановками британской прессы в стиле Novichok™, “доклад Макларена” и.т. п. Рациональными объяснениями подобного рода девиантных проявлений может быть как первое место Великобритании в ЕС по потреблению т.н. “лёгких наркотиков” (кокаина и др.), так и более зловещие фантомные угрозы. Для специалистов по анализу данных может быть крайне интересно узнать, что подобного рода постановки проводятся британскими-поддаными-учёными и в совершенно других областях человеческой деятельности – например, в доказательной медицине, заставляя нас опять и опять вспоминать незабвенный труд Эразма Роттердамского….

Детальный экспертный анализ всего лишь одной из  дешёвых постановок такого рода представлен коллективом российских исследователей [1, 2]. Вкратце, практический кардиолог знает из собственного опыта, что назначение стандартизированных препаратов омега-3 полиненасыщенных жирных кислот (ПНЖК) является эффективным и уж точно безопасным способом продления жизни пациентам с ишемической болезнью сердца (ИБС). Омега-3 ПНЖК, по сути, являются альтернативой дорогущим  и низкоэффективным “химическим” препаратам, которыми,  буквально, отравляют печень пациентов с ИБС. Укрепление недорогих и эффективных омега-3 ПНЖК на рынке сердечнососудистых препаратов не могло просто так оставить в покое определенные коммерческие интересы неких англо-саксонских фармацевтических магнатов-производителей химической отравы. И, voila, следует заказ британским спецслужбам учёным – “порвать в клочья” омега-3 ПНЖК…

Британские ученые подходят к заказу ответственно и производят текстовый продукт с кодовым названием CD003177: 743 страницы, проанализировано более 100 т.н. “исходов” применения омега-3 ПНЖК, представлена подробная аннотация исследований итп – прям-таки не мета-анализ, а памятник перфекционизму. Однако, более детальное изучение текста публикации CD003177 позволяет утверждать не только то, что данная публикация предназначена скорее для создания скандала, чем для содержательного чтения врачами. Текстовый продукт CD003177 содержит многочисленные неточности и грубые ошибки, уже не говоря об откровенно манипулятивном характере изложения материала в данной “кохреньовской” публикации.

В отличие деструктивных британских ученых, российские исследователи, используя  метрические методы анализа больших данных, показали, что авторы публикации CD003177 включили в проведенные ими мета-анализы исследования, которые  крайне неоднородны с клинической точки зрения (Рис. 1) [2]. И наоборот, мета-анализ 19 клинически однородных исследований (n=64771), выделенных, опять же, с использованием технологий анализа больших данных, указал на достоверное снижение смертности от всех причин на 5% на каждые 1 г/сут ЭПК+ДГК (ОР 0.95, 95% ДИ 0.91…1.01, Р=0.0542). Преимущества такого мета-анализа по сравнению с текстовым продуктом CD003177 очевидны:

  • более точный учет клинических особенностей когорт пациентов, которые берутся в мета-анализ;
  • учет фундаментальных основ фармакологии омега-3 ПНЖК;
  • использование высокочувствительных методов интеллектуального анализа данных, позволивших выделить выборку клинически-однородных исследований как наиболее вероятный кластер в соответствующем метрическом пространстве.

Рис. 1. Результаты метрического анализа однородности клинических исследований, “сваленных в кучу” (англ. piled up) в текстовом продукте CD003177.

Что ещё более интересно, так это результаты применения комбинаторных методов сентимент-анализа (т.е. компьютерного анализа тональности текстов) к тексту CD003177 и ко всей выборке публикаций авторов публикации CD003177 (всего, 297 кохрейновских публикаций, см. Таблицу 1 в источнике [1]). Сентимент-анализ показал весьма характерные отличия в лексиконе авторов текста CD003177 по сравнению с контрольной выборкой публикаций (случайная выборка из 297 мета-анализов, см. Рис. 2). Например, результаты сентимент-анализа показали, что для публикаций авторов CD003177 характерны статистически достоверно избыточное употребление:

  • манипулятивных оборотов речи, обозначаемые англоязычными  терминами “spin words” (“слова для накручивания”) или “weasel words” (дословно, “хорьковые слова” [3]), т.е. слова для таргетного воздействия на сознание читателя:  «относительно плохой», «немного более», «предположительно», «маловероятно», «с высокой степенью вероятности» – знаменитое англ. «highly likely» и др.),
  • оборотов речи, соответствующих негативному результату («не было достоверных», «нет эффекта от», «нет различий в», «не имеет значения» и др.),
  • идеологизированных оборотов речи («по крайней мере, мы», «мы должны», «от каждого по»,  «каждому по», «гораздо более чем», «может действовать на», «как мы можем видеть», «и т.д. и т.п.» и др.),
  • негативных сентиментов, отражающих негативную эмоциональную тональность авторских текстов («не представляет особого интереса», «чтобы достоверно оценить», «критическая оценка исследований», «плохо (сделано)» – англ. «poorly», «недостаток (в)» – англ.  «lack of», «несмотря на … всё же нет оснований» и др.).

Рис. 2. Результаты сентимент-анализа 297 кохрейновских публикаций авторов мета-анализа CD003177. Приведены средние значения частот соответствующих языковых конструкций. Достоверность каждой пары различий оценивалась тестом Колмогорова-Смирнова (P<104).

Таким образом, рассмотрение “доказательной” публикации CD003177 с использованием инструментария для анализа больших данных показало, что тоталитарный диктат адептов доказательной медицины, позволяющий репрессировать омега-3 ПНЖК или любые другие микронутриенты как «ненужные», основан на чисто пропагандистских приёмах жёлтой британской прессы, примитивной “логике” для дегенератов и на безграмотном использовании простейших методов статистического анализа, а не на какой-либо физической реальности.

Публикация CD003177 имела достаточно широкий медийный импакт, т.к. позиционировалась как наиболее “современное”, “обширное” и “систематическое” исследование эффектов омега-3 ПНЖК. Более того, данная публикация (CD003177) позиционировалась как часть работы ВОЗ (!) над пересмотром необходимости использования препаратов омега-3 ПНЖК в повсеместной клинической практике (“WHO Health Organization nutrition guidance expert advisory group Subgroup on Diet and Health requested and funded the update and extension of this review…”). Поэтому, если столь уважаемая организация как ВОЗ вдруг станет всерьёз принимать во внимание данные тех или иных подтасованных мета-анализов, это тоже вызовет шквал вполне определенных вопросов относительно профессионального статуса и ориентации определённых экспертов ВОЗ. Наподобие вопросов российских спортсменов к международному олимпийскому комитету, на которые так и не было получено никакого внятного ответа…

Литература

  1. И.Ю. Торшин, О.А. Громова, Ж.Д. Кобалава «Об ошибках метаанализов сердечно-сосудистых эффектов омега-3 ПНЖК. Часть 1. Фармакологические и клинические аспекты доказательности в эпоху постгеномных исследований, искусственного интеллекта и анализа больших данных» // Эффективная фармакотерапия. 2019. Т. 15. Вып. 9. Кардиология и ангиология. № 1. С. 26–34. DOI 10.33978/2307-3586-2019-15-9-26-34
  2. И.Ю. Торшин, О.А. Громова, Ж.Д. Кобалава «Об ошибках метаанализов сердечно-сосудистых эффектов омега-3 ПНЖК. Часть 2. Интеллектуальный анализ данных и метаанализ клинически однородных исследований» // Эффективная фармакотерапия. 2019. Т. 15. Вып. 9. Кардиология и ангиология. № 1. С. 36–43. DOI 10.33978/2307-3586-2019-15-9-36-43
  3. Watson  D. Watson’s Dictionary of Weasel Words, Contemporary Cliches, Cant and Management Jargon. Knopf, 1st Ed. 2004, ISBN-10: 1740513215, ISBN-13: 978-1740513210, 357 pp.