Обман в науке - читать онлайн книгу. Автор: Бен Голдакр cтр.№ 54

Конечно, еще один трюк с побочными эффектами — это просто не спрашивать о них или, — поскольку вам приходится изворачиваться, — спрашивать осторожно. Вот вам пример. Антидепрессанты СИОЗС довольно часто вызывают побочные эффекты в сексуальной сфере, включая аноргазмию. Следует внести абсолютную ясность (я постараюсь сформулировать это как можно нейтральнее): мне нравится ощущение оргазма. Оно для меня важно, и весь мой опыт подсказывает, что это ощущение важно и для других людей. Ради этого ведутся настоящие войны. Некоторые психологи-эволюционисты даже будут пытаться убедить вас, что вся человеческая культура и язык управляются в значительной степени стремлением к достижению оргазма. Утрата этого ощущения кажется важным побочным эффектом, о котором стоит спрашивать.

Однако различные исследования показали, что сообщенная частота аноргазмии у пациентов, принимающих СИОЗС, варьирует от 2 до 73 %, в зависимости от того, как вы спрашиваете: случайный, заданный мимоходом вопрос о побочных эффектах или тщательный, подробный опрос. В одном исследовании СИОЗС, включавшем 3000 пациентов, побочные эффекты в сексуальной сфере даже не были включены в таблицу побочных эффектов из 23 пунктов. Двадцать три другие вещи были более важными, по мнению исследователей, чем потеря ощущения оргазма. Я прочитал этот список. По-моему, нет.

Но вернемся к основным результатам. Вот еще один трюк: вместо реальных результатов, таких как смерть или боль, вы можете использовать суррогатные, которые получить гораздо легче. Если ваше лекарство должно снижать уровень холестерина в крови и предотвращать смерть от сердечных приступов, не отмечайте случаи смерти от сердечных приступов, измеряйте только уровень холестерина: снижения его достигнуть гораздо легче, чем снижения смертности от сердечных болезней, а испытание будет дешевле и быстрее, и результат, соответственно, будет дешевле и положительнее. Результат!

Допустим, что вы провели свое испытание, и, несмотря на все ваши усилия, результат отрицательный. Что можно сделать? Если ваши испытания были хорошо проведены, но дали некоторые отрицательные результаты, можете попробовать старый фокус: не привлекайте внимание к разочаровывающим данным, рисуя графики. Упомяните об этом кратко в тексте и проигнорируйте, когда будете делать выводы. (Мне самому это отлично удается. Это результат того, что я много читаю о подобных испытаниях.)

Если ваши результаты целиком отрицательные, не публикуйте их совсем или публикуйте много времени спустя. Это именно то, что было сделано с результатами испытаний СИОЗС: они скрыли данные, предполагая, что это может быть опасно, и умолчали о том, что эти лекарства действуют не лучше, чем плацебо. Если вы действительно умный и у вас есть деньги, которых вам не жалко, то после получения разочаровывающих данных вы можете провести еще испытания с тем же протоколом, в надежде, что результаты будут положительными, затем попытаться свести данные вместе, так что ваши отрицательные результаты будут поглощены какими-нибудь посредственными положительными.

Или вы можете стать серьезным или начать манипулировать статистикой. Только на следующие две страницы эта книга станет несколько занудной. Я пойму, если вы захотите пропустить их.

Но знайте, что эта информация здесь для врачей, которые купили эту книгу, чтобы посмеяться над гомеопатами. Вот вам классические трюки со статистическим анализом, чтобы обеспечить положительные результаты ваших испытаний.

Полностью игнорируйте протокол

Всегда допускайте, что любая зависимость доказывает причинную связь. Внесите все ваши данные в программу и сообщайте — как о чем-то важном — о любой взаимосвязи между всем чем угодно, если это работает на вас. Если вы измерите все, то что-то, несомненно, окажется положительным, просто благодаря случаю.

Манипулируйте с линией отсчета

Иногда, когда вы начинаете испытания, группа, получающая лечение, уже чувствует себя лучше, чем группа плацебо. Если это так, то оставьте все как есть. Если, с другой стороны, плацебо- группа чувствует себя лучше в начале испытаний, подправьте линию отсчета в вашем анализе.

Игнорируйте выбывших

Люди, которые выбывают из испытаний, с точки зрения статистики, скорее всего, чувствуют себя хуже, и у них, вероятно, наблюдаются побочные эффекты. Они только испортят имидж вашего лекарства. Поэтому игнорируйте их, не пытайтесь их вернуть и не включайте в ваш окончательный анализ.

Подчистите данные

Посмотрите на ваши графики. Там наверняка найдутся аномалии, или точки, которые располагаются далеко от остальных. Если они не в вашу пользу, исключите их. Если они помогают поддержать имидж вашего лекарства, оставьте их на месте, даже если это выглядит неправдоподобно.

Пять… нет, семь… нет, девять!

Если разница между вашим лекарством и плацебо становится значительной через четыре с половиной месяца, а испытание запланировано на шесть, прекратите испытание досрочно и зафиксируйте результаты: они могут стать менее впечатляющими, если вы продолжите. И наоборот, если через шесть месяцев результаты будут «почти положительными», продолжите испытания еще на три месяца.

«Помучайте» данные

Если результаты совсем плохи, попробуйте вернуться назад и посмотреть: может быть, в какой-нибудь подгруппе они другие. Вдруг вы обнаружите, что лекарство хорошо работает на китайских женщинах в возрасте от 52 до 61 года? «Помучайте данные, и они во всем сознаются», — как говорят в тюрьме Гуантанамо.

Понажимайте все кнопки на компьютере

Если вы в отчаянии, и анализ данных тем способом, который вы планировали, не дает нужных вам результатов, попробуйте другие статистические анализы, даже если они сюда совершенно не подходят, просто наугад.

И когда вы закончили, самое главное — это напечатать ваши результаты с умом. Если испытания удались, смело печатайтесь в самом крупном журнале, какой только сможете найти. Если результаты положительные, но вы слегка слукавили и это может выйти наружу, тогда печатайте их в малоизвестном журнале (который пишется и издается исключительно промышленностью): помните, что все уловки, которые мы только что описали, ничего не скрывают, и станут явными для любого, кто прочитает вашу статью, но только при внимательном чтении, поэтому в ваших интересах, чтобы никто не читал дальше введения. И наконец, если ваши результаты действительно смущают, спрячьте их подальше и ссылайтесь на них как на «данные в файле». Никто не будет знать ваши методы, и их заметят, только если кто-нибудь начнет их искать для систематического обзора. Остается надеяться, что это произойдет нескоро.

Как это возможно?

Когда я объясняю эти манипуляции с результатами своим друзьям, которые не являются медиками или учеными, они очень удивляются. «Как же это возможно?» — спрашивают они. Во-первых, многие плохие исследования объясняются некомпетентностью. Но многие методологические ошибки, описанные выше, представляют собой намеренный обман. Можно ли разоблачить грязную игру?