Бен Голдакр - Обман в науке
Далее, вы можете сравнивать свое лекарство с бесполезным контрольным. Многие люди скажут, что вы не должны сравнивать лекарство с плацебо, потому что это не доказывает его клинической ценности. В реальном мире никого не интересует, лучше ли ваше лекарство, чем сахарная пилюля; их больше интересует, лучше ли оно, чем существующее лечение. Но вы уже потратили несколько миллионов долларов на то, чтобы произвести это лекарство, поэтому нужно делать следующее: множество испытаний с плацебо-группой и побольше шума по этому поводу, поскольку положительный результат практически гарантирован. И снова это применяется повсеместно, так как все лекарства можно сравнивать с плацебо на какой-то стадии, и люди, нанятые фармкомпаниями, чтобы дурить врачей (многие просто отказываются их посещать), с удовольствием сообщат о бесспорном успехе этих испытаний.
Дальше все становится интереснее. Если вы хотите сравнить ваше лекарство с другим, производимым фирмой-конкурентом, — чтобы сохранить лицо или потому что так требуют контролирующие организации, — можете попробовать хитрый трюк: используйте неадекватную дозу конкурирующего лекарства, так что пациенты, принимающие его, не будут чувствовать себя очень хорошо, или дайте слишком большую дозу конкурирующего лекарства, и у пациентов будет больше побочных эффектов, или давайте конкурирующее лекарство недолжным образом (перорально, когда оно обычно дается внутривенно — может, опять- таки не заметят), или увеличивайте дозу конкурента слишком быстро, тогда побочные эффекты будут сильнее. На этом фоне ваше лекарство засияет.
Вы можете подумать, что такие вещи в реальности не происходят. Если вы посмотрите примечания в конце книги, вы найдете исследования, где пациентам давали слишком высокие дозы устаревшего антипсихотического препарата (что дало возможность лекарствам нового поколения выглядеть лучше в смысле побочных эффектов), или исследования дозировки антидепрессантов СИОЗС, которые некоторым могли показаться необычными, — это только два примера. Я знаю, что это звучит слегка неправдоподобно.
Конечно, еще один трюк с побочными эффектами — это просто не спрашивать о них или, — поскольку вам приходится изворачиваться, — спрашивать осторожно. Вот вам пример. Антидепрессанты СИОЗС довольно часто вызывают побочные эффекты в сексуальной сфере, включая аноргазмию. Следует внести абсолютную ясность (я постараюсь сформулировать это как можно нейтральнее): мне нравится ощущение оргазма. Оно для меня важно, и весь мой опыт подсказывает, что это ощущение важно и для других людей. Ради этого ведутся настоящие войны. Некоторые психологи-эволюционисты даже будут пытаться убедить вас, что вся человеческая культура и язык управляются в значительной степени стремлением к достижению оргазма. Утрата этого ощущения кажется важным побочным эффектом, о котором стоит спрашивать.
Однако различные исследования показали, что сообщенная частота аноргазмии у пациентов, принимающих СИОЗС, варьирует от 2 до 73 %, в зависимости от того, как вы спрашиваете: случайный, заданный мимоходом вопрос о побочных эффектах или тщательный, подробный опрос. В одном исследовании СИОЗС, включавшем 3000 пациентов, побочные эффекты в сексуальной сфере даже не были включены в таблицу побочных эффектов из 23 пунктов. Двадцать три другие вещи были более важными, по мнению исследователей, чем потеря ощущения оргазма. Я прочитал этот список. По-моему, нет.
Но вернемся к основным результатам. Вот еще один трюк: вместо реальных результатов, таких как смерть или боль, вы можете использовать суррогатные, которые получить гораздо легче. Если ваше лекарство должно снижать уровень холестерина в крови и предотвращать смерть от сердечных приступов, не отмечайте случаи смерти от сердечных приступов, измеряйте только уровень холестерина: снижения его достигнуть гораздо легче, чем снижения смертности от сердечных болезней, а испытание будет дешевле и быстрее, и результат, соответственно, будет дешевле и положительнее. Результат!
Допустим, что вы провели свое испытание, и, несмотря на все ваши усилия, результат отрицательный. Что можно сделать? Если ваши испытания были хорошо проведены, но дали некоторые отрицательные результаты, можете попробовать старый фокус: не привлекайте внимание к разочаровывающим данным, рисуя графики. Упомяните об этом кратко в тексте и проигнорируйте, когда будете делать выводы. (Мне самому это отлично удается. Это результат того, что я много читаю о подобных испытаниях.)
Если ваши результаты целиком отрицательные, не публикуйте их совсем или публикуйте много времени спустя. Это именно то, что было сделано с результатами испытаний СИОЗС: они скрыли данные, предполагая, что это может быть опасно, и умолчали о том, что эти лекарства действуют не лучше, чем плацебо. Если вы действительно умный и у вас есть деньги, которых вам не жалко, то после получения разочаровывающих данных вы можете провести еще испытания с тем же протоколом, в надежде, что результаты будут положительными, затем попытаться свести данные вместе, так что ваши отрицательные результаты будут поглощены какими-нибудь посредственными положительными.
Или вы можете стать серьезным или начать манипулировать статистикой. Только на следующие две страницы эта книга станет несколько занудной. Я пойму, если вы захотите пропустить их.
Но знайте, что эта информация здесь для врачей, которые купили эту книгу, чтобы посмеяться над гомеопатами. Вот вам классические трюки со статистическим анализом, чтобы обеспечить положительные результаты ваших испытаний.
Полностью игнорируйте протокол
Всегда допускайте, что любая зависимость доказывает причинную связь. Внесите все ваши данные в программу и сообщайте — как о чем-то важном — о любой взаимосвязи между всем чем угодно, если это работает на вас. Если вы измерите все, то что-то, несомненно, окажется положительным, просто благодаря случаю.
Манипулируйте с линией отсчета
Иногда, когда вы начинаете испытания, группа, получающая лечение, уже чувствует себя лучше, чем группа плацебо. Если это так, то оставьте все как есть. Если, с другой стороны, плацебо- группа чувствует себя лучше в начале испытаний, подправьте линию отсчета в вашем анализе.
Игнорируйте выбывших
Люди, которые выбывают из испытаний, с точки зрения статистики, скорее всего, чувствуют себя хуже, и у них, вероятно, наблюдаются побочные эффекты. Они только испортят имидж вашего лекарства. Поэтому игнорируйте их, не пытайтесь их вернуть и не включайте в ваш окончательный анализ.
Подчистите данные
Посмотрите на ваши графики. Там наверняка найдутся аномалии, или точки, которые располагаются далеко от остальных. Если они не в вашу пользу, исключите их. Если они помогают поддержать имидж вашего лекарства, оставьте их на месте, даже если это выглядит неправдоподобно.
Пять… нет, семь… нет, девять!
Если разница между вашим лекарством и плацебо становится значительной через четыре с половиной месяца, а испытание запланировано на шесть, прекратите испытание досрочно и зафиксируйте результаты: они могут стать менее впечатляющими, если вы продолжите. И наоборот, если через шесть месяцев результаты будут «почти положительными», продолжите испытания еще на три месяца.
«Помучайте» данные
Если результаты совсем плохи, попробуйте вернуться назад и посмотреть: может быть, в какой-нибудь подгруппе они другие. Вдруг вы обнаружите, что лекарство хорошо работает на китайских женщинах в возрасте от 52 до 61 года? «Помучайте данные, и они во всем сознаются», — как говорят в тюрьме Гуантанамо.
Понажимайте все кнопки на компьютере
Если вы в отчаянии, и анализ данных тем способом, который вы планировали, не дает нужных вам результатов, попробуйте другие статистические анализы, даже если они сюда совершенно не подходят, просто наугад.
И когда вы закончили, самое главное — это напечатать ваши результаты с умом. Если испытания удались, смело печатайтесь в самом крупном журнале, какой только сможете найти. Если результаты положительные, но вы слегка слукавили и это может выйти наружу, тогда печатайте их в малоизвестном журнале (который пишется и издается исключительно промышленностью): помните, что все уловки, которые мы только что описали, ничего не скрывают, и станут явными для любого, кто прочитает вашу статью, но только при внимательном чтении, поэтому в ваших интересах, чтобы никто не читал дальше введения. И наконец, если ваши результаты действительно смущают, спрячьте их подальше и ссылайтесь на них как на «данные в файле». Никто не будет знать ваши методы, и их заметят, только если кто-нибудь начнет их искать для систематического обзора. Остается надеяться, что это произойдет нескоро.
