WWW.DISUS.RU

БЕСПЛАТНАЯ НАУЧНАЯ ЭЛЕКТРОННАЯ БИБЛИОТЕКА

 

Pages:     || 2 | 3 | 4 | 5 |   ...   | 9 |
-- [ Страница 1 ] --

Спасибо, что скачали книгу в Библиотеке скептика

Другие книги автора

Эта же книга в других форматах

Приятного чтения!

Бен Голдакр
ОБМАН В НАУКЕ


Содержание

  • Вступление
  • 1. Предмет
  • 2. «Зарядка для мозга»
  • 3. Комплекс Прогениум XY
  • 4. Гомеопатия
  • 5. Эффект плацебо
  • 6. Заблуждения дня
  • 7. Джиллиан МакКейт, кандидат наук
  • 8. «Пилюли решают сложные социальные проблемы»
  • 9. Профессор Патрик Холфорд
  • 10. Доктор будет преследовать вас в судебном порядке
  • 11. Является ли официальная медицина злом?
  • 12. СМИ способствуют неправильному пониманию науки
  • 13. Почему умные люди верят в глупости
  • 14. Плохая статистика
  • 15. Медицинские страхи
  • 16. Вакцина против кори, свинки и краснухи и большой обман в средствах массовой информации
  • И ещё кое-что
  • Дополнительное чтение и благодарности
  • Примечания

ОТКРЫТИЯ, КОТОРЫЕ ПОТРЯСЛИ МИР

 

Перевод с английского И. А. Шестовой

Ben Goldacre

BAD SCIENCE 

Вступление

Позвольте рассказать вам, как плохо обстоят дела. В тысячах британских государственных школ детей учат, что, если энергично потрясти головой вверх-вниз, это увеличит приток крови к лобным долям мозга; что, если потереть пальцы друг о друга особым, «научным» образом, это улучшит «энергетический ток» в организме; что приготовленная пища не содержит воды; что, если подержать воду на языке, это позволит увлажнить мозг непосредственно через нёбо. Все это — часть специальной программы упражнений, называемой «Зарядка для мозга». Мы посвятим некоторое время этим представлениям и тем клоунам в нашей системе образования, которые их поддерживают.

Однако эта книга — не коллекция тривиальных нелепостей. Она демонстрирует путь от доверия, которое оказывают шарлатанам средства массовой информации, через ухищрения 30-миллиардной индустрии пищевых добавок и вред, наносимый 300-миллиардной фармацевтической промышленностью, через трагедии, связанные с освещением научных достижений в прессе, к случаям, когда людей сажали в тюрьму, оскорбляли или даже убивали просто из-за неправильного понимания статистических данных или научных доказательств, которое характерно для нашего общества.

Полвека назад, во времена знаменитого письма Ч. П. Сноу о естественных и гуманитарных науках как о двух культурах, обладатели гуманитарных дипломов нас просто игнорировали. Сегодня огромная армия людей, которые считают себя вправе судить о научных доказательствах, абсолютно не понимая сути проблемы, по численности и агрессивности существенно превосходит ученых и врачей.

В школе вам рассказывали о химических веществах в пробирках, уравнениях, описывающих движение, и, вероятно, кое- что о фотосинтезе — о котором вы больше узнаете позже, — но вряд ли вы осведомлены о смертях, факторах риска, статистике и научных данных о том, что именно нас убивает и что лечит. В нашей культуре зияет дыра: доказательная медицина — самая прикладная из всех наук, содержащая величайшие идеи последних двух веков, спасшая миллионы жизней, — не представлена в Лондонском музее науки ни единым экспонатом.

Причина этого отнюдь не в отсутствии интереса. Нас занимают проблемы здоровья — половина всего того, что пишут о науке в средствах массовой информации, посвящена медицине, — и мы постоянно слышим наукообразные заявления и истории на медицинские темы. Но, как вы увидите в дальнейшем, мы получаем всю эту информацию от тех людей, которые неоднократно демонстрировали свою неспособность читать и интерпретировать научные данные и представлять научные доказательства.

Прежде чем мы начнем, позвольте мне очертить нашу территорию.

Во-первых, мы узнаем, что значит проводить эксперимент, видеть результаты своими собственными глазами и (удить о том, соответствуют ли они данной теории или, напротив, говорят в пользу альтернативной. Вы можете посчитать эти первые шаги ребяческими или чересчур назидательными — примеры действительно выглядят слишком абсурдными, — но все это на самом деле авторитетно пропагандировалось в средствах массовой информации. Мы увидим, насколько привлекательны наукообразные рассказы о нашем организме и как они могут сбить с толку.

Затем мы перейдем к гомеопатии, но не потому, что это важно или опасно (это не так!), а потому, что это прекрасная модель для обучения доказательной медицине. Гомеопатические пилюли — это всего лишь сахарные шарики, которые, кажется, работают и поэтому воплощают все, что необходимо знать о «честных испытаниях» методов лечения и о том, как нас можно ввести в заблуждение и заставить думать, что лечение более эффективно, чем есть на самом деле. Вы узнаете все, что необходимо знать о правильном проведении испытаний и о том, как отличить некорректно проведенные испытания. Где-то в глубине всего этого лежит эффект плацебо — вероятно, самый интригующий и не получивший должного объяснения аспект человеческого исцеления, который выходит далеко за рамки сахарных пилюль. Он противоречит интуиции и представляет собой истинную историю взаимодействия тела и разума в процессе излечения, и это гораздо интереснее, чем любая придуманная чушь о терапевтическом воздействии квантовой энергии. Мы увидим, насколько эффект плацебо мощный, и вы сможете сделать свои собственные выводы о его воздействии.

Затем нам предстоит половить более крупную рыбу. Специалисты по питанию, представляющие альтернативную медицину, каким-то образом умудряются позиционировать себя как людей науки. Их промахи гораздо интереснее ошибок гомеопатов, поскольку утверждения подобных «ученых» содержат некоторое количество научной информации, что делает их не только более интересными, но и более опасными, потому что реальная угроза шарлатанов не в том, что потребители их продукции могут умереть — это крайний случай, хотя и подходящий для того, чтобы перемывать им кости, — а в том, что они систематически подрывают понимание людьми самой сути научного доказательства.

Мы увидим, как их риторические уловки и дилетантские ошибки постоянно вводят вас в заблуждение по поводу пищи и диет и как это отвлекает от истинных факторов риска для здоровья. Мы проследим и менее заметное, но от этого не менее опасное влияние их идей на наше понимание человеческой физиологии, стремление «медикализировать» социальные и политические проблемы, втиснуть их в редукционистские биомедицинские рамки и быстро продать удобное решение этих проблем в виде каких-нибудь пилюль или фантастических диет. Я попытаюсь показать, как эти потрясающие ошибки уже проникают в британские университеты и занимают место рядом с истинными научными исследованиями в области диетологии. В этой главе вы также узнаете больше о национальной знаменитости — докторе Джиллиан МакКейт. Затем мы применим те же инструменты к истинной медицине и узнаем, какие уловки используют фармацевтические компании, чтобы обманывать врачей и пациентов.

Нам предстоит также посмотреть, каким образом средства массовой информации способствуют неправильному пониманию науки: журналисты одержимы страстью к нелепым историям и при этом не имеют представления об истинном смысле статистики и научных доказательств, и это иллюстрирует самую суть того, почему мы занимаемся наукой: мы делаем это, чтобы не оставаться в плену нашего повседневного опыта и наших предрассудков. И наконец, в той части книги, которую я считаю наиболее тревожной, мы увидим, как люди, облеченные властью, люди, которым следовало бы быть более осведомленными, совершают те же фундаментальные ошибки, приводящие к тяжелым последствиям. Мы увидим, как циничное искажение средствами массовой информации фактов, связанных с двумя специфическими проблемами здравоохранения, приводит к опасным и откровенно гротескным крайностям. Ваша задача — в процессе чтения обратить внимание на то, насколько распространенной стала эта практика, и подумать, что можно с этим сделать.

Вы не сможете своими аргументами заставить людей сойти с тех позиций, на которые они встали неосознанно. Но к концу этой книги у вас будут все необходимые инструменты, чтобы выиграть — или по крайней мере понять — любой спор, в котором вы будете участвовать, пойдет ли речь о чудесных исцелениях, вакцине против кори, свинки и краснухи, злодеяниях крупных фармацевтических компаний, вероятности того, что какой-то овощ предотвращает рак, замалчивании научных результатов, сомнительных страхах по поводу здоровья; взаимоотношениях разума и тела, природе иррационального, медикализации нашей повседневной жизни или о чем-то другом. Вы будете свидетелями разоблачения некоторых популярных обманов, но, помимо этого, вы узнаете кое-что полезное о научных исследованиях, научных доказательствах, предвзятости, статистике, истории науки, антинаучных движениях и шарлатанстве, а также, возможно, заинтересуетесь некоторыми удивительными историями об окружающем мире, которые могут рассказать нам естественные науки.

Это будет совсем не сложно, поскольку это единственный научный урок, где я могу гарантировать, что людьми, совершающими глупые ошибки, будете не вы. А если, прочитав эту книгу, вы, возможно, не согласитесь со мной, я заявляю следующее: вы будете неправы, но при этом вы будете относиться к этим проблемам гораздо более заинтересованно, чем сейчас.

Бен Голдакр

июль 2008 года

1. Предмет

Я провожу достаточно много времени, разговаривая с людьми, которые не разделяют мою точку зрения, — я бы даже назвал такие беседы одним из моих излюбленных занятий на досуге, — и я постоянно встречаю тех, кто готов поделиться своими взглядами на науку, несмотря на то что они ни разу в жизни не провели ни одного эксперимента. Они никогда собственноручно не проверяли свои идеи и не наблюдали результаты эксперимента своими собственными глазами, они никогда толком не анализировали значение этих результатов для гипотезы, которую тестировали. Для этих людей «наука» является скорее неким монолитом, тайной и авторитетом, чем методом.

Развенчание наших ранних, скандально псевдонаучных заявлений — это прекрасный способ освоить азы науки, отчасти потому, что наука и заключается в ниспровержении теорий, но также и потому, что недостаток научных знаний у создателей и продавцов чудо-лекарств, а также у журналистов дает нам возможность проверить некоторые очень простые идеи. Их познания в науке примитивны, поэтому, помимо фундаментальных ошибок в рассуждениях, они полагаются на такие понятия, как магнетизм, кислород, вода, энергия и токсины, то есть на знания, почерпнутые из школьной программы и из области «кухонной» химии.

 

Детокс и театр «коричневой жижи»

 

Если вы захотите, чтобы ваш первый эксперимент был по- настоящему «грязным», начнем с «Детокса». «Аква Детокс» (Aqua Detox) — это ножная ванна для детоксикации организма (один из многих продуктов подобного сорта). Ее активно пропагандировали в нескольких довольно бесцеремонных статьях такие издания, как Telegraph, Mirror, Sunday Times, GQ, а также различные телепрограммы. Вот отрывок из статьи в Mirror:

Мы предложили Алексу испытать новый метод лечения, называемый «Аква Детокс», который выводит токсины из организма прямо на ваших глазах. Говорит Алекс: «Я помещаю ступни в ванночку с водой, а терапевт Мирка добавляет несколько капель солевого раствора в ионизирующий блок, который модифицирует биоэнергетическое поле воды и способствует выведению токсинов из организма. Вода меняет свой цвет, по мере того как организм освобождается от токсинов. После получасовой процедуры вода стала красной…Затем она предлагает попробовать нашему фотографу Карен и получает ванночку коричневых пузырьков. Мирка ставит Карен диагноз — повышенная нагрузка на печень и лимфатическую систему: Карен необходимо пить меньше алкоголя и больше воды. Вот это да! Я чувствую себя вполне добродетельным!»

Гипотеза, которой руководствуются эти компании, весьма проста: ваш организм полон разнообразных токсинов, а на ваших ступнях находятся специальные поры (открытые не кем иным, как врачами Древнего Китая): вы помещаете свои ступни в ванночку, токсины «вытягиваются» из вашего организма, и вода становится коричневой. Действительно ли вода приобретает коричневый цвет из-за выделившихся токсинов? Или это просто театр?

Один из способов проверить это — пройти такую процедуру самому в спа-салоне, салоне красоты или любом из тысяч других мест, предлагающих подобные услуги, и вынуть ноги из ванночки, когда врач выйдет из комнаты. Если вода станет коричневой и без ваших ступней, тогда очевидно, что такой ее делают вовсе не ваши токсины. Это контролируемый эксперимент: в обоих случаях все условия одинаковы, за исключением наличия или отсутствия ваших ног в воде.

У этого экспериментального метода есть некоторые недостатки (и потому мы должны взвешивать преимущества и практичность различных способов исследования, что станет особенно важным в последующих главах). С практической точки зрения эксперимент с выниманием ног из воды может причинить вам некоторые неудобства. Кроме того, это недешево: один сеанс «Аква Детокса» стоит больше, чем все элементы, необходимые для самостоятельного изготовления подобного аппарата — отличной модели настоящего.

Вам потребуется:

• одно автомобильное зарядное устройство;

• два больших гвоздя;

• поваренная соль;

• теплая вода;

• одна кукла Барби;

• целая аналитическая лаборатория (не обязательно).

Не пытайтесь повторить это дома

 

 

Для этого эксперимента необходимы электричество и вода. Следует признать, что в мире охотников за ураганами и вулканологов каждый из нас выбирает свой собственный уровень риска. Вы можете получить малоприятный удар током, если будете проводить этот эксперимент дома, кроме того, это может вывести из строя электропроводку. Это не совсем безопасно, но в некотором смысле то же самое относится и к вашему пониманию MMR[1], гомеопатии, постмодернистской критики науки или зла, которое приносят большие фармацевтические компании. Поэтому лучше не делайте этого.

Когда вы включите свой кукольный «Детокс», вы увидите, что вода станет коричневой благодаря очень простому процессу, который называется электролизом: железные электроды ржавеют, и бурая ржавчина окрашивает воду. Но там происходит и кое-что еще, что-то, что вы смутно помните из школьного курса химии. В воде находится соль. Научное название поваренной соли — хлорид натрия; это значит, что в растворе находятся отрицательно заряженные ионы хлора и положительно заряженные ионы натрия. Красный контакт в вашем зарядном устройстве — это положительный электрод, который «похищает» отрицательно заряженные электроны у отрицательно заряженных ионов хлора, приводя к образованию свободного газообразного хлора.

Таким образом, из кукольного аппарата «Детокс» выделяется хлор, так же как и из аппарата «Аква Детокс», и люди, использующие его, находят весьма элегантное объяснение отчетливому запаху хлора, ощущаемому во время процедуры: это химические токсины из вашего организма; хлор, который накапливается в вашем теле из-за пластиковой упаковки пищи и многолетнего плавания в бассейнах с хлорированной водой. «Было интересно наблюдать, как вода меняет цвет, и чувствовать запах хлора, выходящего из моего тела», — говорит один из тестировавших аналогичный аппарат, «Эмеральд Детокс». Еще одна цитата из рекламного сайта: «Когда она впервые попробовала Q2 [Energy Spa], ее бизнес-партнер сказал, что у него щипало глаза от выходившего из ее тела хлора, который накапливался там с детства и юности». Весь хлор, который накопился в организме за долгие годы. Страшно представить!

Но есть кое-что еще, что мы должны проверить. Есть ли токсины в воде? И здесь мы сталкиваемся с еще одной проблемой: а что имеется в виду под словом «токсины»? Я много раз задавал этот вопрос производителям аппаратов «Детокс», но не получил вразумительного ответа.

Они жестикулировали, рассуждали о стрессах современной жизни, о загрязнении окружающей среды, нездоровой пище, но так и не назвали ни одного химического вещества, которое можно было бы определить. «Какие токсины выделяются из организма при вашем методе лечения? — спрашивал я. — Скажите, какие вещества должны быть в воде, и я постараюсь обнаружить их в лаборатории». Я ни разу не получил ответа.

После всех этих отговорок и недомолвок я выбрал наугад два вещества: креатинин и мочевину. Это распространенные продукты метаболических процессов в нашем организме, которые почки выделяют с мочой. Через своего друга я прошел настоящее лечение «Аква Детоксом», взял образец коричневой воды и использовал самое современное аналитическое оборудование больницы Св. Марии в Лондоне для поиска этих двух химических токсинов. Никаких токсинов в воде не было. Только бурое ржавое железо.

Имея на руках эти результаты, ученые могли бы сделать шаг назад и пересмотреть свои идеи о том, что происходит с ножными ваннами. Мы и не думаем, что это будут делать производители аппаратов, но было бы интересно узнать, по крайней мере мне, что они скажут в ответ на предъявление этих результатов, поскольку это определяет модель, которую используют псевдоученые во всем мире: вместо того чтобы ответить критикам или включить новые данные в новую модель, они решительно отступают на непроверяемые позиции.

Некоторые из них теперь отрицают, что токсины выделяются в ванночку (что делает невозможным их определение в воде): ваше тело, говорят они, получает каким-то образом информацию, что пора выводить токсины естественным путем — каким бы он ни был и какие бы токсины ни выводились. Псевдоученые признают, что вода становится слегка коричневой и без ваших ног, но «не до такой степени». Многие из них рассказывают длинные истории о «биоэнергетических полях», которые, как они утверждают, не могут быть измерены иначе как вашим самочувствием. И абсолютно все рассуждают о том, насколько современная жизнь полна стрессов.

Это вполне может быть правдой. Но это не имеет никакого отношения к их ножным ванночкам, которые представляют собой не что иное, как театр. Театр — это, как мы видим, общая тема всех подобных продуктов. Театр «коричневой жижи».

Ушные свечи

Вы можете подумать, что ушные свечи Hopi являются удобной мишенью для критики. Но их эффективность все еще оптимистически утверждается такими солидными источниками, как Independent, Observer и ВВС. Поскольку они являются авторитетными поставщиками научной информации, я позволю себе процитировать объяснение действия этих полых восковых трубочек, предоставленное ВВС: если свечу зажечь, она начинает испарять свои ингредиенты, направляя конвекционные потоки воздуха в первую ушную камеру. Свеча создает небольшую всасывающую силу, которая позволяет парам нежно массировать барабанную перепонку и слуховой проход. После помещения свечи в ухо она образует пробку, которая позволяет ушной сере и другим загрязнениям вытягиваться из уха.

Доказательство появляется, когда вы открываете свечу и обнаруживаете, что она наполнена знакомым вязким оранжевым веществом, которое, очевидно, является ушной серой. Если вы захотите проверить это самостоятельно, вам потребуются ухо, тампон из ткани, некоторое количество клеящей пасты Blu Tack, пыльный пол, ножницы и две ушные свечи. Я рекомендую свечи OTOSAN из-за их рекламного слогана («Ухо — это ворота души»).

Если вы зажжете одну свечу и подержите ее над пылью, вы вряд ли обнаружите какую-либо всасывающую силу. Но прежде чем вы броситесь в один из уважаемых академических журналов, чтобы опубликовать ваше открытие, знайте, что вас опередили. Авторы статьи, опубликованной в медицинском журнале Laringoscope, использовали дорогостоящее тимпанометрическое оборудование и, так же как и вы, не обнаружили у свечи никакой всасывающей силы. Так что неправда, что врачи отвергают альтернативные методы лечения без всякой проверки.

Но что, если сера и токсины вытягиваются свечой каким-то другим, эзотерическим способом, как это часто утверждается? Чтобы проверить это, вам потребуется провести то, что называется контролируемым экспериментом, и сравнить результаты в двух различных ситуациях, из которых одна является экспериментальной, а другая контрольной. Единственным различием в этих ситуациях будет та вещь, которую вы проверяете. Вот почему вам понадобятся две свечи.

Вставьте одну свечу в чье-либо ухо согласно инструкции производителя и не вынимайте ее до тех пор, пока она не сгорит полностью[2].

Другую свечу вставьте в тканевый тампон и закрепите его вертикально с помощью Blu Tack: это контрольная часть вашего эксперимента. Цель контроля проста: нам нужно минимизировать различия между двумя ситуациями. В нашем случае единственное реальное различие между ними — это тот фактор, который вы пытаетесь проверить: действительно ли ваше ухо производит эту оранжевую массу?

Достаньте обе ваши свечи и откройте их. В той, которая была в ухе, вы обнаружите вязкое оранжевое вещество. В контрольной свече, которая была на вашем столе, вы также обнаружите вязкое оранжевое вещество. Существует только один международно признанный способ для идентификации ушной серы: возьмите немного серы на кончик пальца и попробуйте на язык. Если ваш эксперимент дал те же результаты, что и мой, оба вещества по вкусу похожи на свечной воск.

Удаляет ли свеча серу из вашего уха? Нельзя сказать точно, но в одном опубликованном исследовании пациенты наблюдались во время всего курса лечения ушными свечами, и у них не обнаружено уменьшения количества ушной серы. Помимо того, что вы узнали кое-что полезное об экспериментальных методах, вы должны были извлечь из всего сказанного нечто более важное: проверять самому каждую ерунду, выдуманную продавцами чудо-лекарств, долго, дорого и утомительно. Но это можно сделать.

Пластыри для детоксикации и «защитный барьер»

Последнее из нашей триады средств, выводящих из организма токсины в виде коричневой кашицы, — ножной пластырь для детоксикации. Вы можете приобрести такой пластырь в магазинах здорового питания и у распространителей косметических средств. Он выглядит как чайный пакетик с полоской из фольги и прикрепляется к подошве с помощью клеящей кромки, перед тем как лечь спать. Когда вы проснетесь на следующее утро, вы обнаружите странно пахнущую липкую бурую массу на вашей подошве и внутри «чайного пакетика». Эта масса, как утверждают, — и здесь вы можете проследить закономерность — представляет собой «токсины». Разумеется, это не так. Вы сами можете быстро придумать эксперимент, чтобы доказать это, и в примечании я предлагаю один из возможных вариантов[3].

Эксперимент — это один из способов определить, связан ли наблюдаемый эффект — в данном случае бурая кашица — с процессом. Но вы можете проанализировать вещи и на теоретическом уровне. Если вы изучите список ингредиентов этих пластырей, вы убедитесь, что они очень тщательно подобраны.

Первое, что вы увидите в этом списке, — это древесный уксус. Он представляет собой коричневый порошок, обладающий высокой гигроскопичностью — слово, которое означает, что он притягивает и впитывает воду, подобно пакетикам с окисью кремния, которые обычно кладут в упаковки с электронным оборудованием. Если вокруг есть влага, древесный уксус впитает ее, и получится теплая на ощупь коричневая кашица.

Что же собой представляет второй основной ингредиент, внушительно обозначенный как «гидролизованные углеводы»? Углевод — это длинная цепочка соединенных между собой молекул сахара; таков, например, крахмал, который в вашем организме постепенно расщепляется на отдельные молекулы сахаров с помощью пищеварительных ферментов, чтобы ваш организм мог их абсорбировать (этот процесс называется «гидролиз»). Таким образом, «гидролизованный углевод», как вы уже догадались, как бы научно ни звучало это название, означает всего- навсего сахар. Очевидно, что при соприкосновении с потом сахар становится липким.

Следует ли добавить еще что-нибудь к этим пластырям? Да. Существует новый инструмент, который можно назвать «защитным барьером», еще одна постоянно возникающая тема в наиболее передовых формах глупости, которые мы будем рассматривать далее. Есть огромное количество различных брендов, многие из которых предлагают отличную и подробную документацию, полную научных терминов, доказывающих, что эти изобретения работают: там представлены диаграммы и графики, и все это выглядит вполне наукообразно, однако ключевой момент отсутствует. Они говорят, что проводились эксперименты, которые показали, что пластыри работают, но не говорят, в чем состояли эти эксперименты и каковы были их методы, а лишь декорируют свои утверждения графиками результатов.

Сфокусировать внимание на методах значит упустить ключевой момент этих «экспериментов»: для них важны не методы, а положительные результаты, наглядность и наукообразный вид. Они представляют на первый взгляд внушающие доверие тотемы, которые призваны отпугнуть любопытных журналистов, «защитный барьер», и это еще одна повторяющаяся тема, которую мы обнаружим — в более сложных формах — в других, более передовых областях лженауки. Вам понравятся подробности.

Если это не наука, что же это?

Выясните, действительно ли питье мочи, балансирование на краю утеса и поднятие предметов гениталиями навсегда изменило их жизнь.

Программа «Супер-Детокс для знаменитостей» на Четвертом канале

Все эти абсурдные крайности детоксикации говорят об обширном рынке: антиоксиданты в таблетках, зелья, книги, соки, пятидневные «программы», трубочки из заднего прохода и пугающие телешоу — все это мы разобьем в пух и прах, в основном, в главе, посвященной проблемам питания. Но есть еще кое-что важное относительно детоксикации, и я думаю, что недостаточно просто сказать: «Все это ерунда».

Феномен «Детокса» интересен, поскольку представляет собой одну из наиболее грандиозных инноваций продавцов подобного товара, гуру здорового образа жизни и представителей альтернативной медицины — изобретение совершенно нового физиологического процесса. С точки зрения фундаментальной биохимии человека детоксикация — понятие бессмысленное. В природе ее не существует. В медицинских учебниках вы не найдете ничего о «системе детоксикации». То, что гамбургеры и пиво могут оказать отрицательный эффект на ваш организм, несомненно, верно по целому ряду причин, но то, что они оставляют в организме какой-то специфический осадок, который должен выводиться с помощью особого процесса, физиологической системы детоксикации, является просто рыночной инновацией.

Если вы посмотрите на схему метаболических процессов — гигантскую, размером во всю стену карту, изображающую все молекулы в вашем организме и подробно описывающую способы расщепления пищи на составные части, а затем превращение этих компонентов в другие и образование из этих новых строительных блоков мышц, костей, языка, желчи, пота, волос, кожи, спермы и мозга, то есть всего того, что делает вас вами, — будет довольно затруднительно найти ту вещь, которая представляет собой «систему детоксикации».

Поскольку детоксикация не имеет научного значения, ее предпочтительнее рассматривать как культурный продукт. Подобно лучшим псевдонаучным изобретениям, она намеренно смешивает полезный здравый смысл с нелепыми фантазиями из области медицины. В некотором отношении количество покупаемых вами подобных продуктов отражает то, насколько вы драматизируете собственное существование, или, используя менее негативные термины, насколько вы любите ритуалы в вашей повседневной жизни. Когда в моей жизни случаются активные периоды посещения вечеринок, выпивки, недосыпа и еды в свое удовольствие, я в конце концов осознаю, что мне необходим отдых. Поэтому я провожу несколько вечеров подряд дома, читая и потребляя больше салата, чем обычно. А модели и знаменитости тем временем проходят «детоксикацию».

Следует, однако, прояснить один вопрос, постоянно возникающий в мире псевдонауки. Нет ничего плохого в здоровом питании или воздержании от таких факторов риска для здоровья, как чрезмерное потребление алкоголя. Но суть детоксикации состоит не в этом: это рецепт быстрого достижения здоровья, изначально задуманный как кратковременный, в то время как факторы риска для здоровья, связанные с образом жизни, воздействуют на нас постоянно. Но я готов согласиться с тем, что некоторым людям полезно попробовать, например, пятидневную детоксикацию и запомнить (или даже научиться), что значит есть овощи, и это, разумеется, не вызывает у меня никакой критики.

Не стоит, однако, делать вид, что эти ритуалы основаны на науке или что они являются новыми. Почти в каждой религии есть та или иная форма ритуала очищения или воздержания, например посты, изменения в рационе, принятие ванн или что-либо другое, по большей части замаскированное различными непонятными названиями. Эти ритуалы не претендуют на научность, поскольку идут из той эпохи, когда научные термины еще не вошли в лексикон. Однако День искупления в иудаизме, Рамадан в исламе, а также подобные ритуалы в христианстве, индуизме, вере Бахай, буддизме и джайнизме связаны, помимо прочего, с воздержанием и очищением. Такие ритуалы, как и программы детоксикации, характеризуются очевидной и — для некоторых последователей, я уверен, — нелепой точностью. Посты в индуизме, например, если их строго соблюдать, начинаются в момент захода солнца и заканчиваются через 48 минут после его восхода на следующий день.

Очищение и искупление являются столь распространенными ритуальными темами, поскольку в них существует очевидная и повсеместная потребность: мы все в некоторых обстоятельствах совершаем поступки, о которых сожалеем, и новые ритуалы часто изобретаются в ответ на новые обстоятельства. В Анголе и Мозамбике появились ритуалы очищения для детей, пострадавших от войны, особенно бывших детей-солдат. Это оздоровительные ритуалы, в которых ребенок очищается и освобождается от греха и вины, от «осквернения» войной и смертью (осквернение — это постоянная метафора во всех культурах, по вполне очевидным причинам); ребенок при этом также становится защищенным от последствий своих предыдущих действий, то есть от мести душ убитых им людей. Вот что написано в отчете Всемирного банка в 1999 году:

«Эти ритуалы очищения для детей-солдат подобны тому, что антропологи называют церемонией перехода. Ребенок проходит символическое изменение статуса: от человека, который существовал в мире санкционированного нарушения норм или временного отказа от них (убийство, война), к человеку, который должен жить в мире поведенческих и социальных норм и следовать им».

Я не думаю, что захожу слишком далеко. В том, что называется развитым западным миром, мы ищем искупления и очищения от наиболее экстремальных форм потакания нашим слабостям: мы употребляем алкоголь, наркотики, нездоровую пищу и т. д., хотя знаем, что это неправильно, и жаждем ритуальной защиты от последствий, публичной «церемонии перехода», символизирующей наше возвращение к нормам здорового поведения.

Презентация этих очищающих диет и процедур всегда являлась продуктом своего времени и места, и поскольку сейчас наука является доминирующей объяснительной силой материального и духовного мира, вполне естественно, что мы должны придавать некое подобие научного оправдания нашему искуплению. Подобно прочей чепухе в лженауке, псевдонаучная детоксикация — это не то, что с нами делают корыстные эксплуататоры извне: это продукт нашей культуры, наша постоянная тема, и мы делаем это сами.

2. «Зарядка для мозга»

В обычных обстоятельствах это должна быть глава, в которой я под бурные аплодисменты обрушиваюсь на креационизм, хотя в британских школах это маловажная тема. Но если вы хотите пример поближе, то в государственных школах по всей стране идет серьезная торговля псевдонаукой. Она называется «Зарядка для мозга», распространяется по всей системе образования, принимается на веру учителями, непосредственно передается ученикам и изобилует явной постыдной чушью.

По сути, «Зарядка для мозга» — это ряд сложных запатентованных упражнений для детей для «улучшения способности учиться, используя все резервы мозга». В них большое внимание уделяется воде. Вот, например, выдержка из инструкции: «Выпейте стакан воды перед выполнением зарядки. Так как вода — важный компонент крови, она жизненно необходима для передачи кислорода в мозг». Не дай бог, ваша кровь высохнет! Воду рекомендуется держать во рту, потому что, по словам авторов методики, оттуда она впитывается прямо в мозг.

Есть ли что-нибудь еще, что вы можете сделать, чтобы более эффективно снабдить мозг кровью и кислородом? Да, упражнение под названием «Мозговые кнопки»: «Сложите большой и указательный пальцы одной руки в полукольцо и приложите по обе стороны грудины под ключицей. Слегка потрите этими пальцами 20–30 секунд, держа другую руку на пупке. Смените руки и повторите». Это упражнение стимулирует приток насыщенной кислородом крови по сонным артериям к мозгу, что его пробуждает, способствуя концентрации и релаксации». Почему?

«Мозговые кнопки находятся непосредственно над сонными артериями и стимулируют их».

Дети могут быть отвратительными, они могут демонстрировать экстраординарные способности, но мне еще не приходилось видеть ребенка, способного стимулировать сонные артерии внутри его грудной клетки. Для этого потребуются острые ножницы, которые мама, скорее всего, ребенку не даст.

Вы можете подумать, что это незначительная тенденция, распространенная только в немногих изолированных, заблуждающихся школах. Однако это не так. «Зарядку для мозга» делают в сотнях, если не тысячах обычных государственных школ по всей стране. Сейчас у меня есть список из более чем 400 школ, упоминающих об этом в Интернете, и еще многие только планируют использовать эту систему. Спросите, практикуется ли «Зарядка для мозга» в вашей школе. Меня действительно интересует ответ.

«Зарядку для мозга» продвигают местные власти, финансирует правительство, а обучение по данному курсу засчитывается как повышение квалификации учителя. Но местным уровнем это не ограничивается.

Вы увидите, что «Зарядка для мозга» рекламируется на сайте Министерства образования и во многих других местах как инструмент «социализации», как будто скармливание псевдонауки детям уменьшит социальное неравенство, а не увеличит его. Эта огромная империя абсурда поразила внутренности английской системы образования от мелких начальных школ до центрального руководства, но, кажется, никто этого не замечает и никого это не волнует.

Возможно, если они проделают «собирающие» упражнения со страницы 31 «Руководства для учителей по зарядке для мозга» (где нужно сцеплять пальцы в странные фигуры), это «замкнет электрические контуры в теле, направляющие и тем самым концентрирующие внимание и рассеянную энергию», то в итоге они придут в себя. Возможно, если они потрут уши пальцами согласно этому учебнику, это «простимулирует ретикулярную формацию» их мозга, чтобы «отключить неуместные отвлекающие звуки и настроиться на речь».

Те же самые учителя, которые рассказывают детям про большой и малый круги кровообращения, объясняют, что при выполнении упражнения «Энерджайзер» (слишком сложного, чтобы описывать его здесь) «движения головы вперед-назад усиливают кровообращение в лобных долях головного мозга, что улучшает понятливость и способность рационально мыслить».

Больше всего пугает то, что учителя слушают ту чушь, которую несет тренер по «Зарядке для мозга», без сомнений и вопросов.

В каком-то смысле выводы из этой главы похожи на выводы из предыдущей, посвященной очищению организма: если вы просто хотите сделать дыхательную гимнастику, то это прекрасно. Но создатели «Зарядки для мозга» пошли дальше. Их особый, запатентованный театрализованный зевок «улучшает оксидирование (oxidation), что позволяет организму функционировать более эффективно и расслабленно». Слово «oxidation» означает «окисление» — то, что вызывает ржавение металла. Это не то же самое, что оксигенация (насыщение кислородом), которое, как я понимаю, они имеют в виду. (И даже если они говорят об оксигенации, вам не нужно специально смешно зевать, чтобы повысить содержание кислорода в крови. У детей, как и у большинства животных, есть восхитительная, идеально действующая физиологическая система для поддержания уровней кислорода и углекислого газа в крови. Я уверен, что лучше учить детей именно этому, а также функциям электричества в теле или любой из тех вещей, которые смешаны в одну кучу в «Зарядке для мозга», а не этой кристально ясной псевдонаучной бессмыслице.)

Как эта чушь могла так широко распространиться в школах? Одно очевидное объяснение состоит в том, что учителей сбили с толку все эти умные слова типа «ретикулярной формации» и «улучшенного оксидирования». Именно этот феномен был изучен в достойной восхищения серии экспериментов, описанной в Journal of Cognitive Neurology («Журнале когнитивной неврологии») за март 2008 года. Было показано, что люди легче верили фальшивым объяснениям, если в них были специальные термины. Людям давали описания различных явлений из мира психологии, а затем предлагали одно из четырех объяснений, выбранное случайным образом; Объяснения содержали неврологические термины либо не содержали их и были «плохими» или «хорошими» («плохие» могли быть описанием явления другими словами или просто набором слов).

Вот один из примеров. Эксперименты показали, что люди плохо оценивают знания других: если мы знаем ответ на вопрос о какой-нибудь мелочи, то, как правило, переоцениваем количество людей, которые тоже знают ответ.

Объяснение «без неврологии» было следующим: «Исследователи утверждают, что это (переоценка) происходит из-за того, что людям сложно поменять свою точку зрения для оценки того, что может знать другой, и они ошибочно проецируют на этого другого свой уровень знаний». (Это «хорошее» объяснение.) Объяснение «с неврологией», причем тавтологическое, было таким: «Результаты сканирования мозга показывают, что это (переоценка) происходит из-за того, что электрическая активность лобных долей мозга связана с самооценкой. Люди допускают больше ошибок, если оценивают других. Люди гораздо лучше оценивают собственные знания». Как вы видите, к предыдущему объяснению ничего не добавлено: неврологические термины — только украшение, не связанное с логикой объяснения.

Участники эксперимента принадлежали к одной из трех групп: обычные люди, студенты-неврологи и преподаватели неврологии. Группы вели себя по-разному. Все три группы считали «хорошие» объяснения более достоверными, чем «плохие», но, по мнению непрофессионалов, объяснения с логически неуместной наукообразной информацией были более достоверны, чем объяснения без нее. К тому же поддельная неврология особенно сильно влияла на оценку «плохих» объяснений.

Шарлатаны, конечно, прекрасно осведомлены об этом и добавляют наукообразные пояснения к своим продуктам все время существования мошенничества, чтобы поднять свой авторитет у пациентов. (Любопытно, что это происходит и сейчас, когда доктора перешли к широкому информированию пациентов и включению их в принятие решений, связанных с выбором тактики лечения.)

Интересно подумать и о том, почему такие «украшения» настолько очаровывают людей, которые могли бы быть более вдумчивыми.

Во-первых, само наличие неврологических терминов является суррогатным маркером «хороших» объяснений вне зависимости от их фактического смысла. Как говорят исследователи: «То, что люди видят специальные термины, заставляет их поверить, что они получили научное объяснение, хотя в действительности это не так».

Еще больше подсказок можно найти в обширной литературе, посвященной природе иррационального. Например, люди чаще считают более длинные объяснения более похожими на объяснения знатоков.

Также наблюдается эффект «завораживающих деталей»: если вы включаете в объяснение связанные с ним, но логически неуместные подробности, людям сложнее понять и вспомнить основную мысль, так как их внимание рассеивается. Более того, почти у всех нас есть старомодное преклонение перед редукционистскими объяснениями. Почему-то они кажутся нам точными. Когда мы видим неврологические термины в «фальшивых объяснениях с неврологией» и в литературе по «Зарядке для мозга», нам кажется, что мы получили физическое объяснение поведенческому феномену («физкультминутка освежает»). Таким способом мы включаем поведение в большую систему естественнонаучных объяснений, присоединяем его к миру точности, графиков и недвусмысленных данных. Это кажется прогрессом.

На самом деле, как это часто бывает с фальшивой точностью, это регресс.

Давайте посмотрим, что хорошего в «Зарядке для мозга», если отбросить абсурд: она выступает за регулярные перерывы на физические упражнения и питье большого количества воды. В этом есть смысл.

Но также она прекрасно иллюстрирует две темы, постоянно возникающие в мире псевдонауки. Первая: чтобы люди делали что-нибудь полезное, типа питья воды и регулярных физических упражнений, нужен обман, то, что Платон эвфемистически назвал «благородным мифом». У вас может быть свое мнение о том, когда это оправданно и хорошо (возможно, по результатам сравнения пользы и вреда от потворства этой чуши), но мне кажется, что в случае «Зарядки для мозга» это не выход. Дети получают знания о мире от взрослых, чаще всего от учителей, они просто впитывают информацию, и те, кто заполняет их головы всякой ерундой, делают это на всю оставшуюся жизнь.

Вторая тема, по-моему, более интересна: присвоение здравого смысла. Вы можете взять разумную идею, типа стакана воды или физкультминутки, добавить к ней немного бессмыслицы и технических терминов, и ваше объяснение будет звучать умно. Это усилит эффект плацебо, но вы можете задаться вопросом, не является ли основная цель всего этого более циничной и корыстной — сделать здравый смысл чем-то, на что существуют охраняемые законом права, запатентовать его и получить в собственность.

Мы видим это постоянно, и в куда большем масштабе, в работах сомнительных целителей, особенно в области диетологии, так как научное знание (и разумный совет по питанию) легко доступно. Любой может им пользоваться, понимать его, продавать или просто раздавать. Сейчас большинство и так знает, что такое здоровое питание.

Если вы хотите сделать на этом деньги, нужно занять свою нишу на рынке, а для этого здоровое питание нужно переусложнить, поставив свой сомнительный знак.

Есть ли в этом опасность? Очевидно, что это неэкономно, и даже на декадентском Западе нет смысла отдавать деньги за простой совет диетолога или физкультминутку в школе. Но есть другие, скрытые опасности, гораздо более серьезные. Процесс профессионализации повседневного набрасывает на науку и оздоровление покров тайны, что не нужно и даже опасно. Это обезоруживает нас даже больше, чем бесполезное право собственности на очевидное. Слишком часто это иллюзорное присвоение здравого смысла происходит в тех областях, где мы можем действовать сами, сами управлять и принимать разумные решения, а вместо этого мы взращиваем зависимость от дорогих систем и посторонних людей.

Но больше всего пугает тот способ, которым псевдонаука забивает нам головы. Развенчанная «Зарядка для мозга», спешу напомнить, не требует специальных знаний. Мы говорим о программе, в которой утверждается, что «приготовленные продукты не содержат воды», а это самое легко опровергаемое утверждение, которое я видел на этой неделе. Как насчет супа? «Все остальные жидкости организм усваивает как еду, они не удовлетворяют потребности в воде».

Это система на грани разумного, но она работает во множестве британских школ. Когда в 2005 году я написал о «Зарядке для мозга» в газете, утверждая, что «физкультминутки полезны, а псевдонаучная чушь просто смешна», многие учителя восхищались, а многие возмущались и были недовольны тем, что они сочли атакой на полезные упражнения.

Один (завуч, не меньше) заявлял: «Насколько я знаю, вы не посещали школы, не опрашивали учеников и учителей и не обсуждали эту тему со специалистами. Это правда?» Нужно ли посещать школу, чтобы понять, что в приготовленных продуктах есть вода? Нет. Если я увижу «специалиста», который скажет, что ребенок (без помощи ножниц) может помассировать обе сонные артерии в грудной клетке, что мне сказать? Если я найду учителя, думающего, что соединение пальцев замкнет электрический контур в теле, то куда мы катимся?

Я предпочту представлять, что живу в стране, где учителя достаточно умны, чтобы понять, что это чушь, и не распространять ее дальше. Если бы я был другим, я бы отчаянно ругался с представителями соответствующего департамента, требуя, чтобы они что-нибудь сделали, а потом писал об этом, цитируя их невразумительное мычание и стыдливые оправдания. Но я не похож на таких журналистов, а «Зарядка для мозга» так явно глупа, что они ничего не смогут сказать в ее защиту. Есть только одна надежда: это ручеек и-мейлов, которые я получаю на эту тему от детей, восхищенных глупостью учителей.

«Я хотел бы написать для “Ненауки” о моем учителе, который дал нам одну брошюру. В ней сказано, что “вода лучше усваивается, если ее пить мелкими глотками”. Вот что я хотел бы узнать: если я сделаю большой глоток, излишек выльется у меня из задницы? Антон, 2006».

Спасибо, Антон.

3. Комплекс Прогениум XY

Я очень уважаю производителей косметики. Они находятся на противоположном краю спектра от производителей средств детоксикации: это тщательно регламентированная отрасль с большими деньгами, которые делаются из ничего. Поэтому здесь можно найти крупные, хорошо организованные команды международных биотехнологических фирм, придумывающие элегантную, приводящую в смущение, иногда просто неприличную, но исключительно хорошо защищенную псевдонаучную чушь. Размявшись детской «Зарядкой для мозга», мы можем перейти к более серьезным играм.

Прежде чем начать, важно выяснить, как работает косметика, в особенности увлажняющие кремы. В этом не должно быть никаких тайн. Во-первых, вы хотите, чтобы ваш дорогой крем увлажнял кожу. Они все действуют подобным образом, а у вазелина получается лучше всего. По сути, наиболее важные ранние исследования в области косметики связаны с желанием сохранить увлажняющие свойства вазелина, сделав его менее жирным, и эта проблема была решена несколько десятилетий назад. Сейчас фабричная увлажняющая основа, стоящая примерно 10 фунтов стерлингов за пол-литровую бутыль, прекрасно справляется с этой задачей.

Если хотите, вы можете сделать похожее на нее домашнее увлажняющее средство: нужно получить смесь масла и воды, то есть тщательно перемешанную эмульсию. Когда я играл в уличном театре хиппи (я совершенно серьезен), мы делали увлажняющее средство, взяв равные части оливкового масла, кокосового масла, меда и розовой воды (водопроводная тоже подойдет). Пчелиный воск — лучший эмульгатор, чем мед, а консистенцию крема можно менять по желанию. Воск сделает его плотнее, масло — мягче, вода — нежнее, но она повышает риск расслоения крема. Немного подогрейте каждый ингредиент в отдельной емкости, постоянно помешивая, влейте масло в воск, потом добавьте воду и перелейте получившееся в банку. Крем хранится в холодильнике три месяца.

Кажется, что кремы, которые продаются в аптеке, ушли далеко вперед от этого метода. В них есть чудодейственные ингредиенты: технология Регениум XY, комплекс Нутрилеум, RoC- корректор на основе ретинола, Вита-Ниацин, метилметакрилат, АТФ-стимулин и нежные растительные пептиды. Конечно же, вы никогда не повторите это на кухне и не найдете в кремах, литр которых стоит столько же, сколько маленькая баночка чудодейственного средства. Что это за магические ингредиенты? Что они делают?

В увлажняющем креме есть три основные группы составляющих. Во-первых, это мощные химические вещества типа альфагидроксильных кислот, большое количество витамина С или молекулярные вариации на тему витамина А. Это нужно, чтобы кожа выглядела более молодой, но эти вещества эффективны только при таких высоких концентрациях или таких высоких уровнях кислотности, что кремы вызывают раздражение, жжение и покраснение кожи. Они подавали надежды в 1990-х, но сейчас запрещены или ограничены законом. Бесплатный сыр бывает только в мышеловке, и ни один эффект не обходится без побочного.

Производители до сих пор указывают эти ингредиенты на упаковках, восхваляя их эффективность в больших дозах, потому что не обязаны указывать их точное количество в креме. Обычно их концентрация очень низка (только для вида). Утверждения на баночках и тюбиках остались от безмятежных дней высокоэффективных кремов с большим содержанием кислот. Эти утверждения сложно проверить, потому что исследования обычно финансируются частными организациями, а их публикации редко доступны в виде полного текста (как положено научному исследованию). Если не обращать внимания на эти технические подробности, то большинство «заявлений» в рекламе кремов взято из отзывов, когда «семь из десяти человек, получивших бесплатную баночку крема, были очень довольны».

Вторая группа ингредиентов в хороших кремах и создает основной эффект. Это подготовленные и перемешанные растительные белки (нутрикомплексы гидролизованных Х-микропротеинов, нежные растительные пептиды — как там они называются сегодня?), длинные рыхлые цепочки аминокислот, вяло плавающие в креме. Когда крем высыхает на лице, эти цепочки сокращаются и уплотняются, создавая слегка неприятное ощущение стянутости, однако такой крем временно сглаживает мелкие морщины. Это быстро появляющийся явный эффект от таких дорогих кремов, но он не поможет вам выбрать нужное средство, так как все кремы этой группы содержат белковые цепочки.

И наконец, есть огромный список таинственных составляющих, добавляемых в крем как бог на душу положит. Когда эти ингредиенты облачены в привлекательную словесную обертку, создается впечатление, что они действительно полезны.

В классическом случае косметические компании берут теоретическую книжную информацию о том, как работают клетки на молекулярном уровне или что происходит с клеточной культурой в чашке Петри, а затем представляют дело так, что именно этот процесс и работает на вашу привлекательность. «Этот молекулярный компонент, — пишут они цветисто, — играет ключевую роль в формировании коллагена». Это чистая правда (и это относится ко многим аминокислотам, которые ваш организм использует для сборки белков в суставах, коже и т. д.), но нет оснований считать, что у кого-нибудь существует дефицит этого вещества или что, если вы им намажетесь, это положительно отразится на вашем внешнем виде. Чаще всего эти вещества плохо впитываются через кожу, потому что ее задача — быть относительно непроницаемой. Так, если вы с благотворительной целью сядете в ванну с вареными бобами, вы и не поправитесь, да и пучить вас не будет.

Несмотря на это, в любой аптеке (рекомендую посетить ее) вы увидите огромное количество магических ингредиентов. Вальмонтовский комплекс клеточной ДНК производится из «специально обработанной ДНК лососевой икры» (как сказано в обзоре в газете Times: «К сожалению, размазав лосось по своему лицу, вы не получите такого эффекта»); но совершенно ясно, что очень большая молекула ДНК вряд ли впитается через кожу и повлияет на метаболизм в ней, даже если это произойдет. Скорее всего, у вас нет недостатка в строительных блоках для ДНК в теле, там их и так уже уйма.

Рассуждая дальше, если даже ДНК лосося и впитывалась бы целиком через кожу, то вы бы получили инструкцию по созданию чуждых вам рыбьих клеток, что не нужно вам в силу человеческой природы. Было бы удивительно, если бы ДНК переваривалась прямо в коже (ваш пищеварительный тракт специально приспособлен для переваривания крупных молекул с помощью пищеварительных ферментов, которые расщепляют их на составные части для всасывания).

Через рекламу всех этих продуктов красной нитью проходит мысль о том, что организм легко обмануть, хотя в реальности это точно настроенная гомеостатическая система с обратной связью и средствами измерения, постоянно контролирующая количество разнообразных химических веществ, направляемых в различные части тела. Любое вмешательство в эту систему будет иметь эффект более сложный, чем тот, который рекламируется.

Отличный пример — многочисленные кремы (и другие косметические средства), которые, как утверждается, «доставляют кислород непосредственно в глубь кожи». Во многих из этих кремов содержится перекись водорода. Как убедить себя в ее эффективности? Химическая формула перекиси водорода — Н0; ее можно образно представить как воду «с дополнительным кислородом», хотя в действительности химические формулы не работают именно так. В конце концов, ржавчину можно считать железом «с дополнительным кислородом», но вряд ли кто-нибудь поверит, что она способна насыщать кислородом кожу.

Даже если мы этому поверим и предположим, что крем действительно доставит кислород к поверхности кожи и тот впитается прямо в клетки, что хорошего это даст? Мозг постоянно отслеживает количество крови и питательных веществ, направляемых в ткани, а также количество капилляров, питающих данную область. Если где-то кислорода не хватает, то там вырастут новые капилляры, так как это явный признак недостаточного кровоснабжения.

Даже если бы заявления о кислороде в креме, доставляемом прямо в ткани, оказались правдой, организм просто уменьшил бы кровоснабжение этой области, поддерживая гомеостаз. В жизни перекись водорода — это просто окислитель, при невысокой концентрации дающий легкий химический ожог, что объясняет ощущение свежести и появление румянца. То же самое относится и к другим надписям на упаковке.

Посмотрите внимательно на упаковку или рекламу, и вы увидите, что с вами просто играют в словесные игры при соучастии законодателей. Сложно найти конкретное утверждение о том, что нанесение именно этого чудодейственного компонента на лицо улучшит ваш внешний вид. Действие крема описывается «в целом», и это верно для крема в целом, так как вам уже известно, что все увлажняющие кремы, даже самые дешевые, действительно увлажняют.

Теперь, когда вы это узнали, шопинг становится еще более интересным. Связь между магическим ингредиентом и эффективностью существует только в уме пользователя, и, читая между строк рекламы, вы сможете увидеть, как производитель вместе с армией консультантов добился того, что этикетка крема стала привлекательной, а также — в глазах информированного педанта — семантически и законодательно безупречной. (Если вы хотите зарабатывать в этой области, то я рекомендую проторенную дорогу: сначала в организацию, регулирующую торговлю, рекламу или что-нибудь еще, потом уже в консультанты.)

Что не так с этим способом обмана? Стоит понять одну вещь: я не защищаю покупателей. Как и Национальная лотерея, косметика играет на людских мечтах, а люди сами решают, как тратить деньги. Я с легкостью сочту дорогую косметику — и большинство других форм шарлатанства — специальным добровольным налогом на тех, кто плохо понимает науку. Я также первым соглашусь, что люди покупают дорогую косметику не только потому, что верят в ее эффективность — это все немного сложнее. Такая косметика — роскошь, признак статуса, и покупают ее в том числе и по этим причинам.

Но этически это не совсем нейтрально. Во-первых, производители этих продуктов продают легкие пути для курильщиков и слишком полных людей, они продают идею того, что здоровье и красивое тело можно приобрести с помощью дорогих средств, а не с помощью простой старомодной зарядки и правильного питания. Эта мысль присутствует во всем мире ненауки.

Во-вторых, такая реклама продает опасный взгляд на мир, мысль о том, что наука не занимается тонкой связью теории и практики. Вместо этого они всей мощью своего рекламного бюджета, своими микроклеточными комплексами, Нейтриллиумом XY, нежными растительными пептидами и всем остальным заставляют нас верить в то, что наука — непостижимая чушь, состоящая из уравнений, молекул, научных диаграмм, бездоказательных поучительных заявлений авторитетных фигур в белых халатах, и что весь этот наукообразный вздор можно нарисовать на пустом месте для получения дополнительного дохода. Они со всей возможной энергией продают мысль о том, что наука непостижима, в первую очередь молодым привлекательным женщинам, так мало понимающим в науке.

По сути, они продают взгляд на мир как у куклы Барби-подростка от Mattel, которая своим сладеньким голоском может сказать что-то типа «Математика — это сложно!», «Мне нравится ходить по магазинам!», «У меня когда-нибудь будет достаточно одежды?», если нажать на соответствующую кнопку. В декабре 1992 года феминистская организация «За освобождение Барби» поменяла голоса сотен кукол Барби и Солдат Джо в американских магазинах. В Рождество дети услышали от Барби: «Мертвые не врут», сказанное приятным уверенным голосом, а от Солдат Джо: «Математика — это сложно!» и «Хочешь пройтись по магазинам?».

Работа организации «За освобождение Барби» еще не закончена.

4. Гомеопатия

А теперь перейдем к сути. Но до того как мы сделаем первый шаг в эту область, стоит понять одну вещь: вне зависимости от того, что думаете вы, мне не очень интересна нетрадиционная и альтернативная медицина (даже в названии есть своего рода тавтология). Мне интересна роль медицины, наши представления об организме и лечении, и в повседневной жизни меня восхищает сложность сбора данных о преимуществах и недостатках выбранного способа лечения. Гомеопатия — это просто один из инструментов.

И здесь мы встречаемся с крайне важным вопросом современной науки: как мы узнаем, что метод действует? Вне зависимости от того, что это: крем для лица, очищающая диета, школьные упражнения, витаминные таблетки, лекарство для сердца или программа воспитания детей — они проверяются на действенность одинаковым способом. Гомеопатия — это лучшее учебное пособие для доказательной медицины по одной простой причине: гомеопаты дают нам маленькие сахарные шарики — а их очень легко изучать.

К концу этой главы вы будете знать о доказательной медицине и планировании эксперимента больше, чем среднестатистический врач. Вы поймете, как эксперимент может пойти неправильно и дать ложные положительные результаты, как работает эффект плацебо и почему мы обычно переоцениваем эффективность таблеток. Важно и то, что вы увидите, как индустрия альтернативной медицины создает, внедряет и поддерживает мифы в области здоровья среди обычных людей, используя те же приемы, что и крупные фармацевтические компании в отношении врачей. Но это уже о чем-то большем, чем гомеопатия.

Что такое гомеопатия?

Гомеопатия, по-моему, — настоящий образец альтернативной медицины: она ссылается на богатое историческое наследие, но ее реальная история просто придумана в соответствии с нуждами рынка, она выработала наукообразное объяснение механизма работы, но о ее фактической эффективности нет научных данных; ее защитники уверяют, будто от пилюль вам станет лучше, хотя многочисленные эксперименты доказывают, что они не более эффективны, чем плацебо.

Гомеопатия была придумана немецким доктором Самуэлем Ганеманом (Samuel Hahnemann) в конце XVII века. В то время, когда медицина в основном состояла из кровопусканий, рвотных и тому подобных малоэффективных и опасных средств, когда новые лекарства изобретались на ходу сомнительными личностями, называвшими себя докторами, которые и не думали представлять какие-либо доказательства их реальной пользы, гомеопатия казалась достаточно осмысленной.

Теория Ганемана отличалась от общепринятой, потому что он решил (а лучшего слова не подберешь), что если он найдет средство, вызывающее симптомы болезни у здорового человека, то его можно будет использовать для лечения тех же симптомов у больного. Его первым гомеопатическим средством была кора хинного дерева, которую предлагалось использовать для лечения малярии. Он принял ее сам, в большой дозе, и у него появились симптомы, которые он счел похожими на малярию:

«Мои стопы и пальцы рук похолодели, я ощущал слабость и сонливость, сердцебиение усилилось, пульс стал твердым и быстрым, стало очень страшно… прострация- пульсация в голове, покраснение щек и мучительная жажда… перемежающаяся лихорадка… ступор… оцепенение…»

Ганеман предположил, что любой испытает такое же состояние, если примет хину (хотя есть данные, что у него был просто аллергический приступ). Но что более важно, он решил, что если даст немного хины больному малярией, то это устранит симптомы, а не вызовет их. Теория «лечить подобное подобным», которую он изобрел в тот день, по сути, является первым принципом гомеопатии[4].

Лечение травами и химическими веществами может быть опасным, так как они действительно оказывают влияние на организм (Ганеман установил, что они порождают симптомы). Решение этой проблемы пришло к нему в виде второго озарения, и это стало ключевой чертой той гомеопатии, которую большинство людей признают сегодня. Он решил (и опять нет лучшего слова), что если разбавить вещество, то это «потенцирует» его лечебные возможности, «увеличив» его «духовные исцеляющие силы», и одновременно (какая удача!) уменьшит побочные эффекты. На самом деле он пошел еще дальше: чем сильнее вы разводите вещество, тем более эффективно оно лечит те симптомы, которые в больших концентрациях вызывает. Просто разводить было мало. Ганеман решил, что это нужно делать особым способом, как некое действо или ритуал, поэтому он придумал процесс «суккуссии». С каждым разведением стеклянный стакан с лекарством нужно энергично встряхнуть десятью ударами о твердый, но эластичный предмет. Для этой цели Ганеман заказал у шорника конструкцию из деревянной доски, обитой конским волосом и покрытой кожей с одной стороны. Эти десять встряхиваний на современных заводах, производящих гомеопатические средства, делаются и сейчас, иногда с использованием специальных роботов.

За это время гомеопаты разработали множество лекарственных средств, а сам процесс разработки стал называться, достаточно вольно, испытаниями (proving, от немецкого Prufung). Группы добровольцев, от одного человека до нескольких дюжин, собираются и принимают шесть доз «испытываемого» вещества с разной степенью разведения в течение двух дней, ведя при этом дневник умственных, физических и эмоциональных явлений, включая сны.

В конце испытаний «ведущий испытатель» собирает данные из дневников, и длинный несистематизированный список симптомов и снов небольшой группы людей становится «картиной симптомов» для этого средства, записываемой в большую книгу и не меняющейся с течением времени. Когда вы идете к гомеопату, он или она пытается найти соответствие между описываемыми вами и выявленными «при испытаниях» симптомами.

Эта система имеет явные недостатки. Во-первых, вы не можете быть уверены, что воздействие на «испытателей» оказало принятое вещество, а не что-нибудь постороннее. Это может быть эффект ноцебо (обратный плацебо), когда люди чувствуют себя плохо, потому что этого ждут. (Я уверен, что могу вызвать у вас приступ тошноты, рассказав немного правды о том, что было в той готовой еде, которую вы последний раз ели.) Это может быть также формой групповой истерии («В этом диване есть клопы?»); у кого-то из них могло болеть что-нибудь, они все могли простудиться, и т. п. Но гомеопаты очень успешно выдают эти «испытания» за достоверные научные исследования. Например, если вы посетите сайт Boots the Chemist’s (www.bootslearningstore.co.uk) и посмотрите его обучающий модуль по альтернативной медицине для детей, вы увидите среди другой бессмыслицы по поводу гомеопатических средств, что испытания Ганемана считаются «клиническими испытаниями». Это неправда, как видите, но такое встречается нередко.

Ганеман проповедовал и на самом деле рекомендовал полное игнорирование физиологических процессов, происходящих в организме. Он считал организм «черным ящиком», в который входит лекарственное средство, производя на выходе эффект, и признавал только эмпирические данные о влиянии лекарства на симптомы («Наблюдение полной совокупности симптомов и обстоятельств в каждом конкретном случае, — говорил он, — единственный ключ к выбору лекарства»).

Это полностью противоречит риторике современных представителей альтернативной медицины: «Официальная медицина лечит только симптомы, а мы лечим причину». Сейчас, во времена лозунга «натуральное — значит хорошее», интересно отметить, что Ганеман ничего не говорил о «натуральности» гомеопатии и считал себя ученым.

Конвенциональная медицина во времена Ганемана была скована теорией и с гордостью обосновывала применяемые методы «рациональным» пониманием анатомии и физиологии человека. Доктора XVII века яро обвиняли гомеопатов в «примитивном эмпиризме» и избыточной опоре на наблюдение за выздоравливающими. Сейчас ситуация обратная: современная официальная медицина с радостью проигнорирует подробности механизма работы, если данные экспериментов показывают, что лекарство эффективно (наша цель — отказаться от неэффективных), тогда как гомеопаты придерживаются исключительно своих экзотических теорий и игнорируют огромный пласт отрицательных опытных данных об эффективности их средств. Возможно, это мелочь, но такое расхождение между словом и делом кое о чем говорит.

Проблема разведения

До того как мы углубимся в гомеопатию и посмотрим, работает ли она в действительности или нет, на нашем пути встанет серьезная проблема. Большинство людей знают, что гомеопатические средства разводят до такой степени, что в дозе средства нет ни одной молекулы действующего вещества. Чего вы можете не знать, это насколько сильно разведены эти средства. Типичное гомеопатическое разведение — это 3 °C, то есть исходное вещество разведено в пропорции одна капля на сотню [капель] 30 раз. В разделе «Что такое гомеопатия?» на сайте Общества гомеопатов, крупнейшей ассоциации гомеопатов в Англии, можно прочесть, что «3 °C содержит менее одной миллионной исходного вещества». «Менее одной миллионной», на мой взгляд, слишком неточно. Гомеопатическое разведение 3 °C — это разведение в 100 или 10, то есть единица с 60 нулями, или, в терминах Общества гомеопатов, «одна часть на миллион миллион миллион миллион миллион миллион миллион миллион миллион миллионов». Ясное дело, что это «меньше чем одна миллионная исходного вещества». Для сравнения представим себе олимпийский бассейн с 100 молекулами воды. Это будет водяной шар диаметром 150 миллионов километров (расстояние от Земли до Солнца). Свет проходит это расстояние за восемь минут. Разведение 3 °C — это водяной шар такого размера с одной молекулой действующего вещества[5]. В гомеопатическом разведении 20 °C (можно купить и большие разведения) действующее вещество разводится в количество раз большее, чем общее количество атомов во Вселенной. Если посмотреть с другой стороны, Вселенная занимает объем порядка 3 x 10 кубических метров (идеально для создания семьи). Если ее наполнить водой и добавить одну молекулу действующего вещества, это будет разведение примерно 55С.

Однако следует помнить, что сюрреалистичность заявлений гомеопатов по поводу того, как работают их средства, не имеет никаких последствий и не является основной в наших наблюдениях, которые состоят в том, что эти средства работают не лучше, чем плацебо. Мы не знаем, как работает общий наркоз, но уверены, что он действительно работает, и используем его, не обращая внимания на механизм его действия. Я сам резал человеку живот и копался в его внутренностях в операционном поле (спешу добавить, что это было под строгим наблюдением), пока он был отключен общим наркозом, и пробелы в наших знаниях о методе действия наркоза не мешали ни мне, ни моему пациенту.

Более того, когда Ганеман придумал гомеопатию, никто не знал о таких проблемах, потому что итальянский физик Амадео

Авогадро (Amadeo Avogadro) и его последователи еще не выяснили, сколько молекул содержит определенный объем данного вещества, не говоря уже о количестве атомов во Вселенной. Люди тогда не знали даже о том, что такое атомы. И как поступили гомеопаты с новыми знаниями? Сказали, что отсутствие молекул действующего вещества не важно, потому что «у воды есть память». Это может быть правдой в масштабе ванны или пробирки с водой. Но если подумать в целом о масштабе этих объектов, то (хотя гомеопаты и представляют дело именно так) крупная молекула арники не сможет деформировать маленькую молекулу воды и оставить на ней отпечаток. Это похоже на попытку с помощью куска пластилина размером с горошину получить оттиск всей поверхности дивана. Физики изучали свойства воды в течение многих десятилетий и пришли к выводу, что молекулы воды действительно формируют структуры вокруг молекулы примеси, но за счет броуновского движения эти структуры очень коротко- живущие, их срок существования измеряется пикосекундами и может быть даже меньше. Это очень ограниченный «срок хранения».

Иногда гомеопаты вытаскивают аномальные результаты физических экспериментов и предполагают, что это доказывает эффективность их метода. У них встречаются просто восхитительные ошибки, о которых можно прочитать повсеместно (чаще всего гомеопатическое средство, которое только с помощью очень чувствительного лабораторного оборудования можно отличить от простой воды, оказывалось приготовлено совершенно другим способом, из других ингредиентов, что и было определено в лаборатории). В подтверждение этого можно упомянуть и то, что американский фокусник и разоблачитель сверхъестественного Джеймс Рэнди предложил миллион долларов в награду тому, кто продемонстрирует «сверхъестественное явление» в лабораторных условиях, и особенно указал, что приз может получить и тот, кто достоверно отличит гомеопатическое средство от простой воды любым способом. Приз еще никто не получил.

Даже если просто посмотреть, в теории «памяти воды» есть концептуальные пробелы, большинство из которых можно найти самостоятельно. Если у воды действительно есть память, а разведение 10 работает, то к данному моменту вся вода должна представлять собой гомеопатическую панацею из всех молекул мира. Вода плещется вокруг земного шара уже очень долго: я сижу в Лондоне и печатаю, а вся вода в моем теле уже побывала во множестве людских тел до меня. Может быть, какие-то из молекул воды, которые были у меня на пальцах, сейчас в вашем глазу. Может быть, какие-то из молекул воды, питавшие мои нервные клетки, когда я думал, написать ли в этом предложении «писи» или «моча», сейчас в мочевом пузыре королевы Англии (Боже, благослови королеву!): вода уравнивает всех, она есть всюду. Стоит только посмотреть на облака.

А как молекула воды узнает, что нужно забыть все, что она видела раньше? Как она узнает, что мой синяк нужно лечить памятью арники, а не памятью фекалий Айзека Азимова? Я однажды написал такое в газете, и один гомеопат подал на меня в суд. Он утверждал, что это суккуссия, а не просто разведение. Нужно энергично стукнуть колбу десять раз о поверхность из кожи и конского волоса, и тогда вода запомнит конкретную молекулу. Он объяснил, что, поскольку я не упомянул об этом, я намеренно представил гомеопатов идиотами. Это целая вселенная человеческой глупости.

Хотя все гомеопаты говорят о «памяти воды», стоит вспомнить, что в действительности вы принимаете маленькую сахарную пилюлю, а не чайную ложку гомеопатической воды, поэтому стоит также подумать и о памяти сахара. Память сахара — это то, что остается в сахаре, после того как из него испаряется вода, запомнившая что-то (разведенное в число раз большее, чем количество атомов во Вселенной). Я пытаюсь сказать максимально понятно, потому что не хочу выслушивать обвинения.

Если этот сахар, запомнивший то, что запомнила вода, попадает в тело, он должен как-то воздействовать на него. Как? Никто не знает, но пилюли нужно принимать регулярно, без перерывов, в дозировке, странно похожей на дозировку аллопатических лекарств (она подбирается в зависимости от того, насколько быстро лекарство выводится из организма).

Я требую честного испытания

Теоретическая невозможность действия гомеопатии интересна, но она не поможет выиграть в споре. Сэр Джон Форбс (John Forbes), врач королевы Виктории, указал на проблему разведения в XIX веке, но за 150 лет решение так и не было найдено. Реальный вопрос с гомеопатией прост: она работает? По сути, откуда мы знаем, что какое-либо лекарство работает?

Симптомы — штука субъективная, поэтому любой возможный способ доказать преимущество того или иного лекарства должен основываться на конкретном человеке и его состоянии. Давайте представим, что мы говорим или даже спорим с человеком, считающим, что гомеопатия работает, испытавшим это самостоятельно и почувствовавшим себя лучше с ее помощью. Он скажет: «Я уверен только в том, что чувствую, что она работает. Мне лучше, когда я принимаю гомеопатические пилюли». Для него это кажется очевидным, и так и есть. Утверждение сильное, но в его простоте есть ошибки. Что бы ни случилось, утверждение считается верным.

Но вы можете сказать: «Ну, это мог быть эффект плацебо»; ведь эффект плацебо гораздо более сложный и интересный, чем большинство людей предполагают; он выходит за пределы простого приема сахарных пилюль, он касается всего культурного багажа, связанного с лечением, ожиданий до лечения, процесса консультаций у врача во время лечения и многого другого.

Например, известно, что две сахарных пилюли лечат лучше, чем одна, а инъекция соленой воды обезболивает лучше, чем сахарные пилюли, не потому, что она действует на организм, а потому, что воспринимается как более серьезное средство. Известно, что влияет и цвет таблеток, их упаковка, их цена и даже ожидания человека, держащего их в руках. Мы знаем, что плацебо- операции лечат боли в коленях и стенокардию. Плацебо-эффект работает на детях и животных. Он очень мощный и хитрый, и вы узнаете о нем почти все, когда прочтете главу о плацебо.

Таким образом, когда любитель гомеопатии говорит, что от гомеопатии ему стало лучше, то можно ответить: «Может быть, но самочувствие может улучшиться и от эффекта плацебо». Он не сможет возразить, потому что он не сможет узнать, стало ли ему лучше из-за эффекта плацебо или из-за пилюль. Максимум, что он может сказать, это повторить первое высказывание: «Я уверен только в том, что чувствую, что она работает. Мне лучше, когда я принимаю гомеопатические пилюли». Вы можете ответить: «Может быть. Но может быть и то, что вы чувствуете себя лучше из-за возврата к исходному уровню». Это одна из иллюзий познания, описанных в этой книге, основная ошибка в наших рассуждениях, заставляющая нас видеть связи и взаимодействия в тех местах, где в действительности их нет.

«Возврат к исходному уровню» — это другое название для явления, о котором в альтернативной медицине говорят «у всякой болезни свой естественный цикл». Допустим, у вас болит спина. Боль то усиливается, то спадает. Бывают дни похуже, бывают и получше, бывают недели похуже, бывают и получше. Когда вы воете от боли, скоро она спадет, потому что ваша боль ведет себя именно так. И у многих болезней есть свой «естественный ход»: за ухудшением следует улучшение. Как цинично сказал Вольтер: «Искусство медицины состоит в развлечении пациента, пока природа лечит болезнь». Допустим, вы простудились. Через несколько дней вам станет лучше, но сейчас все совсем плохо. Естественно, что, когда вам плохо, вы пытаетесь улучшить свое состояние. Вы можете принять гомеопатическое средство. Вы можете принести в жертву козла и намотать его внутренности вокруг шеи. Вы можете попросить терапевта назначить вам антибиотики (советы приведены в порядке возрастания их глупости).

Потом, когда вам станет лучше (как всегда при простуде), вы сочтете, что то, что вы делали, когда вам было хуже всего, вас и вылечило, post hoc ergo propter hoc (после этого — значит вследствие этого) и т. п. Потом, когда вы опять простудитесь, вы будете упрашивать вашего терапевта выписать антибиотики. Он будет отказываться, а вы — настаивать, потому что в прошлый раз они помогли, а устойчивость микрофлоры к антибиотикам будет только возрастать (из-за такой глупости пожилые люди умирают от инфекций, чьи возбудители устойчивы к антибиотикам, но это уже другая история[6]).

Если хотите, то можете посмотреть на возврат к исходному уровню и с математической точки зрения. На шоу Брюса Форсита «Разыграй свои карты правильно», когда Брюс выкладывает тройку, вся аудитория кричит «Больше!», потому что знает, что велика вероятность того, что следующая карта будет больше тройки. Но что вы кричите, когда появляется валет? «Больше?» — «Меньше!»

Более серьезную версию возврата к исходному уровню американцы называют проклятием обложки журнала Sport Illustrated: если спортсмен появляется на обложке этого журнала, то его результаты скоро упадут. Но чтобы попасть на обложку этого журнала, нужно быть в наилучшей форме, быть лучшим за неделю и очень удачливым. Удача обычно заканчивается, возвращаясь к исходному уровню самостоятельно, как это бывает при игре в кости. Если вы не можете это понять, то вы будете искать другую причину для спада и найдете… проклятие Sport Illustrated.

Гомеопаты увеличивают вероятность успешного лечения, рассказывая о «кризисах» и разъясняя, что при приеме правильно подобранного лекарства состояние может сначала ухудшиться, а только потом улучшиться, и это часть нормального процесса лечения. Точно так же люди, продающие средства для детоксикации, часто рассказывают, что при применении этих средств состояние может ухудшиться, так как токсины выходят из тела: с учетом этих обещаний все, что может случиться с вами после начала лечения, является доказательством проницательности врача.

Теперь мы вернемся к любителю гомеопатии и скажем: «Вы чувствуете, что вам лучше, я согласен. Но это может быть возвращение к исходному уровню, то есть просто естественное течение болезни». Опять же он не скажет «нет» (возможно, только в гневе), потому что он не сможет узнать, стало ли ему лучше естественным путем и это просто совпало с его посещением гомеопата. «Возврат к исходному уровню» может быть прекрасным объяснением его выздоровления. Он может только повторить: «Я уверен только в том, что чувствую, что она работает. Мне лучше, когда я принимаю гомеопатические пилюли».

Это может продолжаться достаточно долго. Но проблемы начинаются, когда он скажет «Гомеопатия работает» или пробурчит по поводу науки. Мы не можем принять решение на эту тему на основе опыта одного человека из-за вышеуказанных проблем: эффект плацебо может быть принят за действие лекарства и наоборот. Даже если мы увидим одного больного, несомненно, выздоровевшего от рака четвертой стадии, его опыт нужно будет использовать с осторожностью, потому что бывает, что чудеса все-таки случаются. Иногда, но не слишком часто.



Pages:     || 2 | 3 | 4 | 5 |   ...   | 9 |
 




<
 
2013 www.disus.ru - «Бесплатная научная электронная библиотека»

Материалы этого сайта размещены для ознакомления, все права принадлежат их авторам.
Если Вы не согласны с тем, что Ваш материал размещён на этом сайте, пожалуйста, напишите нам, мы в течении 1-2 рабочих дней удалим его.