Книга: Одураченные случайностью
Назад: ГЛАВА ВОСЬМАЯ Слишком много миллионеров по соседству
Дальше: ГЛАВА ДЕСЯТАЯ Неудачник забирает все - нелинейности жизни

ГЛАВА ДЕВЯТАЯ
Легче купить или продать, чем пожарить яичницу

Некоторые технические расширения пристрастия выживания. Распределение "совпадений" в жизни. Предпочтительно быть счастливым, чем компетентным (но вас можно поймать). Парадокс дня рождения. Большее количество шарлатанов (и большее количество журналистов). Как может исследователь с этикой работы находить хоть что-нибудь в данных. Не лающие собаки.
В этот полдень у меня будет встреча с моим дантистом (главным образом, она будет состоять в извлечении дантистом из моего мозга сведений о бразильских облигациях). Я могу заявить с некоторым уровнем комфорта, что он кое-что знает о зубах, особенно если я вхожу в его офис с зубной болью, и выхожу с некоторым облегчением. Для того, кто буквально ничего не знает о зубах, будет трудно обеспечить меня такой помощью, разве что он является особенно удачливым в такой день - или был очень удачлив в жизни, чтобы стать дантистом, не зная ничего о зубах. Глядя на его диплом на стене, я решаю, что шансы на то, что он неоднократно давал правильные ответы на вопросы экзаменов и удовлетворительно лечил несколько тысяч дырок прежде, чем окончил колледж, простая случайность -является замечательно маленькими. Позже вечером, я иду в Карнеги-Холл. Я немного могу сказать о пианистке; я даже забыл ее незнакомо звучащее иностранное имя. Все, что я знаю - что она училась в некоей Московской консерватории. Но я могу предполагать, что услышу фортепьянную музыку. Трудно предположить, что некто исполнял музыку в прошлом достаточно блестяще, чтобы попасть в Карнеги-Холл, а теперь, оказывается, что ему лишь везло. Предположение о наличие мошенника, который ударяет по фортепьяно, производя лишь какофонию, на самом деле является столь несущественным для меня, что это можно полностью исключить.
В прошлую субботу я был в Лондоне. Субботы в Лондоне волшебны; шумны, но без механической шумности буднего дня или грустного увядания воскресенья. Без часов и планов я оказался перед моей любимой резной работой Каковы в Музее Альберта и Виктории. Профессионал во мне проснулся и немедленно задал вопрос, играла ли случайность большую роль в вырезании этих мраморных статуй. Тела были реалистичной репродукцией человеческих фигур, за исключением того, что они были более гармоничны и точнее сбалансированы, чем что-либо, что я видел мать-природа производит сама («Обработка лучше материала» Овидия приходит на ум). Могла ли такая тонкость быть продуктом удачи?
Практически, я могу сделать то же самое утверждение о любом работающем в физическом мире или в бизнесе, где степень случайности является низкой. Но есть проблема, связанная с деловым миром. Я обеспокоен, потому что завтра, к сожалению, у меня назначена встреча с менеджером фонда, ищущим моей помощи, и помощи моих друзей, в привлечении инвесторов. Он имеет то, что считает хорошим отчетом о сделках. Все, что я могу заключить из этого - что он научился покупать и продавать. Но тяжелее жарить яичницу чем, покупать и продавать. Хорошо ... факт, что он сделал деньги в прошлом может иметь некоторую уместность, но не так уж сильно. Нельзя сказать, что это всегда так; есть некоторые случаи, когда можно доверять отчету о сделках, но, увы, их не так много. Как читатель понимает теперь, можно ожидать, что я буду перебивать менеджера фонда в течение представления, особенно если он не будет выказывать минимума смирения и неуверенности в себе, которую я ожидал бы от того, кто практикует случайность. Я, вероятно, буду забрасывать его вопросами, на которые он может оказаться не готов отвечать, ослепленный своими прошлыми результатами. Я, вероятно, прочту ему лекцию, что Макиавелли приписывал удаче, по крайней мере, 50% роль в жизни (остальное было хитрость и смелость), и это было до создания современных рынков.
В этой главе, я обсуждаю некоторые хорошо известные, противоречащие интуиции, свойства отчетов о сделках и исторического временного ряда Концепция, представленная здесь, хорошо известна некоторыми своими вариациями: пристрастие выживания, выкапывание данных, выискивание данных, подгонка, регресс к среднему и т.п. В основном, это ситуации, где результативность преувеличена наблюдателем, вследствие неправильного восприятия важности случайности. Ясно, что эта концепция имеет нарушающее порядок значение. Она простирается на большее количество общих ситуаций, где случайность может играть роль, типа выбора лечения или интерпретации совпадающих событий. Когда меня соблазнят предложить возможный будущий вклад в науку финансовых исследований вообще, я представлю анализ выкапывания данных и изучения пристрастий выживания. Они были отточены на финансах, но могут простираться на все области научного исследования. Почему финансы столь богатая область? Потому, что это одна из редких областей исследования, где мы имеем большое количество информации (в форме избыточного ценового ряда), но никакой способности провести эксперименты, скажем, как в физике. Эта зависимость от прошлых данных приносит существенные дефекты.
Одураченные числами
Плацебо-инвесторы
Я часто сталкиваюсь с вопросами типа: "Кто вы такой, чтобы говорить, что я всего лишь удачлив в своей жизни?" Никто, в действительности, не верит, что он или она были просто удачливы. Мой подход состоит в том, чтобы с генератором Монте-Карло моделировать вполне случайные ситуации. Мы можем сделать точную противоположность обычных методов: вместо поисков и анализа атрибутов реальных людей, мы можем создать искусственных с точно известными признаками. Таким образом, мы сможем моделировать ситуации, которые зависят от чистой, настоящей удачи, без тени навыков или всего того, что мы называли не-удачей в Таблице 1. Другими словами, мы можем делать чистых бестелесных человеков, над которыми можем посмеяться; они будут, в соответствии с проектом, лишены любой тени способностей (в точности подобно плацебо-таблеткам). Мы видели в Главе 5, как люди могут выживать вследствие черт, которые на мгновение соответствуют данной структуре случайности. Здесь мы берем более простую ситуацию, в которой мы знаем структуру случайности. Первое такое упражнение -улучшение старого популярного высказывания, что даже сломанные часы верны два раза в день. Мы пойдем немного дальше, чтобы показать, что статистика - обоюдоострый нож. Давайте используем генератор Монте-Карло и создадим популяцию из 10,000 воображаемых инвестиционных менеджеров (генератор не слишком необходим, так как мы можем использовать монету или даже простую алгебру, но он более иллюстративен - и забавен). Предположим, что каждый из них участвует в совершенно справедливой игре; каждый имеет вероятность 50% получения 10,000$ в конце года, и вероятность 50% проигрыша 10,000$. Позволим себе дополнительное ограничение: как только менеджер завершает отдельный плохой год, он выбрасывается из выборки, до свидания и привет. Таким образом, мы будем работать подобно легендарному спекулянту Джорджу Соросу, который, как считают, говорил своим менеджерам, собранным в комнате: "Половина из вас. парни, вылетит к следующему году" (с восточноевропейским акцентом). Подобно Соросу, мы имеем чрезвычайно высокие стандарты, мы ищем только менеджеров с незапятнанным отчетом о сделках. Мы не терпим малоуспешных исполнителей.
Генератор Монте-Карло бросит монету: орел, и менеджер будет делать 10,000$ за этот год, решка, и он будет терять 10,000$. Мы запускаем его для первого года. Мы ожидаем в конце года, что
5,000 менеджеров будут в плюсах на 10,000$ каждый, и 5,000 будут в минусах на 10,000$. Теперь мы запускаем игру за второй год. Снова, мы можем ожидать, что 2,500 менеджеров будут в плюсах два года кряду; в следующем году, 1,250; в четвертом - 625; в пятом - 313. Мы имеем теперь, в этой простой справедливой игре, 313 менеджеров, которые сделали деньги в течение пяти лет подряд. Из чистой удачи.
Никто не должен быть компетентен
Давайте сделаем все это более интересным. Мы создадим когорту, состоящую исключительно некомпетентных менеджеров. Мы определяем некомпетентного менеджера, как менеджера, который имеет отрицательный ожидаемый доход, эквивалент шансов, складывающихся против него. Теперь Мы заставляем генератор Монте-Карло вытягивать шары из урны. Урна содержит 100 шаров, 45 черных и 55 красных. Заменяя вытянутый шар, мы сохраняем соотношение красных и черных шаров тем же самым. Если мы вытянем черный шар, менеджер заработает 10,000$. Если вытянем красный шар, он потеряет 10,000$. Таким образом, ожидается, что менеджер заработает 10,000$ с вероятностью 45%, и потеряет 10,000$ с вероятностью 55%. В среднем, менеджер потеряет 1,000$ в каждом раунде - но только в среднем.
В конце первого года, мы все еще ожидаем, что 4,500 менеджеров имеют прибыль (45% из них), в конце второго - 45% из этого числа, 2,025. Третьего -911, четвертого - 410, пятого -184. Давайте дадим выжившим менеджерам имена и оденем их в деловые костюмы. Они составляют менее 2% первоначальной когорты. Но внимание сосредоточено на них и никто не упомянет другие 98%. Что мы можем заключить?
Первый, противоречащий интуиции пункт - популяция, полностью состоящая из плохих менеджеров, произведет маленькое количество великолепных отчетов о сделках. Фактически, обнаруживая менеджера у вашей двери, будет невозможно вычислить, является ли он хорошим или плохим. Результаты заметно не изменились бы, даже если популяция была бы полностью составлена из менеджеров, которые, как ожидается, в конечном счете будут терять деньги. Почему? Потому, что вследствие волатильности, некоторые из них будут делать деньги. Мы здесь видим, что волатильность фактически помогает плохим инвестиционным решениям.
Второй, противоречащий интуиции пункт - ожидание максимума отчетов о сделках, в котором мы заинтересованы, больше зависит от размера начальной выборки, чем от индивидуальных шансов менеджера. Другими словами, число менеджеров с великолепными отчетами о сделках на данном рынке зависит гораздо больше от числа людей, которые стартовали в инвестиционном бизнесе (вместо поступления в школу стоматологов), чем от их способности производить прибыль. Оно также зависит от волатильности. Почему я использую понятие ожидание максимума? Поскольку я не интересуюсь средним отчетом о сделках вовсе. Я хочу видеть только лучших из менеджеров, а не всех менеджеров. Это означает, что мы увидим большее количество "превосходных менеджеров" в 2002, чем в 1998, если когорта новичков в 1997 была больше, чем в 1993 - я могу благополучно сказать, что так было.
Эргодичность
Если говорить технически, я должен сказать, что люди думают, будто они могут вычислить свойства распределения из выборки, свидетелями которой они являются. Когда появляются вопросы, которые зависят от максимума, то, в целом, выводится другое распределение, распределение лучших исполнителей. Мы называем разницу между таким средним распределением и безусловным распределением победителей и проигравших пристрастием выживания - здесь, это факт, что, приблизительно, 3% начальной когорты будут делать деньги пять лет подряд. Кроме того, этот пример иллюстрирует свойства эргодичности, а именно, что время устранит раздражающие эффекты случайности. Забегая вперед, несмотря на то, что эти менеджеры были прибыльны в прошлых пяти годах, мы ожидаем, что они станут убыточными в будущем периоде времени. Они будут поживать не лучше, чем те из начальной когорты, кто потерпел неудачу ранее в этом упражнении. Ох уж, эта долгосрочность. Несколько лет назад, когда я сказал А., бывшему тогда Типа-Хозяина-Вселенной, что отчеты о сделках относились к делу гораздо меньше, чем ему казалось, он нашел это замечание настолько оскорбительным, что даже яростно бросил в меня свою зажигалку. Эпизод научил меня многому. Помните, что никто не принимает случайность в своем собственном успехе, только в своей неудаче. Его эго было раздуто, поскольку он возглавлял отдел "великих трейдеров", которые тогда, временно, делали состояние на рынках. Впоследствии они "взорвались" в течение ужасной нью-йоркской зимы 1994 года (это было крушение рынка облигаций, которое последовало за неожиданным изменением ставки процента Аланом Гринспеном )( Алан Гринспен -Председатель Совета Директоров Федеральной резервной Системы США в 1990х. Возглавляемый им Комитет по открытому рынку решал вопросы понижения или повышения процентных ставок с целью монетаристского регулирования экономики. (Прим.перев)). Интересная вещь, что шесть лет спустя, я едва ли мог найти кого-нибудь из них все еще занимающимся торговлей (эргодичность).
Вспомним, что пристрастие выживания зависит от размера начальной популяции. Информация, что человек сделал деньги в прошлом, сама по себе, не является ни значимой, ни уместной. Мы должны знать размер популяции, из которой он вышел. Другими словами, без знания того, сколько менеджеров попробовали и потерпели неудачу, мы будем не способны оценить обоснованность отчета о сделках. Если начальная популяция состояла из десяти менеджеров, то я, не моргнув глазом, дал бы исполнителю половину моих сбережений. Если же начальная популяция состояла из 10,000 менеджеров, то я бы игнорировал результаты. Имеет место, в общем случае, последняя ситуация; в наши дни очень много людей было притянуто на финансовые рынки. Много выпускников колледжа занимаются торговлей, с начала карьеры, неудача, затем переход в стоматологическую школу.
Если, как в сказке, эти вымышленные менеджеры превратились бы в реальных людей, то один из них мог бы стать человеком, с которым я встречаюсь завтра, в 11.45 утра. Почему я выбрал 11.45 утра? Потому, что я буду спрашивать о его стиле торговли. Я должен знать, как он совершает сделки. И если менеджер слишком сильно акцентирует внимание на своем отчете о сделках, я буду иметь возможность сказать, что мне надо торопиться на деловой ленч.
Жизнь - это совпадение
Теперь мы посмотрим на расширения в реальной жизни нашего пристрастия в понимании распределения совпадений.
Таинственное письмо
Вы получаете анонимное письмо, 2-ого января, сообщающее Вам, что рынок будет повышаться в течение месяца. Это оказывается правдой, но вы игнорируете его, вследствие известного эффекта января (исторически, акции повышались в течение января). Тогда вы получаете другое письмо, 1-ого февраля, сообщающее вам, что рынок понизится. Снова, это оказывается правдой. Потом вы получаете другое письмо, 1 -ого марта - та же история. К июлю вы заинтригованы предвидением анонимного человека и вас просят вложить капитал в специальный оффшорный фонд. Вы вкладываете туда все ваши сбережения. Двумя месяцами позже, ваши деньги пропали. Вы проливаете слезы на плече вашего соседа и он сообщает вам, что он помнит, что он получил два таких таинственных письма. Но почтовые послания остановились на втором письме. Он вспоминает, что первое предсказание был правильным, а второе - нет.
Что случилось? А трюк в следующем. Мошенник-оператор тянет 10,000 имен из телефонной книги. Он отправляет бычье письмо одной половине выборки, и медвежье - другой половине. В следующем месяце, он выбирает имена людей, кому он отправил письма с правильным предсказанием, то есть 5,000 имен. В следующем месяце он делает то же самое для оставшихся 2,500 имен, пока список не сузится до 500 человек. Из них 200 будут жертвами. Инвестиция нескольких тысяч долларов в почтовые марки превратится в несколько миллионов.
Прерванная игра в теннис
Часто, при просмотре теннисной игры по телевидению, вас засыпают рекламными объявлениями от фондов, которые сделали (до этой минуты) лучший результат, больший на некоторый процент, чем у других, в течение некоторого периода. Но, опять, разве рекламировался бы кто-нибудь, если бы он не переиграл рынок? Существует довольно высокая вероятность инвестиции, ищущей вас, что ее успех полностью вызван случайностью. Такое явление экономисты и страховщики называют неблагоприятной селекцией. Оценка инвестиции, которая ищет вас, требует более строгих стандартов, чем оценка инвестиции, которую ищете вы, вследствие такого пристрастного выбора. Например, идя в когорту, составленную из 10,000 менеджеров, я имею 2/100 шанса для обнаружения поддельного, но оставшегося в живых. Оставаясь дома и отвечая на звонки в мою дверь, шанс ходатайствующей стороны, оказаться поддельной, но оставшейся в живых, ближе к 100%.
Парадокс дня рождения
Наиболее интуитивный способ описать проблему выкапывания данных не статистику - через то, что называется парадоксом дня рождения, хотя это и не настоящий парадокс, а просто причуда восприятия. Если вы встречаете кого-то случайно, есть один шанс из 365.25, что ваши с ним дни рождения совпадают, и значительно меньший шанс совпадения с ним года рождения. Итак, тот же самый день рождения был бы совпадением, которое вы бы обсуждали за обеденным столом. Теперь посмотрим на ситуацию, в которой есть 23 человека в комнате. Каковы шансы, что там окажутся два человека с одинаковым днем рождения? Приблизительно 50%. Поскольку мы не определяем, у каких людей должны совпадать дни рождения, подходят любые пары.
Мир тесен!
Подобное неправильное представление о вероятности возникает в результате случайных столкновений, которые могут произойти с родственниками или друзьями в самых неожиданных местах. "Мир тесен" произносится часто и с удивлением. Но такие события не невероятны, хотя мир намного больше, чем мы думаем. Только мы не проверяем шансы встретить определенного человека, в определенном месте, в определенное время. Скорее, мы просто прикидываем шансы любой встречи, с любым человеком, которого мы когда-либо встречали в прошлом, в любом месте, которое мы посетим в течение интересующего периода. Вероятность последнего значительно выше, возможно, в несколько тысяч раз больше величины другого.
Когда статистик смотрит на выборку данных, чтобы проверить заданное соотношение, скажем, разведать корреляцию между возникновением данного события, типа политического заявления и волатильностью рынка акций, то шансы таковы, что результаты можно принимать всерьез. Но когда в компьютер забрасывают данные, в поисках любого соотношения, с уверенностью можно сказать, что появится ложная связь, типа зависимость рынка акций от длины женских юбок. И точно так же, как совпадения дней рождений, это поразит людей.
Раскапывание данных, статистика и шарлатанство
Какова вероятность для вас выиграть в Нью-джерсийской лотерее дважды? Один шанс из 17 триллионов. И все же это случилось с Эвелин Адаме, кого читатель мог бы считать избранной судьбой. Используя метод, который мы развивали выше, Перси Диаконис и Фредерик Мостеллер, из Гарварда, оценили шансы в 30 к 1, что кто-либо, где-нибудь, полностью неоднозначным способом, станет настолько удачливым!
Некоторые люди переносят свою деятельность по выкапыванию данных в богословие - в конце концов, древнее Средиземноморье имело обыкновение читать потенциальные сообщения по внутренностям птиц. Интересное расширение выкапывания данных на библейские толкования представлено в Коде Библии неким Майклом Дроснином. Дроснин, бывший журналист (по-видимому, не замешанный в любом обучении статистике), при содействии "математика", помог "предсказать" убийство премьер-министра Израиля Рабина, расшифровывая код Библии. Он информировал Рабина, который, очевидно, не принял это слишком серьезно. Код Библии находит статистические нерегулярности в Библии, что помогает предсказывать некоторые такие события. Само собой разумеется, что книга имела хороший сбыт.
Лучшая книга, какую я когда-либо читал!
Мое любимое времяпрепровождение проходит в книжных магазинах, где я бесцельно двигаюсь от книги к книге, в попытке принять решение относительно того, стоит ли тратить время на ее чтение. Мои покупки часто основаны на импульсах, базирующихся на поверхностных, но наводящих на размышления, ключах. Часто, лишь только суперобложка помогает мне принять решение. Они, обычно, содержат похвалу кого-то, известного или не очень, или выдержки из книжного обзора. Хорошая похвала известного и уважаемого человека или известного журнала, могла бы подвигнуть меня на покупку книги.
В чем проблема? Я имею тенденцию путать книжный обзор, который, как предполагается, является оценкой качества книги, с обзорами лучших книг, испорченными теми же самыми пристрастиями выживания. Я путаю распределение максимума переменной с распределением самой переменной. Издатель никогда не будет печатать на суперобложке что-либо, кроме лучших похвал. Некоторые авторы идут даже на шаг дальше, публикуя прохладный или даже неблагоприятный книжный обзор, но выбирая слова в нем, которые кажутся хвалебными для книги. Один такой пример - некий Пауль Вилмотт (английский финансовый математик редкого блеска и непочтительности), который сумел объявить, что я дал ему его "первый плохой обзор", и все же использовал выдержки из этого обзора, в качестве похвалы на суперобложке (позже мы стали друзьями, что позволило мне получить подтверждение от него).
Первый раз меня одурачило такое пристрастие при покупках в 16 лет. Это была книга Джона Дос Пассеса, американского автора, Манхэттэнское перемещение. И я основывался на похвале на суперобложке философа Жан-Поля Сартра, которая гласила в том смысле, что Дос Пассес был самый большой писатель нашего времени. Эта простая ремарка, которую выпаливают возможно в состоянии опьянения или чрезвычайного энтузиазма, вызвала потребность чтения Дос Пассеса в европейских интеллектуальных кругах, поскольку ремарка Сартра была ошибочно принята за согласную оценку качества Дос Пассеса, вместо того, чем она являлась на самом деле - просто лучшей ремаркой. (Несмотря на получение Нобелевской премии по литературе, Дос Пассес вернулся во мрак.)
Тестер исторических данных
Программист помог мне построить тестировщик исторических данных или бэктестер. Это программа, связанная с базой данных исторических цен, которая позволяет мне проверять гипотетическую прошлую результативность любого правила для торговли средней сложности. Я могу просто применять механическое правило торговли, подобное покупке акции, если она закрывается более, чем на 1.83% выше её средней цены предыдущей недели и немедленно получаю идею относительно прошлой результативности такого правила. Экран высветит мой гипотетический отчет о сделках, связанных с этим правилом торговли. Если мне не нравятся результаты, я могу изменять процент, скажем, 1.2%. Я могу также сделать правило более сложным. Я буду продолжать пробовать, пока я не найду хорошо работающий набор правил.
Что я делаю? Точно та же самая задача поиска оставшихся в живых в пределах набора правил, которые, возможно, могут работать. Я приспосабливаю правило к данным. Такая деятельность называется выискиванием данных. Чем больше я пробую, тем больше вероятность простой удачной находки правила, которое работало на прошлых данных. Случайный ряд будет всегда представлять некоторую обнаружимую модель. Я убежден, что существует торгуемая ценная бумага в Западном мире, которая на 100% коррелированна с изменениями температуры в Улан-Баторе, столице Монголии. Говоря технически, есть даже худшие расширения. Не давняя! выдающаяся статья Салливана, Тиммермана и Уайта идет дальше и полагает, что правила, которые могут успешно использоваться сегодня, могут быть результатом пристрастия выживания.
Предположим, что какое-то время, инвесторы экспериментировали с техническими правшами торговли, вытянутыми из очень широкого пространства - в принципе, тысячи параметризаций разнообразных типов правил. С течением времени, правша, которые, оказались исторически хорошо результативными, получают большее внимание и рассматриваются, как "серьезные соперники" инвестиционным сообществом, в то время как неудачные правила торговли, более вероятно, будут забыты .... Если рассматривается достаточное число правш торговли в течение времени, то некоторые правша, благодаря чистой удаче, далее в очень большой выборке, производят превосходный результат, даже если они совсем не обладают прогнозирующей властью над доходностью актива. Безусловно, вывод, основанный исключительно на подмножестве выживших правш торговли может вводить в заблуждение в этом контексте, так как он не учитывает полный набор начальных правш торговли, большинство из которых вряд ли будет иметь меньшую результативность.
Я вынужден порицать некоторую чрезмерность в тестировании исторических данных, которую я наблюдал в течение своей личной карьеры. Есть превосходный продукт, предназначенный только для этого, называемый Omega TradeStation, который предлагается в настоящее время на рынке и используется десятками тысяч трейдеров. Он даже предлагает свой собственный компьютерный язык. Борясь с бессоницей, компьютеризированные трейдеры стали тестировщиками, пропахивающими данные в поисках некоторых их свойств. Они бросают своих обезьянок на пишущие машинки, без того, чтобы определить, что за книгу они хотят, чтобы писала их обезьянка, и жаждут натолкнуться где-нибудь на гипотетическое золото. Многие из них слепо верят в это.
Один из моих коллег, человек с престижными степенями дошел в своей вере в такой виртуальный мир до точки полной потери всякого смысла реальности. Могла ли капелька здравого смысла, остававшаяся в нем быстро исчезнуть под насыпями моделирований или у него не оставалось ничего, я не могу сказать. Близко наблюдая его, я узнал, что естественный скептицизм у него, возможно, исчез под весом данных - поскольку он был чрезвычайно скептичен, но в других областях. Ах, Юм!
Более тревожное расширение
Исторически, медицина работала методом проб и ошибок -другими словами, статистически. Мы знаем к настоящему времени, что могут быть полностью случайные связи между симптомами и лечением и что некоторые лекарства успешно проходят медицинские испытания просто по случайным причинам. Я не могу претендовать на роль эксперта в лекарствах, но много читал медицинскую литературу в течение прошедших пяти лет. Достаточно долго, чтобы беспокоиться о стандартах, как мы увидим в следующей главе. Медицинские исследователи редко бывают статистиками, а статистики - медицинскими исследователями. Многие медики даже отдаленно не знают про это пристрастие. По правде, оно может играть несущественную роль, но оно, безусловно, существует. Одно недавнее медицинское исследование связывает курение сигарет с сокращением рака легких, таким образом, конфликтуя со всеми предыдущими исследованиями. Логика подсказывает, что результат может быть подозрителен и является простым совпадением.
Сезон отчетов - одураченные результатами
Аналитики Уолл-Стрит, в целом, обучены находить уловки бухгалтерского учета компаний, используемые для сокрытия их доходов. Они имеют тенденцию побеждать компании в такой игре. Но все же они не обучены иметь дело с случайностью. Когда компания показывает увеличение в доходах один раз, это не привлекает никакого внимания. Два раза - и название начинает появляться на компьютерных экранах. Три раза - и компания заслужит несколько рекомендаций на покупку.
Так же, как в проблеме отчета о сделках, рассмотрим когорту из 10,000 компаний, о которых полагаем, что они способны лишь обеспечить только свободную от риска ставку (то есть ставку по' казначейским облигациям). Они вовлечены во все формы волатильных бизнесов. В конце первого года, мы будем иметь 5,000 "звездных" компаний, показывающих увеличение прибыли (предполагаем отсутствие инфляции) и 5,000 "собак". После трех лет, мы будем иметь 1,250 "звезд". Комитет наблюдения за акциями в инвестиционном доме даст вашему брокеру, их названия как рекомендацию "активно покупать". Тот оставит голосовое сообщение, что он имеет горячую рекомендацию, которая требует немедленного действия. Вам будет послан по электронной почте длинный список названий. Вы купите одно или два из них. Тем временем, менеджер, отвечающий за ваш пенсионный план, будет приобретать весь список.
Мы можем применить это рассуждение к выбору инвестиционных категорий - как если бы они были менеджеры в примере выше. Предположим, что вы ищете в 1900 году приложение для множества инвестиций. Есть рынки акций Аргентины, Имперской России, Великобритании, Объединенной Германии и множества других для анализа. Рациональный человек купил бы бумаги не только развивающейся страны Соединенные Штаты, но также и бумаги России и Аргентины. Остальная часть истории известна; в то время как многие из рынков акций, например, Великобритании и Соединенных Штатов развивались чрезвычайно хорошо, инвестор в Имперскую Россию имел бы в руках лишь не лучшего качества обои в руках. Страны, которые поживали хорошо - небольшая доля начальной когорты. Случайность позволит лишь нескольким инвестиционным классам поживать чрезвычайно хорошо. Интересно, знают ли об этой проблеме те "эксперты", которые делают дурацкие (и саморекламные) утверждения, типа "рынки всегда поднимаются в любом 20-летнем периоде".
Средства от рака
Когда я возвращаюсь домой из азиатской или европейской поездки, временной сдвиг часто заставляет мне подниматься в очень ранний час. Иногда, хотя и очень редко, я включаю телевизор в поисках информации о рынке. Что обрушивается на меня в этих утренних исследованиях, так это изобилие претензий продавцов нетрадиционных лекарств на лечебную силу их изделий. Без сомнения, это вызвано более низкой стоимостью рекламы в утреннее время. Чтобы доказать свои претензии, они представляют убедительное свидетельство кого-то, кто был вылечен благодаря их методам. Например, я однажды видел бывшего больного раком горла объяснявшего, как он был спасен комбинацией витаминов, продающихся за исключительно низкую цену 14.95 $ - по всей вероятности, он был искренен (хотя, наверное, компенсирован, возможно, с пожизненной поставкой ему этого лекарства). Несмотря на наш прогресс, люди все еще верят в существование связей между болезнью и лечением, основываясь на такой информации и нет никакого научного доказательства, которое могло бы убедить их сильнее, чем искреннее и эмоциональное свидетельство. Такое свидетельство не всегда появляется от обычного парня; утверждения Нобелевского лауреата (в другой области) могут легко удовлетворить. Линус Полинг, Нобелевский лауреат по химии, как считают, верил в лекарственные свойства витамина С и глотал его массивные ежедневные дозы. Своими задиристыми проповедями, он вносил вклад в общую веру в лечебные свойства витамин С. Многие медицинские исследования оказались не способны подтвердить претензии Полинга, но не были услышаны, поскольку было трудно развенчать свидетельство "Нобелевского лауреата", даже если у него не было квалификации, чтобы обсуждать вопросы, связанные с лекарствами.
Многие из этих претензий были безопасной внешней стороной финансовой прибыли шарлатанов - но многие раковые больные, возможно, заменили более исследованные, с научной точки зрения, терапии, в пользу таких методов и умерли в результате своего пренебрежения более ортодоксальными средствами (опять, ненаучные методы собраны под заголовком, который звучит, как "нетрадиционная медицина", то есть недоказанные терапии, и медицинское сообщество имеет трудности, убеждая прессу в том, что есть только одна медицина и что нетрадиционная медицина - не медицина). Читатель мог бы задаться вопросом о моих утверждениях, что пользователь таких изделий мог быть искренним, не понимая, что он был вылечен иллюзорным лекарством. Причина - так называемая "спонтанная ремиссия", по которой очень маленькое число раковых больных, по причинам, которые остаются полностью спекулятивными, убивают раковые клетки и "чудесно" выздоравливают. Некоторый выключатель заставляет иммунную систему пациента уничтожить все клетка рака в теле. Эти люди были бы одинаково вылечены, выпив стакан ключевой воды из штата Вермонт или жуя высушенную говядину, как это они делали с красиво обернутыми пилюлями. Наконец, эти спонтанные ремиссии могли бы быть не столь спонтанны; они могли иметь причину, которую мы пока еще не в состоянии обнаружить.
Астроном Карл Саган, преданный поборник научного мышления и одержимый враг не-науки, исследовал излечения от рака, которые произошли после посещения местечка Лурд, во Франции, где люди лечились простым контактом со святыми водами и выяснил интересный факт, что из совокупного числа раковых пациентов, посетивших это место, процент излечившихся был ниже, чем статистическая доля спонтанных ремиссий. Он был ниже, чем среднее число выздоровлений среди тех, кто не ездил в Лурд! Должен ли статистик вывести здесь, что шансы раковых больных на выживание ухудшаются после посещения Лурда?
Профессор Пирсон едет в Монте-Карло (буквально): Случайность не выглядит случайной!
В начале двадцатого столетия, когда мы начали развивать техники, имеющие дело с понятием случайных результатов, несколько методов были разработаны для обнаружения аномалий. Профессор Карл Пирсон (из дуэта Нейман-Пирсон, знакомого каждому человеку, кто учился статистике) изобрел первый тест на неслучайность (в действительности, это был тест на отклонение от нормальности, что было то же самое для всех намерений и целей). Он исследовал миллионы пробегов Монте-Карло (старое название колеса рулетки) в течении июля 1902. Он обнаружил, что, с высокой степенью статистической значимости (с ошибкой меньше, чем один к миллиарду), пробеги были не вполне случайны. Что?! Колесо рулетки не было случайным! Профессор Пирсон был очень удивлен открытием. Но этот результат, сам по себе, не сообщает нам ничего. Мы знаем, что нет такой вещи как чисто случайное испытание, поскольку результат испытаний зависит от качества оборудования. С достаточным знанием мелочей можно быть способным раскрыть где-нибудь неслучайность (то есть колесо, возможно, не было совершенно сбалансировано или, возможно, шарик не был идеально сферическим). Философы статистики называют это проблемой сопутствующих ссыпок, объясняя, что на практике нет никакой истинной, достижимой случайности, только в теории. Кроме того, менеджер спросил бы, а может ли такая неслучайность вести к каким-либо значимым прибыльным правилам. Если я должен ставить в азартной игре 1 $ на 10,000 попыток и ожидаю сделать 1$ в результате моих усилий, то мне будет лучше найти работу на полставки в дворницком агентстве.
Но результат несет другой подозрительный элемент. В более практической плоскости - вот следующая серьезная проблема неслучайности. Даже отцы статистической науки забыли, что случайный ряд испытаний не обязан показывать модель, выглядящую случайной; фактически, данные, которые являются совершенно бессистемными, были бы чрезвычайно подозрительными и, кажется, сделанными человеком. Отдельный случайный пробег обязан показать некоторую модель - если смотреть достаточно умело. Обратите внимание, что профессор Пирсон был среди первых ученых, которые были заинтересованы в создании искусственных генераторов случайных данных, таблиц, которые можно было использовать в качестве входов для различных научных и технических моделирований (предшественники нашего генератора Монте-Карло). Проблема состоит в том, что они не хотели, чтобы эти таблицы показывали любую форму регулярности. Все же реальная случайность не выглядит случайной!
Я бы иллюстрировал пункт далее изучением явления, известного как раковые кластеры. Рассмотрим квадрат с 16 случайными дротиками, поражающими его с равной вероятностью попадания в любое место в этом квадрате. Если мы делим квадрат на 16 меньших квадратов, то ожидается, что каждый меньший квадратик будет содержать один дротик в среднем - но только в среднем. Существует очень маленькая вероятность наличия 16 дротиков точно в 16 различных квадратиках. Средняя сетка будет иметь больше, чем ,один дротик в нескольких квадратиках, и никакого дротика вообще во многих остальных квадратиках. Это будет исключительно редкий инцидент, который никакой (раковый) кластер не показал бы на сетке. Теперь, накроем нашей сеткой с воткнутыми дротиками, карту любой области. Некоторые газеты объявят, что одна из зон (та, что с большим, чем среднее, числом стрелок) содержит радиацию, которая вызывает рак, побуждая адвокатов начинать ходатайствовать за пациентов.
Собака, которая не лает: пристрастия в научном знании
В силу того же самого аргумента, наука испорчена пагубным пристрастием выживания и воздействует на способ публикации исследований. Подобно тому, как это происходит в журналистике, исследование, которое не дает никакого результата не публикуется. Это может казаться разумным, поскольку газеты не должны иметь кричащего заголовка, говорящего, что ничего нового не произошло, (хотя Библия была достаточно разумна, чтобы объявить "ничего нового под солнцем", подразумевая, что все возвращается на круги своя). Проблема состоит в том, что обнаружение отсутствия и отсутствие обнаружения смешиваются вместе. Может быть, наличествует большая информация в том факте, что ничего не имело места. Как отметил Шерлок Холмс в деле о Серебряном пламени -любопытная вещь состояла в том, что собака не лаяла. Более проблематично, что существует множество научных результатов, которые оставлены без публикаций потому, что они статистически не существенны. Однако, они содержат информацию.
У меня нет заключения
Мне часто задают вопрос: когда это точно не удача? Честно говоря, я не способен ответить на это. Я могу сказать, что человек А кажется менее удачливым, чем человек Б, но уверенность в таком знании может быть столь слабой, что сделает его бессмысленным. Я предпочитаю оставаться скептиком. Люди часто неправильно интерпретируют мое мнение. Я никогда не говорил, что каждый богатый человек -идиот, а каждый неуспешный человек - невезунчик, но только то, что в отсутствии большой дополнительной информации я предпочитаю резервировать мое суждение. Это более безопасно.
Назад: ГЛАВА ВОСЬМАЯ Слишком много миллионеров по соседству
Дальше: ГЛАВА ДЕСЯТАЯ Неудачник забирает все - нелинейности жизни