Сезон отчетов - одураченные результатами

Аналитики Уолл-Стрит, в целом, обучены находить уловки бухгалтерского учета компаний, используемые для сокрытия их доходов. Они имеют тенденцию побеждать компании в такой игре. Но все же они не обучены иметь дело с случайностью. Когда компания показывает увеличение в доходах один раз, это не привлекает никакого внимания. Два раза - и название начинает появляться на компьютерных экранах. Три раза - и компания заслужит несколько рекомендаций на покупку.

Так же, как в проблеме отчета о сделках, рассмотрим когорту из 10,000 компаний, о которых полагаем, что они способны лишь обеспечить только свободную от риска ставку (то есть ставку по' казначейским облигациям). Они вовлечены во все формы волатильных бизнесов. В конце первого года, мы будем иметь 5,000 "звездных" компаний, показывающих увеличение прибыли (предполагаем отсутствие инфляции) и 5,000 "собак". После трех лет, мы будем иметь 1,250 "звезд". Комитет наблюдения за акциями в инвестиционном доме даст вашему брокеру, их названия как рекомендацию "активно покупать". Тот оставит голосовое сообщение, что он имеет горячую рекомендацию, которая требует немедленного действия. Вам будет послан по электронной почте длинный список названий. Вы купите одно или два из них. Тем временем, менеджер, отвечающий за ваш пенсионный план, будет приобретать весь список.

Мы можем применить это рассуждение к выбору инвестиционных категорий - как если бы они были менеджеры в примере выше. Предположим, что вы ищете в 1900 году приложение для множества инвестиций. Есть рынки акций Аргентины, Имперской России, Великобритании, Объединенной Германии и множества других для анализа. Рациональный человек купил бы бумаги не только развивающейся страны Соединенные Штаты, но также и бумаги России и Аргентины. Остальная часть истории известна; в то время как многие из рынков акций, например, Великобритании и Соединенных Штатов развивались чрезвычайно хорошо, инвестор в Имперскую Россию имел бы в руках лишь не лучшего качества обои в руках. Страны, которые поживали хорошо - небольшая доля начальной когорты. Случайность позволит лишь нескольким инвестиционным классам поживать чрезвычайно хорошо. Интересно, знают ли об этой проблеме те "эксперты", которые делают дурацкие (и саморекламные) утверждения, типа "рынки всегда поднимаются в любом 20-летнем периоде".

Средства от рака

Когда я возвращаюсь домой из азиатской или европейской поездки, временной сдвиг часто заставляет мне подниматься в очень ранний час. Иногда, хотя и очень редко, я включаю телевизор в поисках информации о рынке. Что обрушивается на меня в этих утренних исследованиях, так это изобилие претензий продавцов нетрадиционных лекарств на лечебную силу их изделий. Без сомнения, это вызвано более низкой стоимостью рекламы в утреннее время. Чтобы доказать свои претензии, они представляют убедительное свидетельство кого-то, кто был вылечен благодаря их методам. Например, я однажды видел бывшего больного раком горла объяснявшего, как он был спасен комбинацией витаминов, продающихся за исключительно низкую цену 14.95 $ - по всей вероятности, он был искренен (хотя, наверное, компенсирован, возможно, с пожизненной поставкой ему этого лекарства). Несмотря на наш прогресс, люди все еще верят в существование связей между болезнью и лечением, основываясь на такой информации и нет никакого научного доказательства, которое могло бы убедить их сильнее, чем искреннее и эмоциональное свидетельство. Такое свидетельство не всегда появляется от обычного парня; утверждения Нобелевского лауреата (в другой области) могут легко удовлетворить. Линус Полинг, Нобелевский лауреат по химии, как считают, верил в лекарственные свойства витамина С и глотал его массивные ежедневные дозы. Своими задиристыми проповедями, он вносил вклад в общую веру в лечебные свойства витамин С. Многие медицинские исследования оказались не способны подтвердить претензии Полинга, но не были услышаны, поскольку было трудно развенчать свидетельство "Нобелевского лауреата", даже если у него не было квалификации, чтобы обсуждать вопросы, связанные с лекарствами.

Многие из этих претензий были безопасной внешней стороной финансовой прибыли шарлатанов - но многие раковые больные, возможно, заменили более исследованные, с научной точки зрения, терапии, в пользу таких методов и умерли в результате своего пренебрежения более ортодоксальными средствами (опять, ненаучные методы собраны под заголовком, который звучит, как "нетрадиционная медицина", то есть недоказанные терапии, и медицинское сообщество имеет трудности, убеждая прессу в том, что есть только одна медицина и что нетрадиционная медицина - не медицина). Читатель мог бы задаться вопросом о моих утверждениях, что пользователь таких изделий мог быть искренним, не понимая, что он был вылечен иллюзорным лекарством. Причина - так называемая "спонтанная ремиссия", по которой очень маленькое число раковых больных, по причинам, которые остаются полностью спекулятивными, убивают раковые клетки и "чудесно" выздоравливают. Некоторый выключатель заставляет иммунную систему пациента уничтожить все клетка рака в теле. Эти люди были бы одинаково вылечены, выпив стакан ключевой воды из штата Вермонт или жуя высушенную говядину, как это они делали с красиво обернутыми пилюлями. Наконец, эти спонтанные ремиссии могли бы быть не столь спонтанны; они могли иметь причину, которую мы пока еще не в состоянии обнаружить.

Астроном Карл Саган, преданный поборник научного мышления и одержимый враг не-науки, исследовал излечения от рака, которые произошли после посещения местечка Лурд, во Франции, где люди лечились простым контактом со святыми водами и выяснил интересный факт, что из совокупного числа раковых пациентов, посетивших это место, процент излечившихся был ниже, чем статистическая доля спонтанных ремиссий. Он был ниже, чем среднее число выздоровлений среди тех, кто не ездил в Лурд! Должен ли статистик вывести здесь, что шансы раковых больных на выживание ухудшаются после посещения Лурда?

Профессор Пирсон едет в Монте-Карло (буквально): Случайность не выглядит случайной!

В начале двадцатого столетия, когда мы начали развивать техники, имеющие дело с понятием случайных результатов, несколько методов были разработаны для обнаружения аномалий. Профессор Карл Пирсон (из дуэта Нейман-Пирсон, знакомого каждому человеку, кто учился статистике) изобрел первый тест на неслучайность (в действительности, это был тест на отклонение от нормальности, что было то же самое для всех намерений и целей). Он исследовал миллионы пробегов Монте-Карло (старое название колеса рулетки) в течении июля 1902. Он обнаружил, что, с высокой степенью статистической значимости (с ошибкой меньше, чем один к миллиарду), пробеги были не вполне случайны. Что?! Колесо рулетки не было случайным! Профессор Пирсон был очень удивлен открытием. Но этот результат, сам по себе, не сообщает нам ничего. Мы знаем, что нет такой вещи как чисто случайное испытание, поскольку результат испытаний зависит от качества оборудования. С достаточным знанием мелочей можно быть способным раскрыть где-нибудь неслучайность (то есть колесо, возможно, не было совершенно сбалансировано или, возможно, шарик не был идеально сферическим). Философы статистики называют это проблемой сопутствующих ссыпок, объясняя, что на практике нет никакой истинной, достижимой случайности, только в теории. Кроме того, менеджер спросил бы, а может ли такая неслучайность вести к каким-либо значимым прибыльным правилам. Если я должен ставить в азартной игре 1 $ на 10,000 попыток и ожидаю сделать 1$ в результате моих усилий, то мне будет лучше найти работу на полставки в дворницком агентстве.

Но результат несет другой подозрительный элемент. В более практической плоскости - вот следующая серьезная проблема неслучайности. Даже отцы статистической науки забыли, что случайный ряд испытаний не обязан показывать модель, выглядящую случайной; фактически, данные, которые являются совершенно бессистемными, были бы чрезвычайно подозрительными и, кажется, сделанными человеком. Отдельный случайный пробег обязан показать некоторую модель - если смотреть достаточно умело. Обратите внимание, что профессор Пирсон был среди первых ученых, которые были заинтересованы в создании искусственных генераторов случайных данных, таблиц, которые можно было использовать в качестве входов для различных научных и технических моделирований (предшественники нашего генератора Монте-Карло). Проблема состоит в том, что они не хотели, чтобы эти таблицы показывали любую форму регулярности. Все же реальная случайность не выглядит случайной!

Я бы иллюстрировал пункт далее изучением явления, известного как раковые кластеры. Рассмотрим квадрат с 16 случайными дротиками, поражающими его с равной вероятностью попадания в любое место в этом квадрате. Если мы делим квадрат на 16 меньших квадратов, то ожидается, что каждый меньший квадратик будет содержать один дротик в среднем - но только в среднем. Существует очень маленькая вероятность наличия 16 дротиков точно в 16 различных квадратиках. Средняя сетка будет иметь больше, чем ,один дротик в нескольких квадратиках, и никакого дротика вообще во многих остальных квадратиках. Это будет исключительно редкий инцидент, который никакой (раковый) кластер не показал бы на сетке. Теперь, накроем нашей сеткой с воткнутыми дротиками, карту любой области. Некоторые газеты объявят, что одна из зон (та, что с большим, чем среднее, числом стрелок) содержит радиацию, которая вызывает рак, побуждая адвокатов начинать ходатайствовать за пациентов.

Собака, которая не лает: пристрастия в научном знании

В силу того же самого аргумента, наука испорчена пагубным пристрастием выживания и воздействует на способ публикации исследований. Подобно тому, как это происходит в журналистике, исследование, которое не дает никакого результата не публикуется. Это может казаться разумным, поскольку газеты не должны иметь кричащего заголовка, говорящего, что ничего нового не произошло, (хотя Библия была достаточно разумна, чтобы объявить "ничего нового под солнцем", подразумевая, что все возвращается на круги своя). Проблема состоит в том, что обнаружение отсутствия и отсутствие обнаружения смешиваются вместе. Может быть, наличествует большая информация в том факте, что ничего не имело места. Как отметил Шерлок Холмс в деле о Серебряном пламени -любопытная вещь состояла в том, что собака не лаяла. Более проблематично, что существует множество научных результатов, которые оставлены без публикаций потому, что они статистически не существенны. Однако, они содержат информацию.

У меня нет заключения

Мне часто задают вопрос: когда это точно не удача? Честно говоря, я не способен ответить на это. Я могу сказать, что человек А кажется менее удачливым, чем человек Б, но уверенность в таком знании может быть столь слабой, что сделает его бессмысленным. Я предпочитаю оставаться скептиком. Люди часто неправильно интерпретируют мое мнение. Я никогда не говорил, что каждый богатый человек -идиот, а каждый неуспешный человек - невезунчик, но только то, что в отсутствии большой дополнительной информации я предпочитаю резервировать мое суждение. Это более безопасно.

ГЛАВА ДЕСЯТАЯ

Наши рекомендации