“Сигнал и шум” (The Signal And The Noise) – краткий обзор книги

The Signal And The Noise объясняет, почему так много предсказаний в итоге оказываются неверными и как статистики, политики и метеорологи становятся жертвами массы данных, в то время как поиск важных сигналов – это в основном вопрос осторожности, усердия и, что самое главное, человечности.

Нейт Сильвер заслуживает отдельных похвал. В 2008 году он правильно предсказал исход голосования в 49 из 50 штатов США, а в 2012 году – во всех 50. После того как он публично раскрыл свою личность и сделал эти предсказания, его популярность и популярность его блога FiveThirtyEight, где он пишет о своих предсказаниях, резко возросла.

В конце концов, блог был приобретён ESPN (бейсбол – ещё одна область, которую Нейт любит анализировать), а Сильвер стал главным редактором. Учитывая его послужной список, это лучшее место, куда можно обратиться, если вы хотите узнать, кто, скорее всего, победит в кажущейся вечной борьбе Трампа с Клинтон .

В книге The Signal And The Noise, мгновенно ставшей бестселлером New York Times, он объясняет, почему так много прогнозов терпят неудачу и как вы можете использовать несколько инструментов и принципов, чтобы лучше предсказывать будущее.

Вот 3 урока, которые помогут вам отличить сигнал от шума:

1. Большинство экономистов пытаются предсказывать слишком точно и слишком уверены в своих способностях.
2. Любое предсказание всегда нуждается в правильной оценке человека.
3. Вы можете использовать теорему Байеса для учёта ошибок в ваших собственных предсказаниях.

Готовы победить синоптиков? Давайте обновим ваше статистическое программное обеспечение!

Точные цифры и оценки точности редко выдерживают проверку.

Вот некоторые из тех, кто зарабатывает на жизнь предсказаниями: спортивные комментаторы и телеведущие, биржевые аналитики, люди, отвечающие за прогноз погоды, опросчики, игроки в покер, экономисты, маркетологи и, конечно же, предсказатели. К сожалению, большинство людей из других категорий имеют больше общего с последней – типичными мошенниками с ярмарки – чем нам хотелось бы.

Из-за того, что они совершают так много ошибок, этим людям трудно доверять через некоторое время. Но почему они вообще делают так много ошибок?

Если взять в качестве примера экономистов, то они обычно говорят примерно следующее: «Мы ожидаем, что ВВП (валовой внутренний продукт) вырастет на 2,9% в следующем году».

Однако на самом деле результат их анализа выглядит примерно следующим образом: «С вероятностью 90% рост ВВП в следующем году будет находиться где-то между 2,1 и 3,7%». Это уже совсем другая история. Вместо того чтобы просто выбрать середину и предсказать точное число, экономисты должны признать, что лучшее, что они могут сделать, – это дать интервал .

Во-вторых, точность этого интервала часто сильно завышена – забудьте о 90%. Скорее 50%. С 1968 года фактический процент роста ВВП в половине случаев полностью выходил за пределы заданного интервала. Они не только ошибаются, но и уверены в этом!

Человеческое суждение необходимо для всех хороших предсказаний.

Откуда берётся это высокомерие и ложное чувство суждения? В основном от того, что люди отключают свой здравый смысл и полагаются исключительно на статистические данные. С момента появления Интернета нам доступно больше информации, чем когда-либо. Постоянно отслеживается более 4 000 000 экономических показателей, поэтому кажется естественным полагаться на неопровержимые факты и статистические данные при составлении прогнозов.

Однако при таком огромном количестве данных критическое мышление и фильтрация на основе собственных рассуждений становятся все более важными. При таком количестве коррелирующих факторов обязательно возникнут некоторые совпадения, и, полагаясь на них, вы через некоторое время получите обратный эффект.

Например, в течение 30 лет все данные указывали на то, что фондовый рынок будет стремительно расти до конца года, если победителем Суперкубка станет команда из НФЛ. Если же побеждала команда из АФЛ, это означало потери для фондового рынка. Эта гипотеза подтвердилась в 28 из 30 лет с 1967 по 1997 год, оставляя лишь 1 к 4700 000 шанс, что это совпадение.

Но знаете что: это действительно совпадение, потому что акции и футбол совершенно не связаны друг с другом . С 1998 года эта тенденция изменилась на противоположную.

Независимо от того, сколько технологий мы используем, чтобы управлять обилием доступных нам данных, крайне важно, чтобы за столом всегда сидел человек, скептически смотрел на анализ и решал, что делать.

Если вы хотите сделать свои предсказания лучше, используйте теорему Байеса.

Чтобы помочь вам принимать лучшие решения, вот классный инструмент, который вы можете использовать: Теорема Байеса. Она сводится к простой математической формуле, которую вы можете использовать для предсказания вероятности чего-то при предположении, что данный факт истинен .

Популярный пример, используемый для объяснения этого понятия, – вероятность заболеть раком груди, если результат маммограммы окажется положительным. Вы можете знать, что примерно 10% всех положительных результатов маммографии являются так называемыми ложноположительными – у 1 из 10 человек с положительным результатом на самом деле нет рака.

Это может навести вас на мысль, что даже если у вас положительный результат, вероятность того, что у вас рак, составляет 90%. На самом деле он гораздо меньше – ведь нужно учитывать, сколько людей в целом больны раком.

Например, если учесть, что только 1% людей в конечном итоге заболевают раком и что даже для тех, у кого он есть, результат маммографии оказывается положительным только в 3 случаях из 4, то можно составить уравнение следующим образом:

Разделите процент правильно выявленных людей с раком (0,75*0,01) на ВСЕХ положительно выявленных людей – т.е. тех, у кого действительно есть рак и положительный результат тех, у кого ложноположительный результат (0,75*0,01 0,1*0,99) – это покажет вам, что положительный результат маммограммы означает, что у вас все ещё есть только 7% шансов на то, что у вас действительно есть рак.

Примечание: Я выдумал эти цифры, исследования показывают, что число людей, заболевших раком после положительного результата маммограммы, составляет примерно 10%.

Статистика – непростая тема для понимания. Но она очень важна. Это один из лучших способов борьбы с когнитивными предубеждениями, которые мешают вам принимать правильные решения. Я настоятельно рекомендую ознакомиться с работой Нейта и The Signal And The Noise !

Кому бы я порекомендовал книгу «Сигнал и шум»?

17-летнему подростку, который увлекается фэнтези-футболом, 37-летнему политическому активисту, который хотел бы знать исход президентских выборов в США заранее, и всем, кто часто надевает наряд, не соответствующий погоде.

“Внутренняя игра в теннис” (The Inner Game Of Tennis) – краткий обзор книги
“Наука богатеть” (The Science of Getting Rich) – краткий обзор книги
“Старт-ап тебя” (The Start-Up of You) – краткий обзор книги
“Бессмертная жизнь Генриетты Лакс” (The Immortal Life of Henrietta Lacks) – краткий обзор книги
“Фабрика идей” (The Idea Factory) – краткий обзор книги