Сигнал и шум. Почему одни прогнозы сбываются, а другие - нет

Известна старая шутка – «статистик утонул, переходя через реку, средняя глубина которой составляла лишь один метр». В рамках прогнозной модели Службы погоды уровень воды поднимался в среднем на 15 м, однако даже небольшое его превышение могло привести к затоплению.

Как мы видели в главе 4, Национальная служба погоды со временем признала важность информирования о неопределенности в своих прогнозах, что делает их гораздо более точными и честными. Однако подобное отношение редко встречается у других прогнозистов – особенно тех, кто рассказывает о возможном движении экономики в том или ином направлении.

Рациональны ли экономисты?

Теперь давайте посмотрим, что произошло в ноябре 2007 г. До официального начала Великой рецессии оставался всего месяц. Уже были видны явные признаки проблемы на жилищном рынке – количество вынужденных выкупов недвижимости удвоилось {385} , а компания Countrywide, крупный кредитор на ипотечном рынке, оказалась на грани банкротства {386} . Не менее тревожные знаки были заметны и на кредитных рынках {387} .

385

Alex Veiga, «U.S. Foreclosure Rates Double», Associated Press, November 1, 2007. http://www.azcentral.com/realestate/articles/1101biz-foreclosures01-ON.html.

386

Jonathan Stempel, «Countrywide Financial Plunges on Bankruptcy Fears», Reuters, August 16, 2007. http://uk.reuters.com/article/2007/08/16/countrywide-financial-idUKNOA62283620070816.

387

John B. Taylor, Getting Off Track: How Government Actions and Interventions Caused, Pro-longed, and Worsened the Financial Crisis (Stanford, CA: Hoover Institution Press, Kindle edition, 2009), location 361.

Тем не менее экономисты в рамках ежеквартального опроса профессиональных прогнозистов Survey of Professional Forecasters (SPF), проводимого Федеральным резервным банком Филадельфии, считали будущую рецессию относительно маловероятной. Более того, они ожидали, что в 2008 г. экономика будет расти на уровне чуть меньше среднего уровня в 2,4 %, и, конечно, не предполагали возможности рецессии, столь сильной, как случилось в реальности.

Опрос SPF уникален в том смысле, что в ходе него экономистов просят максимально широко описать возможный диапазон направлений, по которым будет двигаться экономика. Как я уже неоднократно подчеркивал в этой книге, вероятностное изучение последствий представляет собой важнейшую часть научного прогноза. Если бы я попросил вас предсказать результат выбрасывания пары кубиков, то ваш точный ответ представлял бы собой не единственное число, а перечисление возможных вариантов и их сравнительную вероятность, как это проиллюстрировано на рис. 6.2. Хотя у вас будет выпадать число 7 гораздо чаще, чем любое другое, с точки зрения прогноза оно не имеет никаких преимуществ перед цифрой 2 или 12, при условии, что каждое число выпадает с вероятностью, которую вы присваиваете ему в долгосрочной перспективе.

Рис. 6.2. Прогнозируемое распределение вероятностей: сумма чисел на двух кубиках

Рис. 6.3. Прогнозируемое распределение вероятности роста реального ВВП США в 2008 г. Источник: SPF, ноябрь 2007 г.

Нечто подобное просят сделать и экономистов в рамках опроса SPF, когда они прогнозируют величину ВВП и других переменных. Например, их просят оценить вероятность того, что значение ВВП окажется между 2 и 3 % или же между 3 и 4 %. Вот как выглядели, по результатам их опроса, значения ВВП в ноябре 2007 г. (рис. 6.3).

Как упоминалось выше, экономисты в рамках этого опроса думали, что прирост ВВП по итогам 2008 г. составит примерно 2,4 %, то есть окажется чуть ниже уровня долгосрочного тренда. Этот прогноз оказался невероятно плохим. На самом деле, после того как ударил финансовый кризис, ВВП снизился на 3,3 %. Но что еще хуже: экономисты очень доверяли своим плохим прогнозам. По их мнению, вероятность снижения величины ВВП в 2008 г. составляла лишь 3 % {388} . А вероятность спада в экономике на уровне 2 % или более (что и произошло чуть позже) составляла, по их мнению, лишь 1 из 500 {389} .

388

Стоит, однако, отметить, что экономисты считали, что вероятность негативных значений ВВП для каждого из четырех фискальных кварталов немного выше (около 20 %).

389

В сущности, 1 шанс из 500 – достаточно щедрое значение, поскольку оно относится к любому показателю ВВП ниже –2 %, а реальное значение ВВП, равное –3,3 %, оказалось значительно ниже. Хотя экономисты и не указывали на это явно, можно предположить, что, согласно их мнению, вероятность того, что ВВП окажется на уровне –3,3 % или меньше, составляла примерно 1 из 2000.

На самом деле экономисты уже давно демонстрируют слишком высокую степень доверия к своим способностям предсказывать направление развития экономики. На рис. 6.4 приведены данные о прогнозах роста ВВП, взятые из результатов опроса SPF за 18-летний период между 1993 и 2010 гг. {390} . Горизонтальными линиями на рисунке отмечены интервалы прогнозирования в 90 %, указанные экономистами.

Рис. 6.4. Прогнозы ВВП: 90 %-ные интервалы прогнозирования и реальные показатели

390

В частности, я изучил прогнозы роста ВВП на следующий год, которые делали каждый ноябрь, например, в ноябре 1996 г. делали прогноз роста ВВП в 1997 г.

Интервал прогнозирования представляет собой диапазон наиболее вероятных вариантов значений роста ВВП в рамках прогноза и чем-то напоминает величину ошибки при политических опросах. Допустим, предполагается, что интервал прогнозирования, равный 90 %, должен покрывать 90 % всех возможных реальных вариантов. Вне этого интервала остаются лишь 10 % нестандартных случаев в хвостовых концах распределения. Если бы прогнозы экономистов были настолько точными, как заявляли они сами, то можно было бы ожидать, что реальная величина ВВП будет находиться в рамках указанных ими интервалов прогнозирования в 9 или в 10 случаях, или во всех случаях, за исключением двух, за 18 лет.

Реальная величина ВВП выпадала за пределы прогнозов экономистов шесть раз за 18 лет, или примерно в одной трети случаев. Авторы еще одного исследования, анализировавшие цифры, полученные начиная с самых первых опросов SPF в 1968 г., продемонстрировали, что ситуация с прогнозами экономистов еще хуже: реальный показатель ВВП не попадает в интервал прогнозирования почти в половине случаев {391} . Не стоит считать, что экономистам просто не повезло {392} – на самом деле они фундаментально переоценили степень надежности своих прогнозов.

391

Michael P. Clements, «An Evaluation of the Survey of Professional Forecasters Probability Distribution of Expected Inflation and Output Growth», Journal of Economic Literature, November 22, 2002. http://www.icmacentre.ac.uk/pdf/seminar/clements2.pdf.

392

Основываясь на биномиальном распределении, вероятность того, что хорошо откалиброванный прогноз окажется за пределами 90 %-ного интервала прогнозирования 6 раз за 18 лет, составляет около 0,6 %, или примерно 1 шанс из 150.

На самом деле, когда группа экономистов дает вам свой прогноз по ВВП, истинный интервал прогнозирования в 90 %, основанный на соответствии этих прогнозов реальности {393} , а не на заявляемой самими экономистами степени точности, захватывает примерно 6,4 пункта ВВП (что эквивалентно ошибке в ±3,2 %) [83] .

Иными словами, когда вы слышите в новостях, что ВВП вырастет в следующем году на 2,5 %, это может с тем же успехом означать и невероятный рост на 5,7 %, и падение на 0,7 %, то есть достаточно серьезную рецессию. До сих пор экономисты не смогли придумать ничего лучше, и нет особенных свидетельств тому, что качество их прогнозов улучшается. Старая шутка об экономистах, выявивших девять из последних шести рецессий, имеет под собой вполне реальную основу. В течение 1990-х годов экономисты смогли заранее предсказать лишь две из 60 рецессий {394} .

393

В данном случае использованы данные всех выпусков SPF, начиная с четвертого квартала 1968 г. по четвертый квартал 2010 г., за исключением нескольких ранних выпусков, в которых экономистов не просили поделиться прогнозом на год.

83

Интервал предсказаний в 95 % – стандарт, используемый в политических опросах, – оказывается еще больше – 9,1 процентного пункта, что соответствует пределу погрешности ±4,6 пункта. – Прим. авт.

394

Prakash Loungani, «The Arcane Art of Predicting Recessions», Financial Times via International Monetary Fund, December 18, 2000. http://www.imf.org/external/np/vc/2000/121800.htm.

В этом смысле экономисты не уникальны. Результат такого рода можно считать либо следствием того, что эксперты не умеют давать честное описание неопределенности в своих прогнозах, либо следствием того, что они не очень заинтересованы это делать. Такая же чрезмерная уверенность в достоверности прогнозов наблюдается и во множестве других областей, в том числе в медицинских исследованиях, политических науках, финансах и психологии. Судя по всему, она применяется и тогда, когда мы, создавая прогноз, основываемся на своих суждениях (а именно так делали политологи – гости Фила Тэтлока) или когда мы используем для этого статистическую модель (как в случае неудачных прогнозов землетрясений, описанных в главе 5).

Однако, в отличие от представителей других профессий, подобные ошибки экономистов могут считаться непростительными. В первую очередь их прогнозы не просто слишком самоуверенны, но и плохо применимы в условиях реального мира. Ошибка в прогнозах реального значения ВВП может приводить к существенным экономическим последствиям. Кроме того, организованные усилия по предсказанию значения таких переменных, как ВВП, проводятся уже много лет, начиная с опроса, проведенного Ливингстоном в 1946 г. Эти результаты хорошо задокументированы и имеются в бесплатном доступе. Получение обратной связи от того, как проявили себя наши прогнозы в реальности, – это единственный и, возможно, самый важный способ их улучшить.