Сигнал и шум. Почему одни прогнозы сбываются, а другие - нет
Шрифт:
«Несмотря на то что мне было бы интересно взглянуть на противостояние скаутов и статистиков под новым углом, я не жду, что ранжирование, выполненное системой PECOTA, будет столь же точным, как рейтинги… создаваемые Baseball America».
Исходным «сырьем» для любой системы ранжирования служит информация – а если у вас была возможность изучить и скаутинговую, и статистическую информацию, значит, вы получили больше такого «сырья». Единственная возможность для чисто статистического подхода переиграть смешанный заключается в том, что вызываемые смешанным подходом предубеждения порой оказываются настолько сильными, что перевешивают преимущества.
Иными словами, скауты используют смешанный подход. Они имеют доступ к широкой информации, не ограничивающейся статистикой. И скауты, и PECOTA могут без проблем изучать личные достижения, или ERA [54] игрока; не имеющая предубеждений система типа PECOTA может немного лучше отсеивать
54
ERA (Earned run average) – статистический показатель в бейсболе. Показывает уровень подачи питчера – чем меньше, тем лучше. Очки, принесенные за время игры питчера, делятся на количество бьющих, против которых играл питчер, затем результат умножается на девять.
Этот тип информации позволяет нам сделать еще один шаг в сторону глубинных причин того, что мы пытаемся предсказать. В низших лигах питчеры даже со слабой силой броска могут нащупать успешную зону; большинство противостоящих ему подающих довольно неумелы, поэтому он вполне может их переиграть. В высших лигах, где отбивающие способны парировать мяч, летящий со скоростью до 120 км/ч, шансы таких питчеров невелики. PECOTA может быть дезинформирована подобными данными, но это никогда не произойдет с умелым скаутом. И наоборот, скаут может выявлять игроков, обладающих талантом на уровне высшей лиги, для развития которых может потребоваться время.
Нужно, впрочем, отметить, что каждый раз, когда в процесс вовлекается человеческое суждение, возникает и потенциал для предубеждения. Как мы видели в главе 2, увеличение объема информации способно лишь ухудшить ситуацию для тех, кто неправильно относится к прогнозам и пытается навязать свою точку зрения на то, как устроен мир, вместо того чтобы попытаться познать истину.
Возможно, в эре, предшествовавшей «Moneyball», эти предубеждения играли на руку скаутам. Они могли уделять больше внимания эстетике игры, чем таланту игрока. Если свежие списки Baseball America можно считать очень хорошими, то списки начала 1990-х {221} были переполнены огромным количеством несбывшихся прогнозов – достаточно вспомнить таких превозносившихся игроков, как Тодд Ван Поппел, Рубен Ривера и Браен Тейлор, которым так и не удалось добиться серьезных результатов.
221
«All-Time Top 100 Prospects», Baseball America. http://www.baseballamerica.com/today/prospects/rankings/top-100-prospects/all-time.html.
Однако свои предубеждения могут иметься и у статистиков. Одним из самых пагубных может считаться предположение о том, что все, что не поддается количественной оценке, не имеет большого значения. Например, в бейсболе измерять результативность защиты всегда было намного сложнее, чем эффективность броска или отбития мяча. В середине 1990-х команда Oakland A’s не обращала особого внимания на защиту, и ее деятельность во внешнем поле направлялась довольно медлительными и неуклюжими игроками типа Матта Стрейерса, который, однако, мог считаться прирожденным подающим. По мере улучшения анализа действий защиты стало очевидным, что плохая защита команды стоила ей от восьми до десяти побед за сезон {222} . Это не позволяло им занимать достойные позиции в чемпионате вне зависимости от статистики удачных ударов по мячу. Бин уловил суть проблемы, и его новые и успешные команды имеют сравнительно хорошую защиту.
222
«1997 Oakland Athletics Batting, Pitching, & Fielding Statistics», Baseball-Reference.com. http://www.baseball-reference.com/teams/OAK/1997.shtml.
Подобные слепые места могут привести к еще большим проблемам, когда речь заходит о прогнозировании результатов игроков низшей лиги. Когда мы говорим об игроке высшей лиги, главный вопрос состоит в том, сможет ли он показывать такие же хорошие результаты, как в прошлом. Самые толковые системы статистического прогнозирования могут выявить восходящий или нисходящий тренд величиной всего в несколько процентных пунктов {223} . Однако если вы просто предположите, что игрок покажет примерно те же результаты, что и в два предшествовавших сезона, то несильно ошибетесь.
223
Стоит, однако, отметить, что с учетом бюджета зарплаты команды из основной лиги, размер которого
составляет примерно 100 млн долл., система прогнозирования, позволявшая бейсбольной команде потратить свои деньги на 2 % эффективнее, даст ей возможность сэкономить 2 млн долл. Учитывая пятизначные зарплаты, которые получают статистические аналитики ведущих команд, это представляется вполне привлекательной сделкой.Однако бейсбол уникальным образом отличается от других основных профессиональных видов спорта – у него невероятно разветвленная система команд низшей лиги. Если у Национальной футбольной лиги официально вообще нет низшей лиги, а в состав низшей лиги NBA [55] входят всего несколько команд, то в бейсболе их 240 – по восемь для каждой родительской команды из высшей лиги. Кроме этого, если баскетболисты или футболисты могут стать видными профессионалами сразу же после колледжа или даже старших классов школы, то в бейсболе подобный мгновенный рост проявляется крайне редко. Даже самые талантливые игроки чаще всего играют в течение какого-то времени в Billings, Bakersfield или Binghamton перед тем, как перейти в команды основных лиг.
55
NBA (National Basketball Association) – Национальная баскетбольная ассоциация.
Довольно сложно предсказывать результаты этих игроков, поскольку мы надеемся, что они со временем смогут сделать что-то, на что пока не способны, – показывать хорошие результаты, играя в высших лигах. Можно легко представить себе, что уникальный по своему потенциалу игрок типа Брюса Харпера, лучшего подающего в стране, играющего в школьной лиге, попросту не выжил бы в противостоянии с питчером высшей лиги. Для игры на новом уровне ему нужно подрасти, стать сильнее, умнее и дисциплинированнее – а все это требует определенной комбинации упорного труда и удачи. Представьте себе, что вы заходите в обычный школьный класс, несколько дней наблюдаете за учащимися, а потом вас просят предсказать, кто из них станет успешным врачом, юристом и предпринимателем, а кто будет вынужден всю жизнь сводить концы с концами. Думаю, что вы изучили бы их оценки и посмотрели на то, у кого из них больше друзей, но в целом любые ваши выводы будут высосаны из пальца.
Тем не менее от многих скаутов-любителей (и любой статистической системы, имитирующей их действия) ожидается именно это. Хотя некоторые бейсболисты приходят в команды после колледжей, кое-кто попадает в них и во время учебы в школе, а процесс скаутинга начинается, когда те еще находятся в подростковом возрасте. Как и в любой другой группе молодых людей, в них будут играть гормоны и юношеский задор. Тела их продолжают расти и развиваться, а сами они постоянно подвергаются искушениям, связанным с выпивкой и влечением к противоположному полу. Только представьте себе, что вам нужно доверить весь свой бизнес кучке 19-летних парней.
Не только «Пять инструментов» [56]
Как писал Льюис в книге «Moneyball», Билли Бин был одним из тех игроков, кто имел потрясающий талант, но не смог этого понять; впервые попав в серьезную команду в 1980 г., он сыграл в высшей лиге всего 148 игр, а его средний результат за карьеру составил 0,219. Тем не менее Бин все равно попал в Зал славы, в отличие от других потенциальных кандидатов – типа Джона Сандерса, работающего в настоящее время скаутом для Los Angeles Dodgers.
56
В книге «Moneyball» описаны качества, которыми должны обладать подающие надежду непрофессиональные спортсмены. Их назвали «набором инструментов». Таких инструментов пять.
Сандерсу удалось сыграть в серьезном матче, но лишь однажды, как это произошло и с Мунлайтом Грэмом, героем фильма «Поле его мечты» («Field of Dreams»). 13 апреля 1965 г., когда Сандерсу было 19 лет, команда Kansas City Athletics использовала его в качестве пинчраннера [57] в седьмом иннинге [58] игры против Detroit Tigers. Сандерсу не удалось сделать ничего особенного – последние два подающих внезапно покинули поле, и его заменили перед началом следующего иннинга {224} . Больше ему так и не довелось сыграть в высшей лиге.
57
Пинчраннер – игрок в бейсболе, задачи которого состоят в том, чтобы в критический момент стремительной пробежкой вывести команду вперед.
58
Иннинг – период бейсбольного матча, во время которого команды по разу играют в защите и нападении.
224
«Detroit Tigers 11, Kansas City Athletics 4: Game Played on Tuesday, April 13, 1965. (D) at Municipal Stadium», Retrosheet.org, http://www.retrosheet.org/boxesetc/1965/B04130KC%20.11965.htm.