close
авг 2, 2017
авг 2, 2017

Как делать прогнозы, не имея данных

Наше представление о будущем основывается на прошлом.

Сколько настройщиков фортепиано в Чикаго?

«Суперпрогнозисты» и проект «Здравое суждение».

10 заповедей правильного прогноза.

Как делать прогнозы, не имея данных

Поединок между боксером Мэйуэзером и бойцом UFC Мак-Грегором приковал к себе внимание любителей спорта и игроков, размещающих ставки, по одной простой причине – это будет беспрецедентный бой. Таким образом, появляется плодотворная почва для дискуссий и спекуляций, но также и огромная головная боль для любого, кто пытается предсказать результат с каким-либо обоснованием, поскольку прогнозы основываются на прошлом, питающем наше представление о будущем. Что же делать игрокам при таких уникальных обстоятельствах? Они могут воспользоваться подходом, разработанным ядерным физиком – лауреатом Нобелевской премии.

Прогнозирование – количественная наука. Чем больше у вас исторических данных, тем больше шансов сформировать точное представление (посредством системы или модели) о том, каким будет будущее. 

Опираясь на существующие знания и определяя новое влияние на указанное событие с использованием набора данных, человек может сделать более точный прогноз, чем существующие представления. Яркими примерами могут послужить прогнозирование погоды или размещения ставок «аутрайт» на матчи Premier League.

Однако когда данных нет, все сводится к качественному анализу, то есть формированию убедительных аргументов касательно того, что может произойти. Этот способ кажется не более точным, чем проверка направления ветра по смоченному пальцу, но в этот раз нас выручает наука посредством метода Ферми.

Энрико Ферми был знаменитым физиком, которого считали вдохновителем ядерного века. Он получил Нобелевскую премию по физике в 1938 г. и создал первый в мире ядерный реактор. Его также помнят за подход к формированию быстрых предположительных оценок для определения количества того, что считается невозможным достоверно вычислить из-за ограниченной доступной информации.

Однако когда данных нет, все сводится к качественному анализу, то есть формированию убедительных аргументов касательно того, что может произойти. Этот способ кажется не более точным, чем проверка направления ветра по смоченному пальцу, но в этот раз нас выручает наука посредством метода Ферми.

Обучая своему подходу студентов, он обычно задавал им вопросы, как, например, приведенный далее.

Сколько настройщиков фортепиано в Чикаго?

Это не вопрос, заданный с целью поставить студента в трудное положение. Потратьте несколько минут на обдумывание этого вопроса и (без использования Google) запишите упрощенный аргумент, основанный на нескольких вспомогательных вопросах с предположениями, ответив на которые, можно получить вразумительный ответ на главный вопрос. Сначала сделайте это, а затем читайте дальше.

Если бы вы задали себе приведенные далее вопросы (или последовали аналогичной логике, но с использованием несколько других вопросов), вы бы пришли к хорошей идее ответа.

  • Сколько фортепиано в Чикаго?
  • Как часто необходимо настраивать фортепиано в течение года?
  • Сколько длится настройка фортепиано?
  • Сколько часов в год в среднем работает настройщик фортепиано?

Используя догадки для первых трех вопросов, можно вычислить, сколько рабочих часов может тратиться в Чикаго на настройку фортепиано в год, и, разделив это число на количество рабочих часов настройщика в год, прийти к правдоподобному предположению о количестве фортепиано, которые он может обслужить. Разумеется, чтобы ответить на первый, второй и третий вопросы, необходимо разбить их на вспомогательные вопросы.

Итак, для первого вопроса вам понадобилось бы угадать численность населения Чикаго, основываясь на знаниях о населении других городов США. Допустим, ваше предположение – около 2–2,5 млн (на самом деле, согласно данным 2016 г. – 2,7 млн).

Затем вам необходимо вычислить, у какого процента людей есть фортепиано, что по эмпирической закономерности могло бы составлять одно фортепиано на каждые 100 человек (то есть около 25 000, если учитывать раннее предположение о численности населения). Затем примите в расчет количество фортепиано в барах, клубах, школах и т. д. – вам придется удвоить количество, то есть мы получим два инструмента на 100 человек или 50 000 инструментов.

Второй и третий вопросы просто на интуицию, если только, разумеется, у вас нет знаний в этой области. Фортепиано настраивают примерно раз в год в течение приблизительно двух часов. Ответ на четвертый вопрос мог бы основываться на личном опыте или знании о пяти стандартных рабочих днях в неделю и стандартных выходных и праздничных днях (при полной занятости).

Итак, согласно предположениям, 50 000 фортепиано настраиваются раз в год в течение двух часов, что эквивалентно 100 000 часам, потраченным на настройку. Разделите это число на 1600 часов, в среднем ежегодно вырабатываемых настройщиком, и получите результат в 62,5 настройщика фортепиано в Чикаго.

На этот вопрос нет определенного ответа, однако в результате анализа телефонного справочника (любезно проведенного Дэниелом Левитином) было найдено 83 настройщика с учетом дублированных контактов. Таким образом, если вы пришли к значению от 55 до 70 настройщиков – это достойный результат.

Здесь важна не столько точность ответа, сколько использованный подход. Такой образ мышления подходит для точного прогнозирования в случаях отсутствия данных, как, например, при размещении ставок на бой Мэйуэзера и Мак-Грегора. Если вы не совсем поняли подход к решению вопроса, прочитайте статью дальше, а затем снова попробуйте найти ответ на другой абстрактный вопрос.

Вопрос о настройщике фортепиано, например, используется компанией Google на собеседованиях для определения навыка построения логических рассуждений вместе с подобными вопросами, такими как «Сколько весит Эмпайр-стейт-билдинг?».

Букмекеры не занимаются созданием прогнозов, они просто предлагают измерение вероятности происшествия, представляя ее в виде коэффициентов. В этом отношении для компании Пиннакл более безопасно иметь дело с хорошо известными видами спорта с установленным набором правил, к надежным историческим данным о которых всегда есть доступ.

«Суперпрогнозисты», проект «Здравое суждение»

Метод Ферми рассматривается в великолепной книге Филипа Тетлока и Дэна Гарднера Суперпрогнозисты: искусство и наука прогноза (Super-Forecasting: The art & science of prediction). В книге рассматривается тема развития науки прогнозирования, а в качестве фона для этого используется проект «Здравое суждение».

В течение четырех лет Тетлок приглашал «20 000 любознательных обывателей» присоединиться к проекту «Здравое суждение» и прогнозировать результаты сложных геополитических ситуаций. Его команда действовала в рамках более широкой инициативы Агентства передовых исследований в области разведки (Intelligence Advanced Research Projects Activity, IARPA) – агентства спецслужб США, ориентированного на улучшение стандарта прогнозирования исходов критически важных политических и экономических событий, непосредственно влияющих на национальные интересы.

Агентство IARPA стало инициатором соревнования по прогнозированию с участием пяти команд, возглавляемых ведущими учеными в этой области и состоящих как из профессионалов проекта «Здравое суждение», так и сыщиков-любителей. За пять лет агентство IARPA задало около 500 вопросов, ответы на которые отправлялись участниками ежедневно в одно время.

Точность прогнозов измерялась с использованием показателей Бриера. Оценка прогнозам выставлялась путем суммирования разницы между степенью уверенности прогнозов и фактическим результатом (в квадрате). Требование, заключающееся в том, что прогноз необходимо делать с указанием своей уверенности в нем, предполагает в равной мере вознаграждение или наказание за эту уверенность и является отличным способом грамотно распознать типстеров.

Букмекеры не занимаются созданием прогнозов, они просто предлагают измерение вероятности происшествия, представляя ее в виде коэффициентов. В этом отношении для компании Пиннакл более безопасно иметь дело с хорошо известными видами спорта с установленным набором правил, к надежным историческим данным о которых всегда есть доступ.

Затем, основываясь на имеющихся знаниях о происшествии, мы можем построить модели и получить надлежащее представление о вероятности будущих результатов, представленной в форме начальных коэффициентов.

Однако для привлечения новых клиентов и увеличения популярности среди существующих пользователей нам необходимо выйти за рамки этого основного предложения. Таким образом, мы открываем для себя мир новых или непримечательных видов спорта, данные о предыдущих матчах которых могут быть неполными (лучшие примеры – ставки на eSports, специальные ставки и ставки на выборы).

Выборы проводятся настолько редко и при таких разных обстоятельствах, что исторические данные имеют очень небольшую ценность. Опросы ненадежны по множеству причин, в то время как надежда на новости – это такое же минное поле. А это значит, что букмекеры не сильны в политических прогнозах.

Задача: ставки на не бравших призов лошадей

Еще один замечательный пример этой проблемы – скачки для лошадей, не бравших призов (обратите внимание на то, что Пиннакл не предлагает ставки на скачки, но этот пример полезен в качестве справочной информации).

Скачки двухлетних лошадей, не бравших призов, с участием впервые выпускаемых лошадей (наряду с теми, кому еще предстоят победы) – отличный пример события, на которое размещают ставки, без четко определенной структуры. Что еще хуже, скачки – это непродолжительное соревнование с минимальным правом на ошибку, ведь лошади, впервые выходящие на скаковой круг, могут вести себя непредсказуемо.

Как можно спрогнозировать способности лошади, до этого не выпускаемой на скачки, в соревновании, в котором успехом (с точки зрения тренера или владельца) может считаться уже то, что их лошадь просто получает положительный опыт участия в скачках?

  • Задайте серию дедуктивных вопросов, аналогичных заданным при решении задачи с настройщиком фортепиано.
  • Насколько хороша репутация конного завода? Насколько успешен заводчик?
  • Насколько успешен тренер? Каковы достижения их впервые выпускаемых на скачки лошадей и лошадей после пробега одинаковой дистанции?
  • Каковы достижения жокея в управлении лошадями, не бравшими призов?

С помощью этих вопросов можно сделать обоснованное предположение о шансах лошади (идеально, если объединить все показатели в общий рейтинг) и, используя показатель Бриера, точно оценить свой уровень уверенности по сравнению с рынком.

Таким образом, этот тип, на первый взгляд, трудноразрешимых задач представляет для игроков возможность выигрыша, поскольку букмекеры находятся с ними в одной лодке, хотя и с крайне важным преимуществом. У нас нет модели или расчетов, на которые можно было бы положиться, поэтому наши трейдеры будут основываться на своем опыте и знаниях, а также подходе Ферми.

10 заповедей правильного прогноза

Задачи, с которыми столкнулись участники проекта «Здравое суждение», ничем не отличаются от задач, с которыми сталкиваются игроки и букмекеры при уходе от рынков ставок на традиционные виды спорта в область экзотических ставок – здесь мы снова возвращаемся к бою Мэйуэзера и Мак-Грегора. У нас есть ясное представление о попытках прогнозирования исхода боксерских боев и боев MMA, но состязание между боксером и бойцом смешанных боевых искусств по большому счету представляет собой проблему, описанную Ферми (игроки могут попытаться решить ее, используя коэффициенты в режиме Live и график изменения коэффициентов, приведенный ниже).

Согласно выводам, сделанным на проекте «Здравое суждение», есть и хорошая новость: существует ряд практических советов с экспериментально доказанной эффективностью для повышения уровня достоверности прогнозов непрофессиональных прогнозистов.

На самом деле, Тетлок вывел 10 заповедей правильного прогноза, основанных на опыте, полученном в ходе проекта «Здравое суждение». Более подробную информацию можно найти на сайте www.goodjudgementproject.com (но лучше все-таки прочитать книгу), а мы приводим их в адаптированной краткой форме, применимой к ставкам и, в соответствующих случаях, к бою Мэйуэзера и Мак-Грегора.

С помощью рандомизированных испытаний Тетлок установил, что показатель Бриера лиц, ознакомившихся с руководством, содержащим эти положения, увеличился на 10 %. Этого может быть достаточно, чтобы обеспечить вам как игроку прибыль в долгосрочной перспективе.

1. Сосредоточьтесь на решении проблем, вложение усилий в которые с большей вероятностью окупится; игнорируйте как очевидное, так и то, что не поддается управлению. Существует малая вероятность того, что вы узнаете о Premier League что-то, что не было учтено рынком. Найдите золотую середину, то есть ситуацию, в которой реально можно предположить, что прибыль можно получить с разумным вложением времени и усилий.

2. Разбейте большие сложные проблемы на небольшие части. Например, вопрос «Кто станет победителем – Мак-Грегор или Мэйуэзер?» можно разбить на «Насколько хороша боксерская подготовка Мак-Грегора?», «Какие у обоих соперников устремления?», «Какой стиль ведения боя Мак-Грегора и какой коэффициент успешного противостояния Мэйуэзера этому стилю?» и т. д. Присвойте значения и степень уверенности в своих ответах.

3. Найдите баланс между взглядами обеих сторон. В отношении боя Мэйуэзера против Мак-Грегора от вас требуется выйти за пределы оценки их с точки зрения бокса или MMA. У Мак-Грегора огромное количество поклонников в сообществе MMA, без сомнения, очень поддерживающих его, но имеет ли здесь ценность их мнение? В то же время сколько пуристы от бокса знают о MMA? Попытайтесь найти баланс между обоими взглядами.

4. Найдите баланс между чрезмерным реагированием на новую информацию и недооценкой ее. При учете новых фактов используйте байесовский подход. Слишком острое реагирование на новую информацию и нежелание отказаться от своих убеждений в равной степени небезопасны. Этот совет призывает использовать опыт и взвешивать значимость источника информации. Об этом поединке будет много всего сказано в Интернете, поэтому уделите время поиску самых достоверных источников информации.

5. Поддавайте сомнению личные предубеждения. Если у вас уже сложилось представление о боксе и вы не можете не обращать внимания на победы Мэйуэзера, заставьте себя подумать о вариантах развития событий, в которых он может проиграть, и наоборот.

6. Присваивайте своим догадкам степени вероятности. Опытный составитель прогнозов скажет больше, чем «Победа Мэйуэзера несомненна» или «У Мак-Грегора нет шансов». Его подход отражает детальную оценку, определенную в результате измерения вероятности, а не пустые высказывания. 

7. Найдите баланс между недостаточной уверенностью и чрезмерной уверенностью в правоте. Необходимо найти золотую середину между промедлением и моментом бездействия, чтобы и не упустить возможность и не рисковать без взвешенной оценки.

8. Одинаково беспристрастно анализируйте как неудачи, так и успехи. Хуже, чем сделать ошибку, может быть только непринятие на себя ответственности за эту ошибку. Аналогичным образом, вы можете принимать правильные решения и по-прежнему получать ненадлежащий результат, и наоборот.

 9. Раскрывайте лучшие качества других и позвольте другим раскрыть ваш потенциал. Этот совет связан с командным характером проекта «Здравое суждение», поэтому будет иметь значение только в том случае, если вы работаете в рамках какого-либо объединения или, возможно, очень активны в социальных сетях, готовы поделиться своими материалами и принимать или давать конструктивную критику.

10. Помните, что достичь совершенства можно, только реализуя на практике свои благие намерения. Допустимо воспринимать ставки как способ приятного времяпровождения, просто не надейтесь, что вы будете выигрывать в долгосрочной перспективе. Если вас этот прогноз не радует, примите тот факт, что вам придется вложить время и усилия в размещение ставок на систематической основе и со структурированным подходом.

Ресурсы для размещения ставок: расширение возможностей игроков для размещения ставок

Ресурсы для размещения ставок Пиннакл содержат одну из наиболее полных коллекций экспертных рекомендаций по размещению ставок онлайн. Стремясь предоставить игрокам возможность расширить их знания, в этих рекомендациях мы постарались охватить все уровни опыта.