stringtranslate.com

Проект «Здравое суждение»

Good Judgment Project ( GJP ) — это организация, призванная «использовать мудрость толпы для прогнозирования мировых событий». Она была создана совместно Филиппом Э. Тетлоком (автором Superforecasting and Expert Political Judgment ), ученым по принятию решений Барбарой Меллерс и Доном Муром , все профессорами Пенсильванского университета . [1] [2] [3]

Проект начинался как участник программы Aggregative Contingent Estimation (ACE) в рамках Intelligence Advanced Research Projects Activity (IARPA). [4] [5] Затем он распространил свою коллективную мудрость на коммерческую деятельность, нанимая прогнозистов и объединяя прогнозы наиболее исторически точных из них для прогнозирования будущих событий . [6] [7] Прогнозы оцениваются с использованием баллов Брайера . [8] Лучшие прогнозисты в GJP «по сообщениям, на 30% лучше, чем сотрудники разведки, имеющие доступ к фактической секретной информации». [9]

История

Проект Good Judgment Project стартовал в июле 2011 года в сотрудничестве с программой Aggregative Contingent Estimation (ACE) в IARPA (IARPA-ACE). [10] Первый конкурс начался в сентябре 2011 года. [11] GJP был одним из многих участников турнира IARPA-ACE, который ежегодно задавал около 100–150 вопросов о геополитических событиях. Исследовательская группа GJP собрала большое количество талантливых любителей (а не экспертов по геополитическим вопросам), дала им базовые руководства по передовому опыту прогнозирования и преодолению когнитивных предубеждений и создала алгоритм агрегации для объединения индивидуальных прогнозов прогнозистов. [5] [12] GJP выиграла оба сезона конкурса и оказалась на 35–72 % точнее любой другой исследовательской группы. [13] Начиная с лета 2013 года, GJP были единственной исследовательской группой, которую IARPA-ACE все еще финансировал, и участники GJP имели доступ к Интегрированной системе раннего предупреждения конфликтов . [8]

Люди

Соруководителями GJP являются Филип Тетлок , Барбара Меллерс и Дон Мур . [1] На веб-сайте перечислено в общей сложности около 30 членов команды, включая соруководителей, а также Дэвида Будеску , Лайла Унгара , Джонатана Барона и предпринимателя на рынках прогнозирования Эмиля Серван-Шрайбера. [14] В консультативный совет вошли Дэниел Канеман , Роберт Джервис , Дж. Скотт Армстронг , Майкл Мобуссен , Карл Шпецлер и Джастин Вольферс . ​​[15] В исследовании участвовало несколько тысяч человек в качестве добровольных прогнозистов. [12] Используя тесты на личностные черты, методы обучения и стратегии, исследователи GJP смогли выбрать участников прогнозирования с меньшим когнитивным предубеждением, чем у среднестатистического человека; по мере продолжения конкурса прогнозирования исследователи смогли еще больше отобрать этих людей в группы так называемых суперпрогнозистов . В последнем сезоне GJP было задействовано в общей сложности 260 суперпрогнозистов. [ необходима цитата ]

Исследовать

Значительное количество исследований было проведено на основе проекта Good Judgment людьми, вовлеченными в него. [16] Результаты показывают, что использование сочетания статистики, психологии, обучения и различных уровней взаимодействия между отдельными прогнозистами последовательно давало наилучший прогноз в течение нескольких лет подряд. [12]

Доброе суждение Inc.

Коммерческий спин-офф Good Judgment Project начал работать в Интернете в июле 2015 года под названием Good Judgment Inc. Их услуги включают прогнозы по вопросам, представляющим общий интерес, индивидуальные прогнозы и обучение методам прогнозирования Good Judgment. [17] Начиная с сентября 2015 года Good Judgment Inc проводит публичный турнир по прогнозированию на сайте Good Judgment Open. Как и Good Judgment Project, Good Judgment Open задает вопросы о геополитических и финансовых событиях, хотя также задает вопросы о политике, развлечениях и спорте США. [18] [19]

Освещение в СМИ

GJP неоднократно обсуждался в The Economist . [11] [20] [21] [22] GJP также освещался в The New York Times , [3] The Washington Post , [5] [23] [24] и Co.Exist. [25] NPR транслировал сегмент о The Good Judgment Project под названием «So You Think You're Smarter Than a CIA Agent» 2 апреля 2014 года. [9] Financial Times опубликовал статью о GJP 5 сентября 2014 года. [26] Washingtonian опубликовал статью, в которой упоминался GJP 8 января 2015 года. [27] BBC и The Washington Post опубликовали статьи о GJP соответственно 20, 21 и 29 января 2015 года. [28] [29] [30]

Almanac of Menlo Park опубликовал статью о GJP 29 января 2015 года. [31] Статья о GJP появилась на портале Philadelphia Inquirer , Philly.com, 4 февраля 2015 года. [32] В книге Wiser: Getting Beyond Groupthink to Make Groups Smarter есть раздел, в котором подробно описывается участие GJP в турнире, организованном IARPA. [33] Psychology Today опубликовала в сети короткую статью, резюмирующую статью Меллерса и др ., в которой подводятся итоги основных выводов GJP. [34] [35]

Проект породил книгу 2015 года Тетлока и соавтора Дэна Гарднера « Суперпрогнозирование — искусство и наука прогнозирования» , в которой раскрываются основные выводы исследования, проведенного с использованием данных GJP. [36] Соавтор Гарднер уже опубликовал книгу в 2010 году, в которой цитировалось предыдущее исследование Тетлока, которое положило начало усилиям GJP. [37] Обзор книги в печатном издании Economist от 26 сентября 2015 года обсуждает основные концепции. [38] Статья в Wall Street Journal описывает ее как: «Самая важная книга о принятии решений со времен книги Дэниела Канемана « Думай медленно… решай быстро ». [39] Harvard Business Review сравнил ее с книгой Джордана Элленберга «Как не ошибаться: сила математического мышления » . [40] 30 сентября 2015 года на NPR вышел эпизод шоу Колина Макинроя, посвященный GJP и книге «Суперпрогнозирование» ; гостями шоу были Тетлок, директор IARPA Джейсон Матени и суперпрогнозист Элейн Рич. [41]

Смотрите также

Ссылки

  1. ^ ab "Добро пожаловать в проект Good Judgment". Проект Good Judgment . Получено 5 мая 2014 г.
  2. ^ "Кто есть кто в проекте Good Judgment". Проект Good Judgment. 27 июля 2011 г. Получено 5 мая 2014 г.
  3. ^ ab Brooks, David (21 марта 2013 г.). "Forecasting Fox". New York Times . Получено 5 мая 2014 г.
  4. ^ "The Project". The Good Judgment Project. Архивировано из оригинала 6 мая 2014 года . Получено 5 мая 2014 года .
  5. ^ abc Horowitz, Michael (26 ноября 2013 г.). «Хорошее суждение в прогнозировании международных отношений (и приглашение на 3-й сезон)». Washington Post . Получено 5 мая 2014 г.
  6. ^ "О суперпрогнозировании | Непревзойденная точность и прецизионность прогнозирования". Хорошее суждение . Получено 2022-02-17 .
  7. ^ Мэтьюз, Дилан (16.02.2022). «Как мы можем предотвратить крупные конфликты, такие как война между Россией и Украиной?». Vox . Получено 17.02.2022 .
  8. ^ ab Dickenson, Matt (12 ноября 2013 г.). «Предсказание и хорошее суждение: может ли ICEWS информировать о прогнозах?». Predictive Heuristics . Получено 24 мая 2014 г. .
  9. ^ ab Spiegel, Alix. «Итак, вы думаете, что вы умнее агента ЦРУ». NPR.org . Получено 18 августа 2014 г.
  10. ^ "Идея, стоящая за проектом Good Judgment". Проект Good Judgment. 27 июля 2011 г. Архивировано из оригинала 6 мая 2014 г. Получено 5 мая 2014 г.
  11. ^ ab "Опасности предсказания: приключения в экспертном мышлении". The Economist . 2 сентября 2011 г. Получено 6 мая 2014 г.
  12. ^ abc Меллерс, Барбара; Ангар, Лайл; Барон, Джонатан; Рамос, Хайме; Гуркай, Бурку; Финчер, Катрина; Скотт, Сидней Э.; Мур, Дон; Атанасов, Павел; Свифт, Сэмюэл А.; Мюррей, Терри; Стоун, Эрик; Тетлок, Филип Э. (2014-05-01). "Психологические стратегии для победы в турнире по геополитическому прогнозированию". Psychological Science . 25 (5): 1106–1115. doi :10.1177/0956797614524255. ISSN  1467-9280. PMID  24659192. S2CID  42143367.
  13. ^ "Первый сезон чемпионата". Хорошее суждение . Получено 2022-02-17 .
  14. ^ "Команда". Проект "Здравое суждение" . Получено 5 мая 2014 г.
  15. ^ "Фрикономика". Зарегистрируйтесь на турнир по предсказаниям . 2011-08-04.
  16. ^
    • Атанасов, Павел; Рескобер, Филипп; Стоун, Эрик; Свифт, Сэмюэл А.; Серван-Шрайбер, Эмиль; Тетлок, Филипп; Унгар, Лайл; Меллерс, Барбара (2016-04-22). «Извлечение мудрости толпы: рынки прогнозов против опросов прогнозов». Management Science . 63 (3): 691–706. doi :10.1287/mnsc.2015.2374. ISSN  0025-1909.
    • Унгар, Лайл; Меллерс, Барбара; Сатопяа, Вилле; Барон, Джон; Тетлок, Филип Э .; Рамос, Хайме; Свифт, Сэм. «Проект «Здравое суждение»: масштабное тестирование различных методов комбинирования экспертных прогнозов». Ассоциация по развитию искусственного интеллекта .
    • Ульфельдер, Джей (27 марта 2014 г.). Использование «мудрости (экспертной) толпы» для прогнозирования массовых злодеяний (отчет). doi :10.2139/ssrn.2418980. SSRN  2418980.
    • Атанасов, П.; Витковски, Дж.; Унгар, Л.; Меллерс, Б.; Тетлок, П. (2020). «Маленькие шаги к точности: инкрементальные корректировщики убеждений — лучшие прогнозисты». Организационное поведение и процессы принятия решений человеком . 160 : 19–35. doi : 10.1016/j.obhdp.2020.02.001 . S2CID  216273470.
  17. ^ Броди, Лиз (1 января 2022 г.). «Познакомьтесь с элитной командой суперпрогнозистов, которые превратили видение будущего в науку». Предприниматель .
  18. ^ Госсетт, Стивен (6 августа 2020 г.). «Как суперпрогнозисты проекта Good Judgment используют данные для составления прогнозов». builtin.com . Получено 07.06.2022 .
  19. ^ "Good Judgment® Open". www.gjopen.com . Получено 2022-02-17 .
  20. ^ «Денежно-кредитная политика: насколько вероятна дефляция?». The Economist . 13 сентября 2011 г. Получено 6 мая 2014 г.
  21. ^ "International: Кто хорош в прогнозах? Как отсортировать лучших от остальных". The Economist . 18 ноября 2013 г. Получено 6 мая 2014 г.
  22. ^ «Лучшие ставки экспертов». The Economist . 10 ноября 2021 г. Получено 7 июня 2022 г.
  23. ↑ Игнатиус, Дэвид (1 ноября 2013 г.). «Больше болтовни, чем нужно». Washington Post . Получено 6 мая 2014 г.
  24. ^ Бендер, Джереми (3 апреля 2014 г.). «Огромный эксперимент показывает, что обычные люди предсказывают мировые события лучше, чем агенты ЦРУ». Business Insider . Получено 6 мая 2014 г.
  25. ^ "Удивительная точность краудсорсинговых прогнозов о будущем. Знаете ли вы, получит ли Турция новую конституцию? Оказывается, знаете: группа хорошо информированных граждан может предсказывать будущие события чаще, чем любой эксперт по внешней политике или аналитик ЦРУ". Co.exist. 21 апреля 2014 г. Получено 6 мая 2014 г.
  26. ^ Харфорд, Тим (2014-09-05). «Как заглянуть в будущее». Financial Times . ISSN  0307-1766 . Получено 2014-09-05 .
  27. ^ Гамильтон, Киган (8 января 2015 г.). «Как американские агентства используют Интернет, чтобы заполучить наши мозги». Washingtonian . Получено 24.01.2015 .
  28. ^ Бертон, Тара (2015-01-20). «Можете ли вы стать «суперпрогнозистом»?». BBC Future . Получено 21-01-2015 .
  29. ^ Дженсен, Натан (21.01.2015). «Эксперты считают, что республиканский Сенат и полномочия Обамы по ускорению процесса являются ключом к новым торговым соглашениям». The Washington Post . ISSN  0190-8286 . Получено 21.01.2015 .
  30. ^ Меллерс, Барбара; Майкл С. Горовиц (29.01.2015). «Делает ли кто-нибудь точные геополитические прогнозы?». The Washington Post . ISSN  0190-8286 . Получено 30.01.2015 .
  31. ^ "Статья: Боб Сойер из Вудсайда обнаруживает свой скрытый талант к прогнозированию" . Получено 17.03.2015 .
  32. ^ Дриббена, Мелисса; Сотрудник Inquirer (2015-02-04). «Гадание: Толпа превосходит экспертов». Philly.com . Получено 2015-02-06 .
  33. ^ Санстейн, Касс Р.; Хасти, Рид (2014-12-23). ​​Wiser: Getting Beyond Groupthink to Make Groups Smarter . Harvard Business Review Press. ISBN 978-1-4221-2299-0.
  34. ^ "Кто лучше всех предсказывает будущее? (и как стать лучше)". Psychology Today . Получено 2015-07-11 .
  35. ^ Меллерс, Барбара; Стоун, Эрик; Мюррей, Терри; Минстер, Анджела; Рорбо, Ник; Бишоп, Майкл; Чен, Ева; Бейкер, Джошуа; Хоу, Юань; Горовиц, Майкл; Унгар, Лайл; Тетлок, Филипп (2015-05-01). «Выявление и воспитание суперпрогнозистов как метод улучшения вероятностных прогнозов». Перспективы психологической науки . 10 (3): 267–281. doi :10.1177/1745691615577794. ISSN  1745-6916. PMID  25987508. S2CID  3118872.
  36. ^ Тетлок, Филип Э.; Гарднер, Дэн (2015-09-29). Суперпрогнозирование — искусство и наука прогнозирования . Нью-Йорк: Crown. ISBN 978-0-8041-3669-3.
  37. ^ Гарднер, Дэн (12.10.2010). Будущая болтовня: почему предсказания экспертов не оправдывают ожиданий — и почему мы им всё равно верим . Макклелланд и Стюарт.
  38. ^ "Незамутненное видение". The Economist . 2015-09-26. ISSN  0013-0613 . Получено 2015-09-24 .
  39. ^ Цвейг, Джейсон. «Можете ли вы увидеть будущее? Вероятно, лучше, чем профессиональные прогнозисты». The Wall Street Journal . Получено 25 сентября 2015 г. Я думаю, что «Суперпрогнозирование: искусство и наука предсказания» Филипа Тетлока, ..., является самой важной книгой о принятии решений со времен «Думай медленно... решай быстро» Дэниела Канемана.
  40. ^ Фрик, Уолтер. «Вопрос об определенности». Harvard Business Review . Получено 26 сентября 2015 г.
  41. ^ Макинрой, Колин; Вольф, Чион. «Шоу Колина Макинроя». WNPR. Национальное общественное радио . Получено 1 октября 2015 г.

Внешние ссылки