グッドジャッジメントプロジェクト
クラウドソーシングによるイベント予測

グッド・ジャッジメント・プロジェクト（GJP）は、「群衆の知恵を活用して世界の出来事を予測する」ことを目的とした組織です。ペンシルベニア大学の教授であるフィリップ・E・テトロック（ 『スーパーフォーキャスティング：予測と専門家による政治判断の芸術と科学』の著者）、意思決定科学者のバーバラ・メラーズ、そしてドン・ムーアによって共同設立されました。[1] [2] [3]

このプロジェクトは、情報高等研究計画活動（IARPA）の集約的偶発推定（ACE）プログラムへの参加として始まりました。 [4] [5]その後、群衆の知恵を商業活動にまで拡大し、予測者を募集し、その中で最も歴史的に正確な予測を集約して将来の出来事を予測しました。[6] [7]予測はブライアースコアを用いて採点されます。[8] GJPのトップ予測者は、「実際の機密情報にアクセスできる情報部員よりも30%優れていると報告されている」[9] 。

歴史

Good Judgmentプロジェクトは、IARPAのAggregative Contingent Estimation（ACE）プログラム（IARPA-ACE）との共同研究として2011年7月に開始されました。 [10]最初のコンテストは2011年9月に開始されました。 [11] GJPは、地政学的イベントについて毎年約100～150の問題が出題されるIARPA-ACEトーナメントの多くの参加者の1つでした。GJPの研究チームは、（地政学の専門家ではなく）才能のあるアマチュアを多数集め、彼らに予測のベストプラクティスと認知バイアスの克服に関する基本的なチュートリアルを提供し、予測者の個々の予測を組み合わせる集約アルゴリズムを作成した。[5] [12] GJPはコンテストの両シーズンで優勝し、他のどの研究チームよりも35～72％高い精度を示しました。[13] 2013年の夏以降、GJPはIARPA-ACEが資金提供を続ける唯一の研究チームとなり、GJPの参加者は統合紛争早期警報システムにアクセスできるようになりました。[8]

人々

GJPの共同リーダーにはフィリップ・テトロック、バーバラ・メラーズ、ドン・ムーアがいる。[1]ウェブサイトには共同リーダーの他にデビッド・ブデスク、ライル・ウンガー、ジョナサン・バロン、予測市場の起業家エミール・セルヴァン＝シュライバーなど合計約30名のチームメンバーが掲載されている。[14]諮問委員会にはダニエル・カーネマン、ロバート・ジャービス、Ｊ・スコット・アームストロング、マイケル・モーブッサン、カール・スペッツラー、ジャスティン・ウォルファーズがいる。[15]この研究では数千人がボランティアの予測者として雇用された。[12]性格特性テスト、訓練方法、戦略を使用して、GJPの研究者は平均的な人よりも認知バイアスの少ない予測参加者を選ぶことができた。予測コンテストが続くにつれて、研究者はこれらの個人をさらに絞り込んで、いわゆるスーパー予測者のグループにまとめることができた。GJPの最後のシーズンでは合計260名のスーパー予測者が参加した。[要引用]

研究

グッド・ジャッジメント・プロジェクトに携わった人々によって、このプロジェクトに基づいた膨大な研究が行われてきました。[16]その結果、統計、心理学、訓練、そして個々の予測者間の様々なレベルの相互作用を組み合わせることで、数年連続で最良の予測を一貫して生み出すことができたことが示されています。[12]

グッドジャッジメント株式会社

グッド・ジャッジメント・プロジェクトの商業スピンオフが、2015年7月にグッド・ジャッジメント社としてウェブ上で運営を開始しました。同社のサービスには、一般向けの質問に関する予測、カスタム予測、グッド・ジャッジメント社の予測技術のトレーニングなどが含まれます。[17]グッド・ジャッジメント社は2015年9月から、グッド・ジャッジメント・オープンのサイトで公開予測トーナメントを開催しています。グッド・ジャッジメント・プロジェクトと同様に、グッド・ジャッジメント・オープンでは地政学および金融イベントに関する質問が出題されますが、アメリカの政治、エンターテインメント、スポーツに関する質問も出題されます。[18] [19]

メディア報道

GJPはエコノミスト誌で繰り返し取り上げられてきました。[11] [20] [21] [22] GJPはニューヨーク・タイムズ紙、[3] ワシントン・ポスト紙、[5] [23] [24] Co.Exist紙でも取り上げられています。[25] NPRは2014年4月2日、「あなたはCIAエージェントより賢いと思っているのですか？」というタイトルでThe Good Judgment Projectに関する番組を放送しました。[9]ファイナンシャル・タイムズ紙は2014年9月5日にGJPに関する記事を掲載しました。[26] ワシントン・ポスト紙は2015年1月8日にGJPについて言及した記事を掲載しました。[27] BBCとワシントン・ポスト紙はそれぞれ2015年1月20日、21日、29日にGJPに関する記事を掲載しました。[28] [29] [30]

メンロパークの年鑑は2015年1月29日にGJPに関する記事を掲載した。[31] GJPに関する記事は、フィラデルフィアインクワイアラーのポータルサイトであるPhilly.comに2015年2月4日に掲載された。[32] Wiser: Getting Beyond Groupthink to Make Groups Smarterという書籍には、IARPAが運営するトーナメントへのGJPの関与について詳しく述べたセクションがある。[33] Psychology Todayは、メラーズらによる論文を要約した短い記事をオンラインで公開し、GJPの主な調査結果をまとめた。[34] [35]

このプロジェクトから、2015年にテトロック著、ダン・ガードナー共著の著書「スーパーフォーキャスト - 予測の芸術と科学」が生まれ、GJPのデータを使用して行われた研究の主な調査結果が明らかにされています。[36]共著者のガードナーは、GJPの取り組みの種となったテトロックの以前の研究を引用した本を2010年にすでに出版していました。[37]エコノミストの2015年9月26日の印刷版の書評では、主要な概念が説明されています。[38]ウォールストリートジャーナルの記事では、これを「ダニエル・カーネマンのファスト＆スロー以来、意思決定に関する最も重要な本」と評しています。[39]ハーバードビジネスレビューは、これをジョーダン・エレンバーグの著書「How Not to Be Wrong: The Power of Mathematical Thinking」と対比させています。[40] 2015年9月30日、NPRはGJPと書籍『スーパーフォーキャスティング』を中心にしたコリン・マッケンロー・ショー のエピソードを放送しました。番組のゲストはテトロック、IARPAディレクターのジェイソン・マセニー、スーパーフォーキャスターのエレイン・リッチでした。[41]

参照

参考文献

  1. ^ ab 「Good Judgment Projectへようこそ」。Good Judgment Project 。 2014年5月5日閲覧。
  2. ^ 「グッド・ジャッジメント・プロジェクトのメンバー一覧」グッド・ジャッジメント・プロジェクト、2011年7月27日。 2014年5月5日閲覧。
  3. ^ ab Brooks, David (2013年3月21日). 「Forecasting Fox」. New York Times . 2014年5月5日閲覧。
  4. ^ “The Project”. The Good Judgment Project. 2014年5月6日時点のオリジナルよりアーカイブ。 2014年5月5日閲覧。
  5. ^ abc Horowitz, Michael (2013年11月26日). 「国際情勢予測における優れた判断力（そしてシーズン3への招待）」ワシントン・ポスト. 2014年5月5日閲覧。
  6. ^ 「スーパー予測について | 前例のない正確で精密な予測」。Good Judgment . 2022年2月17日閲覧。
  7. ^ マシューズ、ディラン (2022年2月16日). 「ロシア・ウクライナ戦争のような大規模紛争をどう防ぐか？」Vox . 2022年2月17日閲覧。
  8. ^ ab Dickenson, Matt (2013年11月12日). 「予測と適切な判断：ICEWSは予報に役立つか？」. 予測的ヒューリスティックス. 2014年5月24日閲覧。
  9. ^ ab シュピーゲル、アリックス. 「あなたはCIAエージェントより賢いと思っているのですか？」NPR.org . 2014年8月18日閲覧。
  10. ^ 「Good Judgment Projectの背景にあるアイデア」。The Good Judgment Project。2011年7月27日。2014年5月6日時点のオリジナルよりアーカイブ。2014年5月5日閲覧。
  11. ^ ab 「予測の危険性：評論家の冒険」『エコノミスト』 2011年9月2日。 2014年5月6日閲覧。
  12. ^ abc メラーズ, バーバラ; ウンガー, ライル; バロン, ジョナサン; ラモス, ハイメ; ガーカイ, ブルク; フィンチャー, カトリーナ; スコット, シドニー E.; ムーア, ドン; アタナソフ, パベル; スウィフト, サミュエル A.; マレー, テリー; ストーン, エリック; テトロック, フィリップ E. (2014-05-01). 「地政学予測トーナメントで勝つための心理戦略」.心理科学. 25 (5): 1106– 1115. doi :10.1177/0956797614524255. ISSN  1467-9280. PMID  24659192. S2CID  42143367.
  13. ^ 「最初のチャンピオンシップシーズン」。Good Judgment . 2022年2月17日閲覧。
  14. ^ 「チーム」. The Good Judgment Project . 2014年5月5日閲覧。
  15. ^ 「Freakonomics」.予測トーナメントにサインアップ. 2011年8月4日.
  16. ^
    • アタナソフ, パベル; レスコバー, フィリップ; ストーン, エリック; スウィフト, サミュエル A.; セルヴァン＝シュライバー, エミール; テトロック, フィリップ; ウンガー, ライル; メラーズ, バーバラ (2016年4月22日). 「群衆の知恵を汲み取る：予測市場 vs. 予測世論調査」 .マネジメント・サイエンス. 63 (3): 691– 706. doi :10.1287/mnsc.2015.2374. ISSN  0025-1909.
    • ウンガー（ライル）、メラーズ（バーバラ）、サトパー（ヴィル）、バロン（ジョン）、テトロック（フィリップ・E・）、ラモス（ジェイミー）、スウィフト（サム）。「グッド・ジャッジメント・プロジェクト：専門家の予測を組み合わせる様々な手法の大規模テスト」。人工知能推進協会。
    • ウルフェルダー、ジェイ（2014年3月27日）「（専門家の）群衆の知恵」を活用した大量虐殺の予測（報告書）」doi :10.2139/ssrn.2418980. SSRN  2418980
    • Atanasov, P.; Witkowski, J.; Ungar, L.; Mellers, B.; Tetlock, P. (2020). 「正確性への小さな一歩：段階的な信念更新者はより優れた予測者となる」.組織行動と人間の意思決定プロセス. 160 : 19–35 . doi : 10.1016/j.obhdp.2020.02.001 . S2CID  216273470.
  17. ^ リズ・ブロディ（2022年1月1日）「未来予測を科学に変えたスーパー予測者のエリートチームに会う」アントレプレナー誌。
  18. ^ Gossett, Stephen (2020年8月6日). 「Good Judgment Projectのスーパー予測者はどのようにデータを活用して予測を行うのか」. builtin.com . 2022年6月7日閲覧。
  19. ^ 「Good Judgment® Open」www.gjopen.com . 2022年2月17日閲覧。
  20. ^ 「金融政策：デフレの可能性はどの程度か？」エコノミスト誌、2011年9月13日。 2014年5月6日閲覧。
  21. ^ 「国際：予測が得意なのは誰か？最善の予測者とそうでない予測者を見分ける方法」エコノミスト誌、2013年11月18日。 2014年5月6日閲覧。
  22. ^ 「専門家のベストベット」エコノミスト誌2021年11月10日. 2022年6月7日閲覧。
  23. ^ イグナティウス・デイヴィッド（2013年11月1日）「必要以上におしゃべり」ワシントン・ポスト。 2014年5月6日閲覧。
  24. ^ ベンダー、ジェレミー（2014年4月3日）「大規模な実験で、一般人がCIAエージェントよりも世界情勢を予測できることが判明」Business Insider 2014年5月6日閲覧。
  25. ^ 「クラウドソーシングによる未来予測の驚くべき正確さ。トルコに新憲法が制定されるかどうかご存知ですか？ 実はご存知です。情報に精通した市民グループは、どんな外交政策専門家やCIAアナリストよりも、未来の出来事を予測できるのです」Co.exist. 2014年4月21日。 2014年5月6日閲覧。
  26. ^ ハーフォード、ティム (2014年9月5日). 「未来を見通す方法」.フィナンシャル・タイムズ. ISSN  0307-1766 . 2014年9月5日閲覧。
  27. ^ Hamilton, Keegan (2015年1月8日). 「米国政府機関はウェブをどのように活用して我々の脳を解析しているのか」. Washingtonian . 2015年1月24日閲覧。
  28. ^ Burton, Tara (2015年1月20日). 「あなたは『スーパー予測者』になれるか？」BBC Future . 2015年1月21日閲覧。
  29. ^ Jensen, Nathan (2015年1月21日). 「専門家は、共和党上院とオバマ大統領の早期承認権限が新たな貿易協定の鍵となると考えている」ワシントン・ポスト. ISSN  0190-8286 . 2015年1月21日閲覧。
  30. ^ メラーズ、バーバラ、マイケル・C・ホロウィッツ (2015年1月29日). 「正確な地政学的予測ができる人はいるか？」ワシントン・ポスト. ISSN  0190-8286 . 2015年1月30日閲覧。
  31. ^ 「特集記事：ウッドサイドのボブ・ソーヤーが予測における潜在的な才能を発見」。2015年3月17日閲覧。
  32. ^ ドリベン、メリッサ、インクワイアラー紙スタッフライター (2015年2月4日). 「占い：群衆が評論家を上回る」. Philly.com . 2015年2月6日閲覧。
  33. ^ サンスティーン、キャス・R.、ハスティー、リード（2014年12月23日）。『ワイザー：集団思考を超えてグループをよりスマートにする』ハーバード・ビジネス・レビュー・プレス。ISBN 978-1-4221-2299-0。
  34. ^ 「未来を予測するのが最も得意なのは誰か？（そして、より上手くなる方法）」Psychology Today . 2015年7月11日閲覧。
  35. ^ メラーズ, バーバラ; ストーン, エリック; マレー, テリー; ミンスター, アンジェラ; ローバウ, ニック; ビショップ, マイケル; チェン, エヴァ; ベイカー, ジョシュア; ホウ, ユアン; ホロウィッツ, マイケル; ウンガー, ライル; テトロック, フィリップ (2015-05-01). 「確率予測を向上させる方法としてのスーパー予測者の特定と育成」.心理科学の展望. 10 (3): 267– 281. doi :10.1177/1745691615577794. ISSN  1745-6916. PMID  25987508. S2CID  3118872.
  36. ^ テトロック, フィリップ E.; ガードナー, ダン (2015年9月29日).スーパーフォーキャスト ― 予測の芸術と科学ニューヨーク: クラウン. ISBN 978-0-8041-3669-3。
  37. ^ ガードナー、ダン (2010年10月12日). 『未来のおしゃべり：専門家の予測が失敗する理由と、なぜ私たちはそれを信じるのか』マクレランド＆スチュワート.
  38. ^ 「Unclouded vision」.エコノミスト. 2015年9月26日. ISSN  0013-0613 . 2015年9月24日閲覧。
  39. ^ ツヴァイク、ジェイソン。「未来は見えるか？ おそらくプロの予測者よりも優れている」ウォール・ストリート・ジャーナル。 2015年9月25日閲覧。フィリップ・テトロックの『スーパーフォーキャスティング：予測の芸術と科学』は、ダニエル・カーネマンの『ファスト＆スロー』以来、意思決定に関する最も重要な書籍だと思います。
  40. ^ フリック、ウォルター「疑問の確実性」ハーバード・ビジネス・レビュー。 2015年9月26日閲覧。
  41. ^ コリン・マッケンロー、チオン・ウルフ「コリン・マッケンロー・ショー」WNPR、ナショナル・パブリック・ラジオ。 2015年10月1日閲覧。
  • 公式サイト
  • 良い判断オープン
「https://en.wikipedia.org/w/index.php?title=The_Good_Judgment_Project&oldid=1323753217」より取得