AIスーパーフォーキャスター、ついに登場
AIによる予測能力が人間のスーパーフォーキャスター（超予測者）に迫りつつある現状を分析。大規模言語モデルを用いた予測システムが、地政学的イベントや経済指標などの将来予測で高い精度を達成しており、従来の専門家の判断を上回るケースも出てきている。AI予測の可能性と限界について詳しく検討する。
背景メモ
- 本稿は、Scott Alexander（精神科医ブロガー、ACX運営）によるAI予測能力の実証分析。Polymarketなどの予測市場でAIモデルが人間のスーパー予測者（Philip Tetlockが定義）に迫る精度を示している現状を検証する。
- スーパー予測者とは、政治・経済など多分野の確率予測で専門家を凌駕する一部のアマチュア予測者たち。Tetlockの研究でその存在が広く知られるようになった。
- AnthropicのClaude、OpenAIのo1など最新AIは、事前トレーニングやデータ不正なくとも、ブックメーカーオッズを参照したキャリブレーション（確率調整）により高精度を達成。ある実験では、地政学リスク予測で人間スーパー予測者とほぼ同等の成績を記録した。
- 重要な論点は、こうしたAI予測が「自分で因果推論している」のか「訓練データのパターンから類似ケースを想起した結果たまたま合っている」のかの区別が困難な点。Alexanderは両方可能性があるとしつつ、少なくとも初期的には「思考の外部化」リスク（人間が考える代わりにAIに任せる）への警戒を促している。
- 予測市場（Polymarket, Metaculus, Manifoldなど）自体が近年のトレンドで、AI予測者を実運用に組み込む試み（例：MetaculusのAI予測者トーナメント）が進行中。