正解: ACorrect: A
記録と検証がない環境では、後知恵バイアスと曖昧な予測表現が組み合わさり、外れた予測が記憶の中で「当たり」に変換されるため、自己評価は下がりません。Without records and verification, hindsight bias combines with vague forecasts to convert misses into 'hits' in memory, so self-assessment never falls.
Philip Tetlock は約20年にわたり284人の専門家から8万件以上の予測を集め、2005年の『Expert Political Judgment』で、専門家の長期予測の精度が単純な統計モデルや基準率に劣ることを示しました。それでも専門家の自信が揺るがなかった理由として、Tetlock は複数の「信念防衛」のメカニズムを特定しました。「タイミングが違っただけだ」といった再解釈は後知恵バイアスの一形態です。また「〜の可能性がある」という曖昧な表現は、どんな結果が出ても「そう言った」と主張できるため、反証不可能です。最も根本的なのは、予測を記録し採点する仕組みがなかったことです。Tetlock はその後の「Good Judgment Project」で、まさにこの仕組みを導入することで予測精度が大幅に改善できることを示しました。Philip Tetlock collected more than 80,000 forecasts from 284 experts over roughly two decades and showed in Expert Political Judgment (2005) that experts' long-range predictions were less accurate than simple statistical models or base rates. Yet expert confidence was undented, and Tetlock identified several 'belief system defenses.' Reinterpretations such as 'I was basically right, just off on timing' or 'I would have been right but for that unforeseeable event' are forms of hindsight bias. Vague phrasing such as 'there is a possibility that' can claim credit for any outcome and is therefore unfalsifiable. Most fundamentally, there was no mechanism to record forecasts with explicit probabilities and deadlines and score them afterward. Tetlock's subsequent Good Judgment Project demonstrated that introducing exactly this mechanism dramatically improves forecasting accuracy.
予測を記録し採点する仕組みは、専門家にとって評判上のリスクとなるため、導入への抵抗が強いです。また、確率付きの明確な予測は「断言しない」ように聞こえ、メディアや組織では自信満々に断言する人の方が影響力を持つという逆のインセンティブが働きます。個人レベルでも、自分の予測の外れを直視することは心理的に苦痛です。Recording and scoring forecasts poses reputational risk for experts, so resistance is strong. Precise probabilistic forecasts sound less decisive, and media and organizations often reward confident assertion over calibrated nuance, creating a perverse incentive. Even at the individual level, confronting your own forecasting misses is painful.
自分の予測は必ず「何が・いつまでに・何％の確率で」という形式で書き、期限が来たら採点する習慣をつけましょう。Tetlock の「スーパーフォーキャスター」の特徴である、基準率から出発する、小刻みに確率を更新する、反対意見を積極的に取り入れる、という三つの実践を取り入れると精度が向上します。組織では、会議での予測発言を議事録に確率付きで残すだけでも大きな改善になります。Always write forecasts in the form 'what, by when, with what probability,' and score them when the deadline arrives. Adopt the three practices Tetlock found among 'superforecasters': start from base rates, update probabilities in small increments, and actively seek opposing views. In organizations, simply recording predictive statements from meetings with probabilities attached is a major improvement.