信頼スコアとは何か?

信頼スコアとは、予測が正しい確率をモデルが推定した値です。ExPrysm がホーム勝利予測に72%の信頼スコアを表示している場合、モデルはホームチームがその試合に勝つ確率を72%と推定していることを意味します。

これは保証ではなく、確率です。72%の信頼スコアの予測はおよそ28%の確率で外れますが、それはまったく正常なことです。重要な問いは、モデルが示す信頼度が多くの予測を通じて現実と一致しているかどうかです。

信頼スコアはオッズと同じではありません。70%の信頼度があるからといって、どんなオッズでも賭けるべきということにはなりません。価値を見つけるには、信頼度をブックメーカーの示す確率と比較する必要があります。

ExPrysm が信頼スコアを計算する方法

ExPrysm の信頼スコアは、CatBoost 勾配ブースティングモデルの確率出力から直接得られます。プロセスの仕組みは以下のとおりです:

1
特徴量の入力
150以上の特徴量がモデルに入力されます:Pi-ratings(Constantinou & Fenton, 2013)、ELO レーティング、フォーム指数、直接対決記録、ホーム/アウェイの成績、リーグ順位表などです。
2
確率の出力
CatBoost は各結果の生確率を出力します(試合結果のホーム/引き分け/アウェイ、両チーム得点 の有無、ゴール数の Over/Under)。これらが基本の信頼スコアとなります。
3
キャリブレーション
生確率は過去の結果に対してキャリブレーションされ、モデルが70%と言ったときに実際に約70%の確率で的中するようにします。これがスコアを信頼できるものにしている要素です。

信頼度と精度の関係

信頼スコアの真の検証は、実際の結果と一致しているかどうかです。ExPrysm の信頼度帯域が実際の精度にどう対応しているかを以下に示します:

信頼度の範囲期待精度実測精度状態
50–60%約55%約52%やや保守的
60–70%約65%約63%良好なキャリブレーション
70–80%約75%約74%良好なキャリブレーション
80%以上約85%約82%高い信頼性

期待精度と実測精度の近い一致は、ExPrysm のモデルが適切にキャリブレーションされていることを示しています。70%と言えば70%を意味し、60%でも80%でもありません。

信頼度が高いほど良い賭けとは限りません。オッズ2.50での60%信頼度の予測は、オッズ1.10での85%信頼度の予測よりも価値がある場合があります。常に信頼度とバリュー分析を組み合わせてください。

信頼スコアの活用方法

予測のフィルタリング

最もシンプルな使い方は、最低信頼度のしきい値を設定することです。たとえば、65%以上の信頼度を持つ予測のみを検討します。これにより数は減りますが、選択した予測の平均精度が上がります。

バリュー検出との組み合わせ

最も強力なアプローチは、信頼度とバリューを組み合わせることです。ブックメーカーのオッズに対してポジティブなエッジを示す高信頼度の予測は、ExPrysm が出せる最も強いシグナルです。信頼度とエッジの両方がしきい値を超えている予測を探しましょう。

バンクロールの配分

信頼度に基づいてステーク額を調整するベッターもいます。信頼度が高い予測には大きなステーク、低い予測には小さなステークを割り当てます。これはケリー基準アプローチを簡略化したものです。

ステーキングの例
50–65% 信頼度
0.5 ユニット
控えめ
65–80% 信頼度
1.0 ユニット
標準
80%以上 信頼度
1.5 ユニット
積極的

適切にキャリブレーションされたモデルとは

キャリブレーションとは、予測確率と実際の結果の一致度のことです。完全にキャリブレーションされたモデルでは、70%の信頼度で行われたすべての予測のうち、正確に70%が的中することになります。

キャリブレーション曲線

キャリブレーション曲線(信頼性ダイアグラム)は、x軸に予測確率、y軸に実際の的中頻度をプロットします。完全にキャリブレーションされたモデルは (0,0) から (1,1) への対角線を描きます。対角線より上の点はモデルが過小評価していることを、下の点は過大評価していることを意味します。

ブライアスコア

ブライアスコアは、予測確率と実際の結果(0または1)の平均二乗誤差を測定します。0(完璧)から1(最悪)の範囲で、スコアが低いほどキャリブレーションと識別力の組み合わせが優れていることを示します。

ブライアスコア評価
0.00 – 0.15優れたキャリブレーション
0.15 – 0.25良好なキャリブレーション
0.25 – 0.35普通のキャリブレーション
0.35以上不十分なキャリブレーション

ExPrysm のキャリブレーション実績

ExPrysm はすべてのマーケットのキャリブレーションをリアルタイムで追跡しています。7,800試合以上を分析したプラットフォームのパフォーマンスデータは、主要マーケット全体で強力なキャリブレーションを示しています:

54.4%
試合結果(1X2)
80.8%
ダブルチャンス(DC)
55.6%
両チーム得点
59.7%
ゴール数 オーバー/アンダー 2.5

詳細なキャリブレーション曲線、ブライアスコア、日次精度トレンドはパフォーマンスページでご覧いただけます。

信頼度を効果的に活用するためのヒント

高信頼度を盲目的に追わない

大本命チームへの85%信頼度の予測は、多くの場合非常に低いオッズ(1.10〜1.20)を伴います。払い戻しがリスクに見合いません。1回の外れで多くの的中分が消えてしまいます。常に信頼度と合わせてオッズを確認してください。

マーケットの種類を考慮する

信頼スコアはマーケットによって異なる振る舞いをします。ダブルチャンス予測は3つの結果のうち2つをカバーするため、自然と高い信頼度(80%以上)になります。試合結果(1X2)予測は3択マーケットが本質的に難しいため、70%を超えることはほとんどありません。信頼度はマーケットをまたいで比較するのではなく、同じマーケット内で比較してください。

サンプルサイズが重要

10件の予測でモデルを評価しないでください。信頼スコアは確率的なもので、長期的な頻度を表しています。キャリブレーションが成立しているかを意味のある形で評価するには、ある信頼度帯域で少なくとも100件以上の予測が必要です。

複数のシグナルを組み合わせる

最も強力なアプローチは、信頼スコアを複数の要素のひとつとして使うことです:信頼スコア+バリューエッジ+リーグ階層+マーケット種別。単一の指標だけでは全体像は見えません。

まとめ

信頼スコアは ExPrysm で最も有用な機能のひとつですが、それが何を表しているかを理解している場合に限ります。これらはキャリブレーションされた確率であり、確実性ではありません。適切にキャリブレーションされた65%は、ランダムな予想屋のキャリブレーションされていない90%よりも価値があります。

信頼スコアを使って予測をフィルタリングし、優先順位をつけ、ステーク額を決めましょう。最も強いシグナルを得るためにバリュー検出と組み合わせてください。そして常に覚えておいてください:目標は毎回正解することではなく、適切なオッズで十分な頻度で正解し、長期的に利益を上げることです。