R8收集數據中

AI 看好的球隊,賽前會變得更被看好嗎?

讓三個 AI 在賽前預測勝率,再檢查它們是否猜到賽前賠率的變化,也比較預測比賽結果的準確度。第一部分用 NBA 新球季,第二部分回頭檢查 aisportsinfo.com 已在賽前鎖定的 2026 MLB 預測。

結果狀態
第二部分有初步結果;第一部分收集中
最後更新
開始日期
研究時間
已進行 19 天/預計 206 天
計劃登記
籃球、發光的運算裝置與球場分析面板,示意 AI 分析比賽
圖片:AI 生成的研究主題示意圖,非實際預測結果

AI 預測與賽前賠率:重點發現

目前發現
2026 美國職棒:AI 看好的那一隊,到開賽前換算的勝率平均變了+0.01個百分點

誤差範圍 −0.13~+0.14,821 場常規賽。這是回溯研究:AI 預測來自我們自己的網站 aisportsinfo.com,AI 當時看得到 ESPN 的勝率。價格 0.60 美元=勝率約 60%=賠率約 1.67;更被看好=賠率變低。

  • 準度:這批比賽看不出 AI 比市場準。完整樣本中,AI 的預測誤差反而比同一時刻的市場大(Brier 分數 0.249 對 0.238,越小越準),但只看有賽前第三方存證的 416 場時,校正後不夠確定。
  • 在市場賠率之外,看不出 AI 的數字對比賽結果有額外的幫助。
  • 三家 AI 中,Claude 最接近市場;ChatGPT 和 Gemini 說得太有把握。
  • 第一部分(NBA 新球季,先登記再收數據)會再驗一次「AI 能不能比市場早一步」。

白話說明

為什麼研究這個?

AI 預測越來越常見,但「AI 能不能比市場更早看出方向」很少有人用事先存證的方式檢驗。結果能告訴我們的模型:AI 的意見值不值得當作額外的參考訊號。

我們想知道什麼?

我們想知道三件事:AI 給的勝率準不準?開賽前賠率往哪裡變,AI 有沒有先猜到?「市場賠率+AI」一起看,會不會比只看市場賠率更準?

我們如何研究?

Polymarket 是讓人買賣比賽結果的預測平台,價格在 0 到 1 美元之間;價格 0.60 美元,大致代表參與交易的人整體認為這邊約有 60% 機會贏(大家的看法,不一定等於真正的勝率)。每場 NBA 比賽開賽前 6 小時,我們讓三個大型語言模型(Claude、GPT、Gemini)各給一個主隊勝率。AI 不能上網,只看得到當時的官方賽程比數、傷兵報告和球員數據,看不到任何賠率。每筆預測都保留內容與時間並蓋時間戳,讓人能核對是否事後修改,之後再跟同一時刻與開賽前最後的 Polymarket 賠率比較。

研究方式示意 · 尚非研究結果

如何公平比較 AI 和市場?

相同賽前數據 · 不含市場賠率
Claude
各自給勝率
GPT
各自給勝率
Gemini
各自給勝率
先存證,再與市場及賽果比較
  1. 01
    開賽前 6 小時:固定數據

    只提供賽程、球員數據與傷兵消息;不提供市場賠率,AI 也不能上網。

  2. 02
    三個 AI 各自預測

    Claude、GPT、Gemini 各給出主隊勝率,不先假設誰比較準。

  3. 03
    保留預測內容與時間

    先記錄並存證,讓人之後能查核是否在比賽前完成、有沒有修改。

  4. 04
    球季結束後才對答案

    比較當時的賠率、開賽前最後的賠率與實際勝負;分別檢查賠率方向和預測準確度。

這是研究流程,不是 AI 績效圖。尚未完成分析,不放虛構勝率或上升盈利線。

目前發現什麼?

第一部分(NBA):2026 年 10 月 21 日起每天自動收集,常規賽結束(2027 年 4 月 11 日)後才分析一次,避免中途偷看、挑結果,目前還沒有結果。第二部分(美國職棒回溯)的結果見上方。

已經公開的戰績

我們另一個網站 aisportsinfo.com 每天公開三家 AI 對 MLB 的賽前預測與賽後對賬。2026 球季到 10 月 20 日,三家共識猜中 878 場中的 494 場(56%),Claude 57%、ChatGPT 56%、Gemini 54%;同一批比賽全押主隊是 53.8%。這些命中率已經公開,不算盲測;還沒有人算過的是:AI 的看法和 Polymarket 賠率比起來如何,這就是第二部分要回答的。

還不能確定什麼?

AI 只看得到我們給的數據,結果不代表 AI 上網查數據時的表現。三個 AI 用現有的訂閱計劃,額度用完時會缺幾場,缺漏會照實記錄。這項研究測的是一般 AI 模型,不是 Mysports.AI 自己的預測模型。

本頁用到的名詞

Polymarket
讓人買賣比賽結果的預測平台。價格介於 0 到 1 美元,大致代表參與交易的人認為的發生機會,不一定等於真正的機率。價格可以直接換成賠率:賠率=1 ÷ 價格。
大型語言模型(AI)
像 ChatGPT、Claude、Gemini 這類能讀文字、回答問題的 AI。
存證
保留每筆預測的內容和時間並蓋時間戳,讓人能核對預測是不是在比賽前做的、有沒有事後修改。
開賽前最後賠率
比賽開始前最後記錄到的賠率,通常反映了最多消息。

詳細結果

研究假設深入閱讀
  • H1AI 的勝率會比同一時刻的市場不準待驗證
  • H2AI 跟市場的差,大概猜不到之後賠率的方向待驗證
  • H3「市場賠率+AI」大概不會比只看市場更準待驗證
  • P2-H1(第二部分)AI 跟同一時刻的市場一樣準 → 完整樣本中 AI 較不準,但只看有賽前存證的場次時不夠確定證據不足
  • P2-H2(第二部分)AI 跟市場的差,能預測之後賠率往 AI 那邊走 → 完整樣本有微弱關聯,但只看有存證的場次就看不出來;後來核對掛單簿,抽查的兩個時點價格紀錄相符。把 AI 換成固定猜 50% 也有類似關聯,可能是價格往 50% 回靠,也可能是共用價格點造成的,現有數據分不開證據不足
  • P2-H3(第二部分)在市場賠率之外,AI 還有額外的預測幫助 → 看不出來證據不足

延伸分析

看完主要結果後另外做的延伸分析。標「事後探索」的是看過數據才加的,只當參考;標「事先登記」或「延伸 1」的,是先寫好規則、蓋時間戳之後才算的。

  • 抽查的兩個時點價格紀錄都相符,價格不動主要是市場本身很少動(看過結果後才加的檢查):我們拿公開的掛單簿存檔,核對8月18日之後約 520 場比賽在 AI 交答案那一刻的 Polymarket 價格,518 場跟掛單簿上「買價和賣價的正中間」一致(價格 0.60 美元=換算的勝率約 60%=賠率約 1.67)。AI 交答案後 15 分鐘內,這個價格有變的只有約 4%;美東清晨買賣價只差 1 分錢,常常幾十分鐘都不動。
  • 改用真實成交價重算,還是看不出「市場越來越看好 AI 看好的隊伍」:原本那個很小的關聯,把 AI 換成「每場都猜 50%」也會出現差不多大的;改用不同筆成交價重算(541 場成交夠多的比賽)後,AI 的關聯可能是 0,AI 看好那一隊的換算勝率到開賽前平均只多了約 0.05 個百分點,等於沒變。
  • AI 說得太有把握,往 50% 拉回一點,ChatGPT(Codex)和 Gemini 的預測誤差明顯變小(例如 AI 說 70%,改成大約 60%),Claude 則沒有改善;修正後三家都還是比同一時刻的市場差。把 AI 的數字跟市場價格混在一起,用一部分比賽練習、另一部分比賽考試的方法挑出來的 AI 比重是 0。
  • 第一部分(NBA)已經開始收集:2026年10月21日起,每場比賽開賽前 6 小時問三家 AI(第一批是美東10月21日晚上的比賽)。第一部分的結果要等 2027 年 4 月球季結束後才會看,中間只數有幾場、不看準不準。

延伸分析的限制

  • 這些都是看過第二部分結果之後才加的探索,不改原本的結論;數據仍來自我們自己的網站 aisportsinfo,AI 當時看得到 ESPN 的勝率。
  • 掛單簿存檔只涵蓋8月18日之後交答案的比賽,而且只核對了兩個時間點;用成交價的版本只包含成交較多的 541 場(共 826 場),比較晚、比較早交答案的比賽常被排除。
  • 「往 50% 拉回」和「跟市場混合」的方法,是看過這批數據後才挑的,要在新的比賽上照事先寫好的方法再驗證才算數。

AI 預測比較方法

研究問題

  • AI 給的勝率準不準?
  • 開賽前賠率往哪裡動,AI 有沒有先猜到?
  • 「市場賠率+AI」會不會比只看市場更準?

方法摘要

  • 給 AI 的指令和 AI 的版本事先寫在計劃裡,並留下檔案的「數碼指紋」,之後無法偷改;AI 在空的數據夾裡執行、不能上網或用工具,數據裡只要出現跟市場有關的字就不送出。
  • 只在常規賽結束後分析一次;能用的比賽少於 600 場,就只描述、不下結論。
  • 第二部分:用 aisportsinfo.com 已在賽前鎖定、推上 GitHub 的 2026 MLB 預測(常規賽約 829 場),對照同一時刻與開賽前最後的 Polymarket 賠率。我們查過 AI 當時的輸入沒有任何賠率,也幾乎沒有上網;但輸入裡有 ESPN 的勝率預測,所以結論都寫成「AI 看過 ESPN 勝率之後」的表現。

數據來源與限制

用到哪些數據

限制

  • AI 不能上網,結果不代表可上網 AI 的表現。
  • 用現有訂閱計劃,額度用完時會有缺漏。
  • 第二部分是回溯研究,數據由我們自己的網站產生;Claude 9月20日以前的對話紀錄已被系統刪除,另外算了排除這些預測的版本(780 場),判定和主分析相同。

最新進度

最新進度:第二部分延伸(事後探索):用掛單簿與成交價重查,仍看不出 AI 比市場早一步;第一部分(NBA)10月21日起每天收集中

正在收集:2026-27 NBA 常規賽每場開賽前 6 小時的三個 AI 勝率(存證)

下一步:第一部分收集到 2027 年 4 月常規賽結束後分析,再驗一次「AI 能不能比市場早一步」

研究進度

  1. 查證新穎性、計劃定稿並蓋時間戳
  2. 第二部分(2026 MLB 回溯)查核數據、計劃定稿並蓋時間戳
  3. 每天開賽前 6 小時收集 AI 預測(到2027年4月11日)進行中
  4. 第二部分分析、外部程式審查完成
  5. 常規賽結束後分析一次、外部程式審查、公布結果(最晚2027年5月15日)

更新紀錄

版本紀錄

  1. p2-v1.0-結果

    第二部分結果出爐;分析程式先蓋時間戳才執行,外部程式審查兩輪後修正

  2. p2-v1.0

    第二部分研究計劃定稿並蓋時間戳(T0=2026年10月21日 08:23 UTC),兩輪外部審查

  3. v1.0

    研究計劃定稿並蓋時間戳(T0=2026年10月21日 05:22 UTC),開始收集

研究紀錄

計劃檔指紋(SHA-256)
白話版計劃b35be5c62216364b0cf9ab6e454ff91b09f5583cc90c200e6b84332d0c7e99c2
技術附錄b186f633f44d48af9ea11e933298ba28b8db7a8d522b406c3de79ffffb42f464
第二部分白話版計劃014c0f9debbd17614cc84daec96315175d3ce5daa537d78e4029fc6a68c4da54
技術附錄(增補 a1)dc28521ebddbd5b6484f003b6a6b7f3cf702851b5e04ef7645af3bf6dea2e64a
第二部分技術附錄7d881bc57a6e3802489783284c74dcbf5c59a7f50f2cc0a964ec0824ea1eb862
2026年10月21日 已用 OpenTimestamps 蓋進比特幣區塊鏈的公開紀錄
計劃調整:34 項(全部列在 GitHub 的 DEVIATIONS.md)
程式碼與數據:研究完成時與結果一起公開

本頁內容為研究紀錄,僅供參考,不構成任何投注建議或盈利保證。