R8收集資料中

AI 看好的球隊,賽前會變得更被看好嗎?

讓三個 AI 在賽前預測勝率,再檢查它們是否猜到賽前賠率的變化,也比較預測比賽結果的準確度。第一部分用 NBA 新球季,第二部分回頭檢查 aisportsinfo.com 已在賽前鎖定的 2026 MLB 預測。

結果狀態
第二部分有初步結果;第一部分收集中
最後更新
開始日期
研究時間
已進行 2 天/預計 206 天
計畫登記

AI 預測與賽前賠率:重點發現

目前發現
2026 美國職棒:AI 看好的那一隊,到開賽前換算的勝率平均變了+0.01個百分點

誤差範圍 −0.13~+0.14,821 場例行賽。這是回溯研究:AI 預測來自我們自己的網站 aisportsinfo.com,AI 當時看得到 ESPN 的勝率。價格 0.60 美元=勝率約 60%=賠率約 1.67;更被看好=賠率變低。

  • 準度:這批比賽看不出 AI 比市場準。完整樣本中,AI 的預測誤差反而比同一時刻的市場大(Brier 分數 0.249 對 0.238,越小越準),但只看有賽前第三方存證的 416 場時,校正後不夠確定。
  • 在市場賠率之外,看不出 AI 的數字對比賽結果有額外的幫助。
  • 三家 AI 中,Claude 最接近市場;ChatGPT 和 Gemini 說得太有把握。
  • 第一部分(NBA 新球季,先登記再收資料)會再驗一次「AI 能不能比市場早一步」。

白話說明

為什麼研究這個?

AI 預測越來越常見,但「AI 能不能比市場更早看出方向」很少有人用事先存證的方式檢驗。結果能告訴我們的模型:AI 的意見值不值得當作額外的參考訊號。

我們想知道什麼?

我們想知道三件事:AI 給的勝率準不準?開賽前賠率往哪裡變,AI 有沒有先猜到?「市場賠率+AI」一起看,會不會比只看市場賠率更準?

我們怎麼研究?

Polymarket 是讓人買賣比賽結果的預測平台,價格在 0 到 1 美元之間;價格 0.60 美元,大致代表參與交易的人整體認為這邊約有 60% 機會贏(大家的看法,不一定等於真正的勝率)。每場 NBA 比賽開賽前 6 小時,我們讓三個大型語言模型(Claude、GPT、Gemini)各給一個主隊勝率。AI 不能上網,只看得到當時的官方賽程比分、傷兵報告和球員數據,看不到任何賠率。每筆預測都保留內容與時間並蓋時間戳,讓人能核對是否事後修改,之後再跟同一時刻與開賽前最後的 Polymarket 賠率比較。

研究方式示意 · 尚非研究結果

怎麼公平比較 AI 和市場?

相同賽前資料 · 不含市場賠率
Claude
各自給勝率
GPT
各自給勝率
Gemini
各自給勝率
先存證,再與市場及賽果比較
  1. 01
    開賽前 6 小時:固定資料

    只提供賽程、球員數據與傷兵消息;不提供市場賠率,AI 也不能上網。

  2. 02
    三個 AI 各自預測

    Claude、GPT、Gemini 各給出主隊勝率,不先假設誰比較準。

  3. 03
    保留預測內容與時間

    先記錄並存證,讓人之後能查核是否在比賽前完成、有沒有修改。

  4. 04
    球季結束後才對答案

    比較當時的賠率、開賽前最後的賠率與實際勝負;分別檢查賠率方向和預測準確度。

這是研究流程,不是 AI 績效圖。尚未完成分析,不放虛構勝率或上升獲利線。

目前發現什麼?

2026 年 10 月 21 日起每天自動收集,例行賽結束(2027 年 4 月 11 日)後才分析一次,避免中途偷看、挑結果。目前還沒有研究結果。

已經公開的戰績

我們另一個網站 aisportsinfo.com 每天公開三家 AI 對 MLB 的賽前預測與賽後對帳。2026 球季到 10 月 20 日,三家共識猜中 878 場中的 494 場(56%),Claude 57%、ChatGPT 56%、Gemini 54%;同一批比賽全押主隊是 53.8%。這些命中率已經公開,不算盲測;還沒有人算過的是:AI 的看法和 Polymarket 賠率比起來怎麼樣,這就是第二部分要回答的。

還不能確定什麼?

AI 只看得到我們給的資料,結果不代表 AI 上網查資料時的表現。三個 AI 用現有的訂閱方案,額度用完時會缺幾場,缺漏會照實記錄。這項研究測的是一般 AI 模型,不是 Mysports.AI 自己的預測模型。

本頁用到的名詞

Polymarket
讓人買賣比賽結果的預測平台。價格介於 0 到 1 美元,大致代表參與交易的人認為的發生機會,不一定等於真正的機率。價格可以直接換成賠率:賠率=1 ÷ 價格。
大型語言模型(AI)
像 ChatGPT、Claude、Gemini 這類能讀文字、回答問題的 AI。
存證
保留每筆預測的內容和時間並蓋時間戳,讓人能核對預測是不是在比賽前做的、有沒有事後修改。
開賽前最後賠率
比賽開始前最後記錄到的賠率,通常反映了最多消息。

詳細結果

研究假設深入閱讀
  • H1AI 的勝率會比同一時刻的市場不準待驗證
  • H2AI 跟市場的差,大概猜不到之後賠率的方向待驗證
  • H3「市場賠率+AI」大概不會比只看市場更準待驗證
  • P2-H1(第二部分)AI 跟同一時刻的市場一樣準 → 完整樣本中 AI 較不準,但只看有賽前存證的場次時不夠確定證據不足
  • P2-H2(第二部分)AI 跟市場的差,能預測之後賠率往 AI 那邊走 → 完整樣本有微弱關聯,但只看有存證的場次就看不出來,也可能來自價格紀錄沒更新證據不足
  • P2-H3(第二部分)在市場賠率之外,AI 還有額外的預測幫助 → 看不出來證據不足

延伸分析

看完主要結果後另外做的延伸分析。標「事後探索」的是看過資料才加的,只當參考;標「事先登記」或「延伸 1」的,是先寫好規則、蓋時間戳之後才算的。

  • 價格紀錄沒有問題,主要是市場本身很少動(看過結果後才加的檢查):我們拿公開的掛單簿存檔,核對 8/18 之後約 520 場比賽在 AI 交答案那一刻的 Polymarket 價格,518 場跟掛單簿上「買價和賣價的正中間」一致(價格 0.60 美元=換算的勝率約 60%=賠率約 1.67)。AI 交答案後 15 分鐘內,這個價格有變的只有約 4%;美東清晨買賣價只差 1 分錢,常常幾十分鐘都不動。
  • 改用真實成交價重算,還是看不出「市場越來越看好 AI 看好的隊伍」:原本那個很小的關聯,把 AI 換成「每場都猜 50%」也會出現差不多大的;改用不同筆成交價重算(541 場成交夠多的比賽)後,AI 的關聯可能是 0,AI 看好那一隊的換算勝率到開賽前平均只多了約 0.05 個百分點,等於沒變。
  • AI 說得太有把握,往 50% 拉回一點,ChatGPT(Codex)和 Gemini 的預測誤差明顯變小(例如 AI 說 70%,改成大約 60%),Claude 則沒有改善;修正後三家都還是比同一時刻的市場差。把 AI 的數字跟市場價格混在一起,用一部分比賽練習、另一部分比賽考試的方法挑出來的 AI 比重是 0。
  • 第一部分(NBA)已經開始收集:2026-10-21 起,每場比賽開賽前 6 小時問三家 AI(第一批是美東 10/21 晚上的比賽)。第一部分的結果要等 2027 年 4 月球季結束後才會看,中間只數有幾場、不看準不準。

延伸分析的限制

  • 這些都是看過第二部分結果之後才加的探索,不改原本的結論;資料仍來自我們自己的網站 aisportsinfo,AI 當時看得到 ESPN 的勝率。
  • 掛單簿存檔只涵蓋 8/18 之後交答案的比賽,而且只核對了兩個時間點;用成交價的版本只包含成交較多的 541 場(共 826 場),比較晚、比較早交答案的比賽常被排除。
  • 「往 50% 拉回」和「跟市場混合」的方法,是看過這批資料後才挑的,要在新的比賽上照事先寫好的方法再驗證才算數。

AI 預測比較方法

研究問題

  • AI 給的勝率準不準?
  • 開賽前賠率往哪裡動,AI 有沒有先猜到?
  • 「市場賠率+AI」會不會比只看市場更準?

方法摘要

  • 給 AI 的指令和 AI 的版本事先寫在計畫裡,並留下檔案的「數位指紋」,之後無法偷改;AI 在空的資料夾裡執行、不能上網或用工具,資料裡只要出現跟市場有關的字就不送出。
  • 只在例行賽結束後分析一次;能用的比賽少於 600 場,就只描述、不下結論。
  • 第二部分:用 aisportsinfo.com 已在賽前鎖定、推上 GitHub 的 2026 MLB 預測(例行賽約 829 場),對照同一時刻與開賽前最後的 Polymarket 賠率。我們查過 AI 當時的輸入沒有任何賠率,也幾乎沒有上網;但輸入裡有 ESPN 的勝率預測,所以結論都寫成「AI 看過 ESPN 勝率之後」的表現。

資料來源與限制

用到哪些資料

限制

  • AI 不能上網,結果不代表可上網 AI 的表現。
  • 用現有訂閱方案,額度用完時會有缺漏。
  • 第二部分是回溯研究,資料由我們自己的網站產生;Claude 9/20 以前的對話紀錄已被系統刪除,會另外算一組排除這些預測的結果一起公開。

最新進度

最新進度:第二部分延伸(事後探索):用掛單簿與成交價重查,仍看不出 AI 比市場早一步;第一部分(NBA)10/21 起每天收集中

正在收集:2026-27 NBA 例行賽每場開賽前 6 小時的三個 AI 勝率(存證)

下一步:第一部分收集到 2027 年 4 月例行賽結束後分析,再驗一次「AI 能不能比市場早一步」

研究進度

  1. 查證新穎性、計畫定稿並蓋時間戳
  2. 第二部分(2026 MLB 回溯)查核資料、計畫定稿並蓋時間戳
  3. 每天開賽前 6 小時收集 AI 預測(到 2027/4/11)進行中
  4. 第二部分分析、外部程式審查完成
  5. 例行賽結束後分析一次、外部程式審查、公布結果(最晚 2027/5/15)

更新紀錄

版本紀錄

  1. p2-v1.0-結果

    第二部分結果出爐;分析程式先蓋時間戳才執行,外部程式審查兩輪後修正

  2. p2-v1.0

    第二部分研究計畫定稿並蓋時間戳(T0=2026-10-21 08:23 UTC),兩輪外部審查

  3. v1.0

    研究計畫定稿並蓋時間戳(T0=2026-10-21 05:22 UTC),開始收集

研究紀錄

計畫檔指紋(SHA-256)
白話版計畫b35be5c62216364b0cf9ab6e454ff91b09f5583cc90c200e6b84332d0c7e99c2
技術附錄b186f633f44d48af9ea11e933298ba28b8db7a8d522b406c3de79ffffb42f464
第二部分白話版計畫014c0f9debbd17614cc84daec96315175d3ce5daa537d78e4029fc6a68c4da54
第二部分技術附錄7d881bc57a6e3802489783284c74dcbf5c59a7f50f2cc0a964ec0824ea1eb862
2026/10/21 已用 OpenTimestamps 蓋進比特幣區塊鏈的公開紀錄
計畫調整:4 項(全部列在 GitHub 的 DEVIATIONS.md)
程式碼與資料:研究完成時與結果一起公開
圖片:AI 生成的研究主題示意圖,非實際預測結果

本頁內容為研究紀錄,僅供參考,不構成任何投注建議或獲利保證。