AI 股票預測實驗 #2|AI 多模型融合預測

YinOnMars Prediction Experiment #2 : Multi-Model AI Fusion Stock Forecast with QQCDR Engine

AI 股票預測實驗系列第 2 篇,記錄我透過人機協作開發的 QQCDR AI Engine 所產生的預測結果。系統並非單一模型,而是採用 LightGBM(技術分析)XGBoost(籌碼/總經分析) 與 LLM(新聞事件分析) 三大專家模型,並透過 Meta-Learner 多模型融合(Blending)架構 計算最終預測勝率。本次實驗針對 台積電(2330)聯電(2303) 與 日月光投控(3711) 進行預測,並於收盤後進行實際結果驗證,以持續優化整體模型表現。

#1 的失準問題已經調過 再次的系統跑出來….

台積電 2330 (台股) = 失準

台積電 TSM (美股) = 命中方向(但屬無效區間)

聯電 2303 (台股) = 失準

聯電 UMC (美股) = 失準

日月光投控 3711 (台股) = 失準

日月光投控  ASX (美股) = 命中方向(但屬無效區間

投資有風險,這裡只是實驗系統的分享。歡迎追蹤跟討論~

台股收盤檢討

(1) 今日結果

  • 2330 台積電:預估上漲(65.9%) $\rightarrow$ 實際收盤下跌(-0.80%) $\rightarrow$ ❌ 失敗
  • 2303 聯電:預估下跌(40.5%) $\rightarrow$ 實際收盤大漲(+6.25%) $\rightarrow$ ❌ 失敗
  • 3711 日月光投控:預估上漲(72.5%) $\rightarrow$ 實際收盤下跌(-1.78%) $\rightarrow$ ❌ 失敗
  • 今日方向勝率:0.0%(0 勝 3 敗)

(2) 錯誤檢討

  • 最大反差案例:3711 日月光投控
    • 結果:系統給出今日最高的 72.5% 上漲預期與「強力共識」評級,但最終股價收跌 -1.78%。
  • 最大錯殺案例:2303 聯電
    • 結果:股價單日大漲 +6.25%,但系統早盤卻給出 40.5% 的空方主導警告。

(3) 各專家命中率

  • 📈 技術專家 (LightGBM):0.0%(3 檔全錯)
  • 🏦 籌碼專家 (XGBoost):33.3%(僅 2303 爆量時給出高分符合方向,2330、3711 均誤判)
  • 📰 事件專家 (LLM AI):0.0%(3 檔全錯)

(4) AI vs 規則衝突分析

系統失敗來源並非單一原因:

  • 2303 (規則覆蓋):底層 AI 原始勝率為 60.5%,但受「歷史戰績不足」與「開盤漲幅大」兩條規則觸發,被強制扣減 20%,導致多方訊號翻轉為空方警戒。
  • 2330、3711 (底層失效):未遭遇顯著規則壓制,輸出高達 65.9% 與 72.5% 的偏多機率,但實際走勢與預測方向完全相反。
  • 結論:無法將失敗全數歸咎於「規則干預」。(1) 規則干預確實可能造成個股方向被錯殺 (如 2303)。(2) 但在未被干預的標的群體中,底層模型本身亦存在明顯的方向性偏差 (如 2330, 3711)。

(5) 信心校準分析(Calibration)

今日觀察到高信心預測失效的狀況:

  • 70% 以上信心區間:出現 1 筆失敗案例 (3711)。
  • 60% ~ 70% 信心區間:出現 1 筆失敗案例 (2330)。
  • 分析:由於目前各區間累積樣本數極度不足(N=1),無法以此判定是否存在系統性的過度自信(Overconfidence)現象,故全數列入後續追蹤。

(6) 今日發現

目前觀察到,系統在「高信心區間(65%以上)」出現連續失敗案例。
然而,現階段無法判斷具體原因為下列何者:

  1. 底層方向模型失效 (Direction Accuracy):例如真實上漲機率僅 45%,卻判定為看漲。
  2. 機率校準失效 (Calibration Accuracy):例如真實上漲機率確實大於 50%(如 55%),系統方向看對,卻過度自信報出 72.5%。

需累積更多樣本後方能釐清。後續將同步追蹤 Direction Accuracy 與 Calibration Accuracy 兩項指標。

(7) 修改模型與規則

  • 修改已即刻拔除過度干預的人工規則;【不改模型】暫不更動底層 AI 模型與特徵。
  • 行動紀實: 今日盤後已對主程式 main_ultimate.py 進行熱更新,正式封印「對帳單短期勝率懲罰(機制 A)」與大幅放寬「乖離率過熱防護(機制 C)」。
  • 修改理由: 為了進行準確的「機率校準(Calibration)」,必須讓系統輸出「未經人類主觀污染的純粹 AI 預測機率」。不留死板的扣分規則,繼續觀察底層模型到底偏離了多少。
  • 後續驗證計畫: 規則拔除後,全面專注於擴充 Data數據池。在純 AI 決策狀態下,未達 100 筆獨立樣本前,不進行任何 XGBoost / LightGBM 的參數與特徵優化,讓系統在真實市場中累積校準所需的基線數據(Baseline Data)。

(8) 信心等級(⚠️ 核心宣告)

  • 今日信心可信度:低
  • 理由
    1. 總累積樣本極少(不足 20 筆)。
    2. 高信心區間(>65%)樣本數不足 10 筆,缺乏統計顯著性。
  • 操作指引:目前系統所輸出之所有 >65% 機率,【僅供標的強度排序參考】,絕不可視為市場真實勝率機率。

美股收盤檢討

(1) 今日結果

  • TSM 台積電 ADR:預估下跌(勝率 48.6%) 實際收盤大跌(-6.69%) ✅ 命中方向(但屬無效區間)
  • UMC 聯電 ADR:預估上漲(勝率 52.8%) 實際收盤大跌(-4.73%) ❌ 失敗(屬無效區間)
  • ASX 日月光 ADR:預估下跌(勝率 38.5%) 實際收盤下跌(-1.56%) ✅ 命中方向(空方警戒成功)
  • 今日方向勝率:66.6%(2 勝 1 敗)。但扣除 45%~55% 區間後,明確訊號勝率為 100%(1 勝 0 敗)。

(2) 錯誤檢討

  • 最大誤判案例:UMC 聯電 ADR
    • 事實:技術專家給出 63.6 偏多、事件專家 66.7 偏多,系統綜合輸出 52.8% 偏多觀望。然而股價卻重挫 -4.73%。
    • 分析:在美股半導體板塊集體跳水(TSM大跌 6%)的系統性風險下,個股的偏多特徵完全無法抵抗大盤逆風。

(3) 各專家命中率

  • 📈 技術專家 (LightGBM):66.7%
    • 正確抓出 TSM (30分/弱勢) 與 ASX (23.2分/弱勢) 的空頭型態;僅在 UMC 判斷失誤。
  • 🏦 籌碼專家 (XGBoost):0.0%(完全失效)
    • 嚴重異常:TSM、UMC、ASX 三檔美股的籌碼分數全部都是 53.0 分。這代表模型根本沒有吃到有效數據,直接輸出了預設的 Baseline(基準值)。
  • 📰 事件專家 (LLM AI):0.0%(全數被騙)
    • 三檔 ADR 的華爾街評等皆為 STRONG_BUY,LLM 給出 83.3、66.7、66.7 的偏多高分,最終三檔全跌。完美證明「新聞與外資目標價是落後指標甚至出貨掩護」。

(4) AI vs 規則衝突分析

  • 本次樣本顯示:【無規則干預,純粹底層表現】與台股 2303 被規則強制扣 20% 不同,本次美股三檔標的並未觸發任何極端保護規則(勝率均為原始運算結果)。UMC 的失敗純粹是 LLM 被假新聞誤導,加上大盤逆風所致。

(5) 信心校準分析(Calibration)

今日美股樣本分佈觀察如下:

  • 極端信心區間(<40%):出現 1 筆樣本 (ASX 預估勝率 38.5%) → 實際收盤下跌。方向與預測一致,列入後續樣本庫追蹤。
  • 無效訊號區間(45% ~ 55%):出現 2 筆樣本 (TSM 預估勝率 48.6%、UMC 預估勝率 52.8%) → 實際收盤兩者皆為下跌,預測方向呈現隨機錯置。
  • 分析:今日落在 45%~55% 區間的數值表現,顯示模型內部多空特徵互相抵銷,缺乏明確的方向指引能力(Noise)。此區間數值目前無法提供具備統計優勢的進出場依據,後續將導入「No-Trade Zone (禁止交易區)」進行訊號過濾,並由大數據池持續檢驗其實際期望值。

(6) 今日發現

  1. 致命缺陷:美股籌碼數據斷層。XGBoost 在三檔美股全給出恆定的 53.0 分。合理推測:我們資料湖抓取的「外資/投信/主力/融資券」是台股專有欄位,ADR 根本沒有這些資料,導致 XGBoost 在美股無法有效運作。
  2. LLM 情緒指標需反向思考:當華爾街一致看多、新聞一片大好時(如 TSM 拿 83.3 分),往往是極度危險的強烈賣出訊號。

(7) 修改模型與規則

  • 決定:是。必須修改跨市場資料處理邏輯,暫不重訓模型。
  • 行動紀實與驗證計畫
    1. 實作 No-Trade Zone:針對 45% ~ 55% 的預測,將在 UI 強制蓋台,顯示「 趨勢不明朗 / 無效訊號,強烈建議觀望」。
    2. 徹查美股特徵管線:必須檢查程式碼,如果美股(ADR)確實抓不到台股等級的籌碼數據,必須在預測美股時,動態關閉或大幅調降籌碼專家 (XGBoost) 的權重,改由美股專屬技術模型 (US Technical Model)與總體經濟與板塊模型 (Macro & Sector Model)模型主導,看看效果是否會提升。

(8) 信心等級(⚠️ 核心宣告)

  • 今日信心可信度:極低
  • 理由
    1. XGBoost 籌碼專家在美股呈現「數據缺失/恆定給分」的無效狀態,導致綜合勝率失真。
    2. 美股樣本數嚴重不足。
  • 操作指引:在查明美股籌碼特徵缺失問題前,本系統對 US 標的之預測,不得作為實盤資金配置依據,僅供底層模型偵錯使用。

今日勝率 0%。 準準準系統目前是不準準準系統TT….
我在思考是否要加入大盤與新聞因素來提升準確度,
好吧…..資料照記、模型照跑。在累積滿 100 筆實盤樣本前,
慢慢調整提升準確度。

AI 股票預測實驗 #3|AI 多模型融合預測
預測實驗室


探索更多來自 YinOnMars 的內容

訂閱即可透過電子郵件收到最新文章。

發表留言