iPAS AI 應用規劃師中級 114 年第二次 科一 第 41 題 詳解

114 年第二次 科一 人工智慧技術應用與規劃 · 考點:數據準備與模型選擇

在進行超參數調校(Hyperparameter Tuning)時,若直接在K-Fold交叉驗證(Cross-Validation)的資料上同時調整模型參數並評估效能,最可能導致下列哪一種問題?

  1. A模型的交叉驗證結果出現過度樂觀偏差(Over-optimistic Bias),因測試摺資料間接參與參數選擇,造成資料洩漏(Data Leakage)(正確答案)

    測試摺間接參與選參,評估結果被高估,屬資料洩漏。

  2. B模型會在每一摺(Fold)內反覆調整參數,導致訓練不穩與過度正則化

    逐摺調參是流程設計問題,與過度正則化無因果。

  3. C因交叉驗證資料被重複使用,造成效能方差增大,無法獲得穩定估計

    重複使用資料會使估計偏高,不是方差變大。

  4. DK-Fold交叉驗證的假設與超參數搜尋相衝突,導致驗證過程失效

    兩者機制不衝突,巢狀交叉驗證即可並存。

正確答案:A

考超參數調校時,用同一份驗證資料選參數又評估效能會造成資料洩漏。 看到「同一批資料既用來選模型又用來報成績」,先往資料洩漏與樂觀偏差方向想。

用刷8題準備 iPAS AI 應用規劃師中級

每天隨手刷 8 題,答錯的題目會自動排回來再考一次。不用註冊,打開就能開始。

開始刷題

數據準備與模型選擇

  1. 114 年第二次 科一 第 43 題某金融科技公司欲導入AI模型協助客服郵件自動分類(投訴、詢問、表揚)。團隊同時考慮兩種模型設計:方案A(生成式路徑):採…
  2. 114 年第二次 科一 第 44 題某電信公司希望建立一個模型來預測顧客是否即將流失,並進一步模擬不同促銷或服務策略下顧客的行為變化,以生成多樣化的虛擬樣本…
  3. 114 年第二次 科一 第 46 題某企業的AI模型已部署於線上服務環境中,用於即時預測顧客流失機率。近期團隊注意到模型預測準確率逐漸下降,但系統運作正常且…
  4. 115 年第一次 科一 第 3 題某工程師在建構搜尋引擎的詞向量模型時,語料庫規模達數十億token,且包含大量長尾詞彙(Long-tail Terms)…
  5. 115 年第一次 科一 第 4 題某金融科技公司的工程師正在準備內部客服對話與交易紀錄文本,進行BERT模型的預訓練,以提升模型對金融語境的理解能力,並採…