iPAS AI 應用規劃師中級 115 年第一次 科一 第 49 題 詳解

115 年第一次 科一 人工智慧技術應用與規劃

某零售電商平台已建立模型監控儀表板，用於追蹤線上推薦模型的運作狀態與效能表現。維運工程師需判斷哪些指標屬於「線上持續監控（Continuous Monitoring）」的範疇。下列指標中，哪一項最不適合在即時監控系統中追蹤，而應改由離線實驗追蹤系統管理？

1. A訓練實驗中每個Epoch的學習率（Learning Rate）變化曲線與超參數（Hyperparameter）設定軌跡（正確答案）

   訓練期的實驗紀錄，上線後已固定，屬離線實驗追蹤。

2. B線上推論API的P50/P95/P99回應延遲與每日請求量（RPS）趨勢

   延遲與請求量是服務健康度，線上監控的基本盤。

3. C輸入特徵分佈的族群穩定性指數（Population Stability Index, PSI），偵測資料漂移

   PSI 需持續比對線上輸入分佈，典型漂移偵測指標。

4. D模型預測結果分佈（如CTR）與定期回收的人工標註結果之對比

   預測分佈對比人工標註，用於追蹤線上模型效能衰退。