iPAS AI 應用規劃師中級 115 年第一次 科一 第 42 題 詳解
115 年第一次 科一 人工智慧技術應用與規劃 · 考點:數據準備與模型選擇
某保險公司將理賠金額預測模型正式部署上線,MLOps團隊設計監控機制。三個月後模型整體均方根誤差(RMSE)無明顯變化,但業務單位反映高額理賠案件的預測誤差明顯增加。經分析,高額理賠案件僅佔約5%的樣本比例,且未被監控機制及時發現。請問最可能的設計缺陷為何?
- A監控頻率不足,應由每日批次監控改為即時串流監控
誤差被整體平均掩蓋,監控再即時也照樣看不出來。
- B高額理賠案件屬於長尾分布,難以透過監控指標偵測,因此無法透過監控機制發現問題
長尾可用分群或加權指標監控,說偵測不到是放棄設計。
- CRMSE無法有效反映高額誤差,應改以平均絕對誤差(MAE)作為主要監控指標
MAE對大誤差比RMSE更不敏感,換了只會更難發現。
- D僅監控整體RMSE,未針對不同理賠金額區間進行分群監控(正確答案)
整體RMSE被95%一般案件稀釋,須依理賠金額分群監控。
正確答案:D
這題考模型上線後的監控機制是否依樣本特性做分群監控。 整體指標正常但特定族群表現變差時,先檢查監控有沒有按區間或族群(segment)拆開看。
用刷8題準備 iPAS AI 應用規劃師中級
每天隨手刷 8 題,答錯的題目會自動排回來再考一次。不用註冊,打開就能開始。
開始刷題同考點的題目
數據準備與模型選擇
- 115 年第一次 科一 第 49 題某零售電商平台已建立模型監控儀表板,用於追蹤線上推薦模型的運作狀態與效能表現。維運工程師需判斷哪些指標屬於「線上持續監控…
- 115 年第一次 科一 第 50 題某醫療團隊建立肺炎診斷系統,採用晚期融合(Late Fusion)策略,將胸腔X光影像與病患問診文字分別進行預測後再整合…
- 114 年第二次 科一 第 7 題在企業導入的智慧監控系統中,模型以物件偵測(Object Detection)方式自動辨識影像中的人物與車輛。若評估指標…
- 114 年第二次 科一 第 10 題如果希望同時兼顧「精確率(Precision)」和「召回率(Recall)」,下列哪一個指標可以作為綜合評估的標準?
- 114 年第二次 科一 第 12 題某金融科技公司建立房價預測模型,使用多項特徵(如建坪、房齡、樓層、總價等)進行線性迴歸分析(Linear Regress…