iPAS AI 應用規劃師中級 115 年第一次 科一 第 13 題 詳解
115 年第一次 科一 人工智慧技術應用與規劃
某公司評估兩種方案,將大型語言模型客製化為內部客服助理:方案A為提示微調(Prompt Tuning),在輸入端加入可學習的軟提示(Soft Prompt);方案B為傳統微調(Fine-Tuning),以標註問答資料調整模型。兩方案最本質的技術差異為何?
- A提示微調主要用於降低推論延遲,而傳統微調則用於提升模型容量
把目的混為效能指標,兩者皆非以降低延遲為本質。
- B兩者技術本質相同,差別僅在於學習率(Learning Rate)設定不同
學習率只是超參數,無法解釋參數是否被更新。
- C傳統微調通常需要更新模型參數,而提示微調主要透過調整輸入表示來影響模型行為(正確答案)
正解:一個更新權重,一個只調輸入表示。
- D提示微調與傳統微調的差異僅在於是否使用預訓練模型
兩者都以預訓練模型為基礎,此處無差異。
正確答案:C
區分提示微調與傳統微調在參數更新層面的本質差異。 先問這個技術有沒有動到模型權重,再看它改的是輸入端還是模型本身。
用刷8題準備 iPAS AI 應用規劃師中級
每天隨手刷 8 題,答錯的題目會自動排回來再考一次。不用註冊,打開就能開始。
開始刷題