第 482 題(共 548 題)
LoRA(Low-Rank Adaptation)微調技術的主要優勢為何?
解析
LoRA 的核心思想是凍結預訓練模型的原始權重,僅在特定層注入可訓練的低秩分解矩陣(A和B),使可訓練參數量大幅減少,從而降低記憶體需求與訓練成本。
正確答案:B. 僅訓練少量低秩矩陣參數,大幅降低微調所需的記憶體與運算資源
LoRA 的核心思想是凍結預訓練模型的原始權重,僅在特定層注入可訓練的低秩分解矩陣(A和B),使可訓練參數量大幅減少,從而降低記憶體需求與訓練成本。
正確答案:B. 僅訓練少量低秩矩陣參數,大幅降低微調所需的記憶體與運算資源