跳到主要内容

同一 LoRA 跑出交叉熵尖峰、领域升通用降、训练满分但验证不动三种曲线。每种先碰哪一颗超参?为什么不能一次同时改三颗?

模型选型与微调中级微调

题目​

同一 LoRA 跑出交叉熵尖峰、领域升通用降、训练满分但验证不动三种曲线。每种先碰哪一颗超参?为什么不能一次同时改三颗?

参考答案​