跳到主要内容

药名被 tokenizer 拆成六七段、术语一扎堆就占掉半截上下文、分类分数往下掉。已收敛的权重能不能只往词表追加新行,还是先量化平均子词数再选改法?

模型选型与微调中级上下文成本

题目​

药名被 tokenizer 拆成六七段、术语一扎堆就占掉半截上下文、分类分数往下掉。已收敛的权重能不能只往词表追加新行,还是先量化平均子词数再选改法?

参考答案​