跳到主要内容

随机遮盖 15% 位置来取代 next-token 预训练之后,模型为何更适合当句编码器,却几乎没法做流式对话?

模型选型与微调中级成本

题目​

随机遮盖 15% 位置来取代 next-token 预训练之后,模型为何更适合当句编码器,却几乎没法做流式对话?

参考答案​