Chunk 为什么重要?
题目
Chunk 为什么重要?
参考答案
点击展开参考答案
- Chunk 是 RAG 系统里最容易被低估的部分。
- 很多系统效果差,不是因为模型不够强,而是因为文档被切坏了。
- 常见问题: - chunk 太小:定义、实验结果、上下文被切断。
-
- chunk 太大:检索命中了相关文档,但证据不聚焦,模型容易被噪声影响。
-
- 没有标题和章节信息:片段里出现“this method”“our approach”时,脱离上下文后语义不完整。
-
- 表格、公式、图片说明被丢失:导致关键证据根本没有进入索引。
- 面试答法: > Chunk size 本质上是 recall 和 precision 的权衡。