跳到索引

GLOSSARY

分块(Chunking)

在嵌入前把文档切成适合检索的小块——不体面却悄悄决定 RAG 答案质量的关键决策。

200 页的 PDF 无法整本塞进上下文窗口,所以 RAG 系统把它切片并为每块做嵌入。每个旋钮都重要:块太小会丢失赋予句子意义的上下文;太大则检索到的“邻居”淹没答案。聪明的分块尊重结构——标题、段落、表格——而不是盲目按每 N 个 token 一切。

调试“RAG 返回不相关结果”的团队,通常先找到的是分块问题,其次才是嵌入问题。它是检索中最不光彩的杠杆,也是收益最高的之一:尊重文档结构的分块器与不尊重的之间的差距,往往就是演示与产品之间的差距。

相关术语

使用该技术的工具

相关分类