文档分块Chunking
把长文档切成可检索、可放进上下文的片段,同时保留必要的连接信息。
规则 + 例外
规则例外
保留标题与连接
怎么用
退款规则和“定制商品除外”被切到两个片段时,单独检索规则可能给出错误结论。按章节和语义边界切分,并保留标题、来源和必要重叠。
先检查什么
检查实际切出来的片段。表格、代码和例外条款需要各自合适的边界;块大小与重叠量要按资料和查询效果调整。
容易误解的地方
分得更小不一定更准。重叠会增加索引与输入量,也不能保证所有跨段信息都完整。
这样告诉 Agent
请先展示知识库实际分块结果,保留章节标题、文档版本和来源位置。不要拆散规则及其例外、表格行或代码块;用代表性问题检查是否遗漏上下文。