RAG切片的目标是让检索结果包含足够回答问题的上下文。固定字数并非唯一标准,制度条款、产品表格和说明书需要不同处理。
保留语义边界
按标题、条款或自然段切分,保留所属文档与章节。不要把限制条件与主结论拆到无法同时检索的两个片段。
处理表格
让行内容附带列名和单位,长表分段时重复必要表头。表格截图先人工检查识别结果,防止数字与单位错位。
用问题验证
对同一问题比较切片长度、重叠和召回结果。记录答案所在段落是否被找到,再决定是否调整,不仅比较最终回答是否流畅。
切片大小要跟内容结构匹配
产品表格应保留表头和单位,操作步骤尽量不拆断;不能仅按固定字符数切所有文件。
拿同一组问题比较切片方案,记录命中段落与缺失上下文,再决定是否增加重叠或调整边界。
例如规格表分成两块后表头丢失,可保留表头随片段复制,再测试同一型号的参数问题。
相关阅读:企业RAG知识库:资料整理、检索、权限与持续更新。