600 字分块把中文段落腰斩 分隔符优先级怎么改

陆零云 20 0
知识库重切那天,客服说答案经常从半句话开始。翻切片,一条是「退款申请需在」,下一条接「订单签收后七天内提交」,句子被腰斩。用的是 LangChain 0.3 的 RecursiveCharacterTextSplitter,chunk_size 设 600,分隔符没传,走的是默认那套。 第一反应是块太小,从 600 提到 1200。块变大了,断句问题还在,只是断点少了一半。又怀疑重叠不够,从 60 加到 150,相邻块重复内容变多,检索出来两条几乎一样的片...