600 字分块把中文段落腰斩 分隔符优先级怎么改

陆零云 20 0
知识库重切那天,客服说答案经常从半句话开始。翻切片,一条是「退款申请需在」,下一条接「订单签收后七天内提交」,句子被腰斩。用的是 LangChain 0.3 的 RecursiveCharacterTextSplitter,chunk_size 设 600,分隔符没传,走的是默认那套。 第一反应是块太小,从 600 提到 1200。块变大了,断句问题还在,只是断点少了一半。又怀疑重叠不够,从 60 加到 150,相邻块重复内容变多,检索出来两条几乎一样的片...

LangChain 0.3 升级后 Agent 启动报错 pydantic 冲突怎么锁

陆零云 29 0
项目里 langchain 停在 0.1.20,pydantic 1.10.15,跑了半年没事。上周想用新的 create_react_agent,升到 0.3.7,pip 第一步就失败,报 Cannot install langchain 0.3.7 and fastapi 0.95.2,依赖冲突。 看依赖树才明白,langchain 0.3 依赖 langchain-core 0.3,langchain-core 0.3 要求 pydantic 2.5...