陆零云
20
0
知识库重切那天,客服说答案经常从半句话开始。翻切片,一条是「退款申请需在」,下一条接「订单签收后七天内提交」,句子被腰斩。用的是 LangChain 0.3 的 RecursiveCharacterTextSplitter,chunk_size 设 600,分隔符没传,走的是默认那套。
第一反应是块太小,从 600 提到 1200。块变大了,断句问题还在,只是断点少了一半。又怀疑重叠不够,从 60 加到 150,相邻块重复内容变多,检索出来两条几乎一样的片...
陆零云
29
0
项目里 langchain 停在 0.1.20,pydantic 1.10.15,跑了半年没事。上周想用新的 create_react_agent,升到 0.3.7,pip 第一步就失败,报 Cannot install langchain 0.3.7 and fastapi 0.95.2,依赖冲突。
看依赖树才明白,langchain 0.3 依赖 langchain-core 0.3,langchain-core 0.3 要求 pydantic 2.5...