商品向量检索原本 12ms 返回,加了租户和类目过滤之后变成 240ms,P95 到 600ms。数据量四十万条,768 维,collection 用的是 HNSW,ef 默认 128。
第一反应是过滤条件写错,把 tenant_id 写进了 must_not。检查请求体,两个条件都在 must 里,值也对。拿同一条向量去掉过滤再查,还是 12ms,问题锁定在过滤这一层。
看 collection 的 payload_schema,tenant_id 和 category 两个字段都没有索引。没索引的时候,Qdrant 只能在 HNSW 里先取一批候选,再逐条比对 payload,候选不够就继续扩大搜索范围,等于拿检索次数去换过滤命中。
试过把 hnsw_ef 从 128 调到 512,延迟涨到 700ms,召回也没明显变好。试过把过滤放应用层做,先取两千条再筛,网络传输和内存占用都不划算,何况租户占比小的客户一条都筛不出来。
正确做法是建 payload 索引,并把租户字段标成 tenant 类型,Qdrant 会按租户切索引段,只扫当前租户那一段。
PUT /collections/goods/index
{"field_name": "tenant_id",
"field_schema": {"type": "keyword", "is_tenant": true}}
PUT /collections/goods/index
{"field_name": "category", "field_schema": "keyword"}
# 建完等优化器跑完再压测
GET /collections/goods
建完不要立刻压测,优化器还在后台重排段,前几分钟的数字是假的。等了八分钟,payload_schema 里两个字段都显示 indexed,再跑同一批请求。
验证用两百条真实查询,P95 从 600ms 降到 28ms。召回还单独核了一遍,取 top10 跟不带过滤的全量结果比,重合度 0.99。提升最大的是租户占比最小的那个客户,它原来的候选几乎全被别的租户占掉了。
