已验证实战案例
生产环境的监控与回归
上线只是开始:检索质量会随文档更新悄悄退化,这是我们的监控方案。
上线只是开始:检索质量会随文档更新悄悄退化,这是我们的监控方案。
把「感觉变好了」变成 recall@k 和 MRR:标注集怎么建、指标怎么选、回归怎么跑。
在真实数据量下对比了三种向量库的召回、延迟与运维成本,给出选型决策表。
在混合检索之后加一层重排,top-1 准确率再提 11 个点,代价是 40ms 延迟。
纯向量检索搜不到精确的错误码和产品名,混合检索把 recall 拉高 9 个点。
中文技术文档场景下四个嵌入模型的召回与成本对比,含维度与量化的取舍。
固定长度、按句、按结构、按语义四种切法在同一份文档上的召回对比。
用三个真实需求判断该上 RAG、该上长上下文,还是干脆该做微调。