站内搜索相关性调优
触发场景
当用户的需求涉及:定义评测集;归因 badcase;分层调优;输出报告 时使用本技能。
Step 1 · 定义评测集
从搜索日志抽取 50~200 条高频 query,人工标注相关文档,建立基线 NDCG/MRR。
Step 2 · 归因 badcase
分类:无结果、结果错排、同义词未召回、分词错误,各统计占比。
Step 3 · 分层调优
按召回(同义词库/纠错)→排序(特征权重)→展示(类目聚合)顺序逐层验证,每层改动后重跑评测集。
Step 4 · 输出报告
基线 vs 优化后指标对比、改动清单、遗留问题。
红线
- 每次只改一层,禁止同时多处调整导致无法归因
- 指标必须基于标注评测集,不凭感觉