如何评估搜索的好坏？学习企查查搜索系统演进

无论搜索怎么扩充信息，最终我们评估搜索的标准依然是回归到搜索的本身，即是否返回用户最想要的信息。怎么度量这个，如何评估搜索的好坏？如何确认搜索人员做到的精准，是否就是用户想要的？企查查对于搜索的评估主要基于如下4个指标Top3SuggestNullHitRate。我们持续关注上述这个指标的变化，并持续予以优化。

1. TOP3

我们的结果集常态的输入可能有数十条数百条，精准的搜索可能只有1条记录，最大的则能达到1万条。对于不同量级的结果集，我们关注前三条用户的点击比例，并把这个指标作为衡量整个搜索是否精度的最主要指标。

2. Suggest

用户每多输入一个字数，结果集都是在变化，他什么时候点击相当重要，如果持续不点击suggest意味着用户需要输入更多的字数，这时会判断推荐词是否是他想要的，如果该指标比例提高会有效减少用户的输入时间。这也是评估搜索是否精准的一个重要指标。

3. Null

无结果是搜索比较糟糕的体验，为了规避无结果的占比，我们除了分析用户的输入以推动纠错，兼容形近、音近等情况，还补全了诸如二次搜索等机制。

4. HitRate

整体的点击搜索比，宏观面的数据，既可以辅助分析用户的搜索行为，也可以反推当前的数据质量走势。

通过对上述指标的持续跟进，我们可以较为直观的知道整个搜索团队的工作是否在往更好的方向发展，同时也能分析到给用户的搜索习惯走势。
 
当然，关于搜索，我们除了上述各种预设的机制外，对于热门的搜索，我们也特别增加了人工干预，以规避新词更新不及时，热点事件排序不合理问题。
 
原文阅读：
https://developer.aliyun.com/article/720572