常用评测指标(推荐系统 知识十四)

常用评测指标

带来订单量、点击量、阅读时间提升才是推荐的效果好,那效果评测的目标就是需要全面和系统的衡量系统效果。

常见评测指标如下

直接业务结果类:GMV、订单量(但是无法知道优化方向和问题定位)

反应过程类:点击率(点击数/曝光数)、转化率等

面向未来性:多样性、新颖性

点击率:是漏斗的第一层,如何计算曝光数,请求 != 曝光,而且只能算被推荐到的用户曝光数量,把类似于异常行为用户的曝光数去除。

覆盖率:推荐效果 = 准确率 * 覆盖率。 覆盖率是推荐系统效果的放大器。

有效推荐用户数(模型覆盖到的用户) / 整体用户数(非爬虫、异常用户) = 覆盖率

物品覆盖率:系统中的多少物品出现在了推荐结果中,用来衡量推荐系统的长尾能力。

多样性:是否重复推荐,挖掘潜在兴趣。信息熵(数据越乱,多样性越好)

新颖性:推荐结果中是否有当前兴趣以外的内容,系统效果锦上添花的突破点。

欢迎技术探讨