多目标评估推荐系统指南
摘要：推荐系统今天仍然主要以准确性为评估标准，其他方面如多样性、用户长期保留和公平性等并不常被关注。此外，调和多个性能角度在定义上是不确定的，这给追求全面评估推荐系统的人带来了障碍。EvalRS 2022是一个围绕多目标评估设计的数据挑战，首次实践提供了许多关于在评估中平衡多个目标的要求和挑战的见解。在这项工作中，我们反思EvalRS 2022并详述关键的学习，以制定一个基于第一原理的多目标模型选择方法，并概述一套指南，用于进行多目标评估挑战，在现实世界的部署中可能适用于竞争模型的全面评估问题。
作者：Patrick John Chia, Giuseppe Attanasio, Jacopo Tagliabue, Federico Bianchi, Ciro Greco, Gabriel de Souza P. Moreira, Davide Eynard, Fahd Husain
论文ID：2304.10621
分类：Information Retrieval
分类简称：cs.IR
提交时间：2023-04-24