第三方实施对可重复性的影响
摘要：推荐系统研究的可重复性在近年来受到质疑。除了关注重复使用特定算法的实验之外，研究界也开始讨论评估的各个方面以及这些方面如何影响可重复性。我们从一个新的角度来讨论这个问题，即研究非官方第三方实现如何对可重复性产生积极或消极的影响。除了给出一个总体概述，我们还对一个热门推荐算法的六个非官方第三方实现进行了详细研究，并将它们与官方版本在五个公共数据集上进行了比较。根据我们令人担忧的发现，我们希望引起研究界对这一被忽视的可重复性方面的关注。
作者：Bal''azs Hidasi, ''Ad''am Tibor Czapp
论文ID：2307.14956
分类：Information Retrieval
分类简称：cs.IR
提交时间：2023-07-28