ALMA第八周期分布式同行评审流程分析
摘要：分布式同行评审是应对传统小组评审中高审稿工作量和提交的提案数量增加的挑战而实施的。在本文中，我们对这一评审过程进行了分析。超过1000名评审人参与了这个过程，评审了1497个提案，这是迄今为止天文学中最大规模的分布式同行评审实施，也是首次使用该流程在一个天文台上授予大部分观测时间。我们描述了将提案分配给评审人的过程，分析了评审人提交的近1.5万个排名和评论，以识别任何趋势和系统性问题，并通过调查收集评审人和首席研究员（PIs）对流程的反馈。大约90\%的提案分配与评审人的专业知识相符，这既可以通过评审人提供的专业关键字衡量，也可以通过评审人对其分配的提案的专业知识的自我评估来衡量。PIs将73\%的个别评论评为有帮助，尽管评审人的经验水平各不相同，但PIs对学生和资深研究人员所给出的评论质量进行了相似的评价。PIs提出的主要关注点是一些评审人评论的质量和排名的高度分散。将排名和评论与各种人口统计学数据相关联，以确定评审过程在未来周期中需要改进的主要领域。
作者：Jennifer Donovan Meyer, Andrea Corvill''on, John M. Carpenter, Adele L. Plunkett, Robert Kurowski, Alex Chalevin, Jakob Bruenker, D.-C. Kim, Enrique Mac''ias
论文ID：2204.05390
分类：Instrumentation and Methods for Astrophysics
分类简称：astro-ph.IM
提交时间：2023-02-15