NBER美国国民经济研究局-NBER-Is-Scholarly-Refereeing-Productive-_at-the-Margin__27页_599kb

总结：学术同行评审是否在边际上具有生产力？

核心内容

本文探讨了在经济学领域中，同行评审是否在边际上具有生产力。研究基于《Economic Inquiry》（EI）引入的双轨投稿机制，分析了不同评审流程对学术文章后续引用影响的差异。文章指出，尽管同行评审是学术出版的“黄金标准”，但经济学领域的评审过程可能并不如预期般有效。

主要观点

• 同行评审的高成本：经济学期刊的同行评审过程耗费大量时间与资源。根据估算，仅评审环节每年就花费至少5000万美元，且文章从投稿到发表的平均时间远长于其他社会科学。
• 双轨投稿机制：EI在2007年引入了“快审”（fast-track）和“常规审”（regular-track）两条投稿路径。快审允许作者在无修改的情况下接受或拒绝，而常规审可能需要多轮修改。
• 评审流程的边际效应：研究发现，快审文章在后续引用上略高于常规审文章，但常规审文章经过多轮评审后，并未表现出更高的学术影响力。这表明，额外的评审轮次在边际上可能并不带来显著的生产力提升。
• 作者选择的内生性问题：作者可能根据自身情况选择不同的投稿路径，例如年龄、已有引用量等。因此，研究中使用了工具变量法（IV）来控制这些选择偏差，以更准确地评估评审流程对学术影响力的实际影响。
• 实验结果的稳健性：即使在控制了作者性别、引用历史、期刊分类等变量后，快审文章的引用表现仍不显著优于常规审文章。此外，多轮评审的文章在引用上与单轮评审的文章没有显著差异。

关键信息

评审时间与成本

• 经济学期刊的同行评审时间较长，平均从投稿到发表的时间为2.25年，90%分位点超过4年。
• 每年经济学领域的评审工作量巨大，可能达到30万份评审报告。
• 每份评审报告平均耗时约5小时，按保守估计，每年经济学领域的评审工作总时长约为150万小时。
• 按照平均时薪估算，评审成本约为每年5000万美元。

快审与常规审的差异

• 快审文章被接受的概率略高（0.159 vs. 0.149）。
• 快审文章的平均首次决定时间约为97天，90%分位点为210天。
• 快审文章的平均页数较短，且有更多合著者，女性作者比例更高。

评审对学术影响力的影响

• 快审文章的后续引用数量略高于常规审文章，但这一差异在控制其他变量后变得不显著。
• 多轮评审的常规审文章在引用数量上与单轮评审文章没有显著差异。
• 作者的学术背景（如年龄、引用历史）对投稿路径选择有显著影响。

内生性问题与工具变量法

• 作者可能基于自身职业发展需要选择快审或常规审，因此需要通过工具变量法控制这种选择偏差。
• 工具变量基于作者的博士学位年龄（Ph.D.-age）和是否处于“快速决策”阶段（Ph.D.-age在5-10岁之间）。
• 使用工具变量估计后，快审对后续引用的影响不再显著，且多轮评审对学术影响力无显著提升。

实验结果的稳健性

• 快审与常规审在引用表现上的差异在控制变量后消失。
• 多轮评审文章与单轮评审文章在引用上无显著差异。
• 评审数量与作者的学术背景无显著关联，且评审数量的差异并不足以解释引用差异。

结论

• 本文发现，经济学领域的同行评审在边际上并不显著提高文章的学术影响力。
• 快审机制虽然能加快发表速度，但其对引用的影响在控制其他因素后不显著。
• 多轮评审并未带来显著的学术价值提升，可能意味着经济学领域的同行评审流程存在效率低下问题。
• 研究结果并不否定同行评审的价值，而是指出在经济学领域中，多轮评审可能并不必要，从而为优化学术出版流程提供了实证依据。

附录信息

• 作者的性别、博士年龄、引用历史等信息被纳入分析。
• 通过调查，发现快审文章在投稿前可能已获得略多的评审意见，但这一差异并不足以解释其引用表现。
• 评审轮次与编辑身份无关，且评审者的学术影响力分布也无显著差异。

研究意义

• 本文是首个在实验环境下探讨同行评审边际效应的研究。
• 研究结果对学术出版流程的优化具有重要启示，表明在某些情况下，减少评审轮次可能不会降低文章质量，从而有助于提高学术传播效率。