[论文解读] Impact of Declining Proposal Success Rates on Scientific Productivity

Priscilla Cushman, Hoeksema, J. Todd+5 more|arXiv (Cornell University)|Oct 4, 2015

Health and Medical Research Impacts被引用 5

一句话总结

本白皮书分析了基础科学领域——尤其是天文学与天体物理学——中提案成功率持续下降的现象，归因于研究预算停滞或减少，尽管提案质量稳定且研究人员数量持续增长。报告指出，反复提交未获资助但质量优异的提案已显著增加工作负担，并提出30–35%的成功率目标为最优，以维持科学产出效率并减轻研究人员与资助机构的行政压力。

ABSTRACT

Over the last decade proposal success rates in the fundamental sciences have dropped significantly. Astronomy and related fields funded by NASA and NSF are no exception. Data across agencies show that this is not principally the result of a decline in proposal merit (the proportion of proposals receiving high rankings is largely unchanged), nor of a shift in proposer demographics (seniority, gender, and institutional affiliation have all remained unchanged), nor of an increase (beyond inflation) in the average requested funding per proposal, nor of an increase in the number of proposals per investigator in any one year. Rather, the statistics are consistent with a scenario in which agency budgets for competed research are flat or decreasing in inflation-adjusted dollars, the overall population of investigators has grown, and a larger proportion of these investigators are resubmitting meritorious but unfunded proposals. This White Paper presents statistics which support this conclusion, as well as recent research on the time cost of proposal writing versus that of producing publishable results. We conclude that an aspirational proposal success rate of 30-35% would still provide a healthily competitive environment for researchers, would more fully utilize the scientific capacity of the community's facilities and missions, and provide relief to the funding agencies who face the logistics of ever-increasing volumes of proposals.

研究动机与目标

• 调查基础科学领域科研资助提案成功率持续下降的根本原因。
• 评估提案成功率下降对科研产出和研究人员工作量的影响。
• 评估在研究人员数量和重复提交率持续增长的背景下，当前资助趋势是否可持续。
• 提出30–35%的成功率目标，以在竞争性与科学能力高效利用之间取得平衡。
• 通过分析提案撰写时间成本与科研产出之间的关系，为资助政策提供依据。

提出的方法

• 分析多个资助机构（包括NASA和NSF）的提案成功率趋势。
• 审查提案评审得分，以判断成功率下降是否源于质量下降。
• 评估研究者背景因素（如资历、性别、机构隶属关系）以排除提案人构成变化的影响。
• 评估资助请求金额及每位研究者的提案数量，以排除成本通胀或工作量增加为主要成因的可能性。
• 比较提案撰写所花费时间与实际产出可发表科研成果的时间。
• 利用高质量但未获资助提案的重复提交趋势统计，推断预算约束的存在。

实验结果

研究问题

• RQ1 基础科学领域提案成功率下降的主要原因是什么？
• RQ2 从同行评审得分来看，提交提案的学术质量是否随时间推移而下降？
• RQ3 过去十年中，研究者资历、性别及机构隶属关系有何变化？
• RQ4 提案撰写时间与实际科研产出之间存在何种关系？
• RQ5 何种成功率可实现竞争性、科研产出与行政效率的最佳平衡？

主要发现

• 提案成功率下降并非由于提案质量下降，因为高分提案的评审得分保持稳定。
• 过去十年中，提案人资历、性别及机构隶属关系未发生显著变化。
• 人均提案的平均资助请求金额未超出通货膨胀水平，排除了成本通胀作为主要原因。
• 每位研究者每年的提案数量未显著增加。
• 越来越多高质量提案被重复提交，表明这是预算约束所致，而非质量下滑。
• 建议将30–35%的成功率作为最优目标，以在保持竞争性的同时减轻行政负担，并最大化科研产出。