在本页中,我们将告诉您R01应用程序的总体影响分数是如何转换为百分位数的,NIH如何计算百分位数,以及为什么使用这些百分位数。
我们基于总体影响分数或百分比的拨款支付线是资助申请的保守截止点。
值得注意的是,我们保守地设定了付款线,并在财政年度结束时为更多的申请提供资金,因为我们的预算情况更为清晰。NIH机构之间的薪酬也有很大差异。
百分比表示相对等级
对于科学审查中心(CSR)审查的未经请求的R01,NIH将您的总体影响分数转换为百分位数。
百分位数将您的申请与您的研究部门在最近三次会议上审查的其他申请进行排名。
- 百分数范围为1到99之间的整数。舍入总是向上的,例如,10.1个百分点变为11个百分点。
- 与通常的数学练习相比,数字越小表示分数越高。
为什么NIH使用百分位数?
- Percentiling反驳了一种称为“分数蠕变”的现象,在这种现象中,研究部分给应用程序的分数越来越高。结果,分数聚集在异常范围内,使得无法在应用程序之间进行区分。
- 每个研究部分可以采用不同的NIH审查标准,评分要么更严格,要么更有利。
Percentiling通过将应用程序与同一研究部分的其他评分进行比较来对抗这些趋势。
总的来说,百分制使审核对申请人更加公平。
百分位数是如何确定的
以下是NIH如何达到百分位数。
步骤1–在主要审核人主持的讨论之后,所有审核人都会对应用程序的总体影响进行评分,并分配一个从1到9的整数。
步骤2–将这些分数取平均值,在数学上四舍五入到一个小数位,然后乘以10得出总体影响分数。例如,1.34的平均值产生13的总体影响得分。
步骤3–百分比是通过将应用程序的总体影响分数与包含在最后三个审查周期内分配给研究部分的应用程序的所有分数的相对排名表相匹配来确定的。
步骤4–NIH使用以下公式计算百分位数。
百分比=100*(等级-0.5)/申请总数
(0.5%是用于四舍五入的标准数学程序。)
然后将这些数字向上取整,例如,10.1的百分位数变为11,以创建1到99的整数百分位数。NIH包括百分位计算中未讨论的应用程序。
假设百分比数据
下面我们展示了假设数据,以说明两个可能导致结果偏差甚至产生数学不精确性的因素:
- 总体影响得分的聚类分布。
- 每个审查周期的申请队列变化。
我们模拟了三个同行评审周期的分数和百分位数,以说明百分位数与分数的关系以及聚类的工作原理。
这些数据描述了代表NIH通常用于计算百分位数的三次研究部分会议的三种场景。
表1显示了分数分布的影响。在第1周期中,只有2项补助金的总体影响得分为15分或更低,成为3的百分位数。
将结果与循环2和3中的数字进行对比。研究部分的得分集中在下端(请记住,数字越小越好):7份和15份申请的得分为15分或更低,结果分别为8分和13分。
当整体影响分数转换为百分位数时,百分位数可以将分数分布在更大的范围内。在第3周期中,15分和20分成为13分和24分的百分位数。
注释:为了节省下表中的水平空间,我们使用“Score”作为“总体影响得分”的缩写,使用“Apps.”表示“应用程序”,使用“%ile”表示百分位数。
表1。研究部分A的总体影响得分分布
| 循环1 | 循环2 | 循环3 |
---|
分数 | 应用程序 | %伊利 | 应用程序 | %伊利 | 应用程序 | %文件 |
---|
10 | 1 | 2 | 2 | 三 | 5 | 4 |
---|
15 | 1 | 三 | 5 | 8 | 10 | 13 |
---|
20 | 5 | 12 | 5 | 16 | 10 | 24 |
---|
25 | 5 | 20 | 10 | 28 | 10 | 38 |
---|
30 | 5 | 28 | 15 | 45 | 10 | 55 |
---|
40+ | 43 | 62 | 23 | 73 | 15 | 76 |
---|
表2进一步显示了分数分布的影响,并说明了移动的三次审查周期窗口对百分位数的影响。
在第1周期中,10份申请得分为15分或以下,15分排名在17%。将这个数字与第3周期进行比较,在第3周期中,15个应用程序的得分为15分或更高,超过三分之一。
如表1所示,应用程序的数量越多,百分位数就会显著越高(越差)。然而,在第3周期中,15分排名在18%,只比第1周期高一个百分点,因为它是使用不同的应用程序队列进行计算的。
表1和表2也强调了研究部分的不同评分行为。与表1中的研究部分相比,表2中的研究部分始终在最高范围内判断出更多的应用,导致了非常不同的百分位数。
表2。研究B部分的总体影响得分分布
| 循环1 | 循环2 | 循环3 |
---|
分数 | 应用程序 | %伊利 | 应用程序 | %伊利 | 应用程序 | %伊利 |
---|
10 | 5 | 8 | 2 | 6 | 5 | 7 |
---|
15 | 5 | 17 | 5 | 14 | 10 | 18 |
---|
20 | 10 | 33 | 8 | 29 | 15 | 36 |
---|
25 | 10 | 50 | 10 | 46 | 5 | 53 |
---|
30 | 10 | 67 | 15 | 67 | 5 | 69 |
---|
40+ | 20 | 83 | 20 | 83 | 10 | 83 |
---|
百分比法将分数分布在所有可能的排名中。但分数越集中,百分比越夸大他们的差异。尽管此图显示了五步间隔中的分数,但实际上,每个整数都可能有分数。
第二个影响结果的因素是,在每个审查周期中,新申请队列的进入和旧申请队列的删除。
用于计算每次研究小组会议百分位营业额的基数的三分之一,而最近两次会议的百分位是固定的,这导致了缺乏数学精度。
有关评分的更多详细信息,请阅读评分和汇总表.
付款线是保守的资金截止点
每个财政年度,我们都会设定自己的付款线和资金截止点,用于资助未经请求的申请。你可以在NIAID付款线.
我们通过平衡我们必须花费的资金金额与我们预计研究部门推荐的资助申请数量,为每种主要类型的资助(构成最大申请池的活动代码)设定付款线。
请注意,对于申请数量较少的活动代码,协会更倾向于不设置付款线的灵活性。此外,某些活动代码的申请仅用于响应申请请求(RFA)或带有集合基金(PAS)的计划公告。即使没有付款线,我们通常也会按总体影响分数顺序为应用程序提供资金。
认识到我们的大型赠款组合的多样性,我们使用付款线作为最公平的融资决策方式。数值可以让我们跨越学科,资助最初同行评审确定的最佳科学。
在NIAID,我们使用NIH公式和历史数据建立了付款线,包括:
- NIAID相关研究部门审查的申请数量。
- 预算中的拨款金额。
- 平均拨款成本。
我们保守地设定了付款线,以确保全年有足够的资金支付补助金。
保守的付款线还使我们能够满足现有拨款以及任何新的国会授权的年外付款,例如生物防御或艾滋病。
到年底,当我们有了更清晰的预算情况时,我们会奖励更多得分超过支付线的赠款。
国家卫生研究院的薪酬体系各不相同,因此在一个研究院无法获得的百分位或总体影响分数可能在另一个研究所可以获得。查找NIAID的预算信息付款线和资金.
请记住,在财政年度开始时,我们通常使用中期付款线。有关不断变化的付款线如何影响您的更多信息,请访问NIAID全年薪酬和预算信息变化.
成功率表明资金水平
通常,成功率高于付款线,这是一个比付款线更好的指标,表明我们为每个活动代码(尤其是R01)提供资金的应用程序的百分比。
原因是:许多申请的资金都超出了R01付款线,例如,通过NIAID的申请、选择性付款和R56-Bridge奖励。
成功率大致是由一个研究所资助的申请数量除以提交给它的同行评审申请数量(不包括在同一财政年度重新提交的申请,每个申请只计算一次)。
要查找成功率数据,请转到成功率在NIH上RePORT公司网站。有关按会计年度列出的NIAID信息,请参阅研究项目拨款和其他机制:按研究所/中心、机制/资金来源和活动代码列出的竞争申请、奖项、成功率和资金.