IDEAS主页打印自https://ideas.repec.org/p/nbr/nberwo/22180.html
  我的参考书目  保存此纸张

科学中对新颖性的偏见:文献计量指标用户的警示故事

作者

上市的:
  • 王健(Jian Wang)
  • 格勒斯
  • 保拉·斯蒂芬

摘要

探索未标记水域的研究具有很大的潜在重大影响,但也具有较高的影响不确定性。这种探索性研究通常被描述为采取一种新颖的方法。这项研究考察了追求新颖方法与影响力之间的复杂关系。将科学研究视为一个组合过程,我们通过检查一篇已发表的论文是否首次组合参考期刊来衡量科学的新颖性,同时考虑到进行这种组合的难度。我们将这一新开发的新颖性测量方法应用于2001年发表的所有科学学科的科学网研究文章。我们发现,高度新颖的论文,被定义为那些产生更多(遥远)新组合的论文,为科学带来了高收益:从长远来看,它们更有可能成为前1%的高被引用论文,激励后续高被引用研究,并在更广泛的学科中被引用。与此同时,新奇研究的风险也更大,这反映在其引文表现的差异更大。此外,我们发现,小说研究在“国外”领域被引用的次数明显更多,但在“国内”领域却没有被引用。我们还发现了对新论文延迟识别的有力证据,并且在使用短时间窗口时,新论文不太可能被最高引用。最后,新颖的论文通常发表在影响因子低于预期的期刊上。这些发现表明,科学政策,尤其是依赖基于短期直接引文计数和期刊影响因子的传统文献计量指标的资助决策,可能会偏向于“高风险/高收益”的新研究。研究结果还提醒人们不要在同行评审中采用单一学科的方法来评估新研究的真正价值。

建议引用

  • 王健,Reinhilde Veugelers和Paula Stephan,2016。"科学中对新颖性的偏见:文献计量指标用户的警示故事,"NBER工作文件22180,国家经济研究局。
  • 手柄:RePEc:nbr:nberwo:22180
    注:LS PR
    作为

    从出版商下载全文

    文件URL: http://www.nber.org/papers/w22180.pdf
    下载限制:
    ---><---

    此项目的其他版本:

    IDEAS上列出的参考文献

    作为
    1. Bornmann,Lutz&Leydesdorff,Loet&Wang,Jian,2014年。"如何在出版日期后几年内改进基于引用影响百分比的预测?,"信息计量学杂志爱思唯尔,第8卷(1),第175-180页。
    2. 罗德里戈·科斯塔斯(Rodrigo Costas)和塞德·范·列文(Thed N.van Leeuwen)以及安东尼·范·拉恩(Anthony F.J.van Raan),2010年。"科学文献是否受“销售日期”限制?分析科学文献“耐久性”的通用方法,"信息科学与技术协会杂志信息科学与技术协会,第61卷(2),第329-339页,2月。
    3. Costas,Rodrigo和van Leeuwen,Thed N.和van Raan,Anthony F.J.,2013年。"科学文献在群体层面的耐久性影响:荷兰化学研究群体的案例研究,"研究政策爱思唯尔,第42卷(4),第886-894页。
    4. G.M.P.Swann,2009年。"创新经济学,",爱德华·埃尔加出版社,编号13211,12月。
    5. Martin L.Weitzman,1998年。"重组生长,"经济学季刊《哈佛大学校长和研究员》,第113卷(2),第331-360页。
    6. Chen,Chaomei&Chen,Yue&Horowitz,Mark&Hou,Haiyan&Liu,Zeyuan&Pellegrino,Donald,2009年。"走向科学发现的解释和计算理论,"信息计量学杂志爱思唯尔,第3卷(3),第191-209页。
    7. Jian Wang和Bart Thijs&Wolfgang Glänzel,2015年。"学科间性和影响:多样性、平衡性和差异性的不同影响,"普洛斯一号,公共科学图书馆,第10卷(5),第1-18页,5月。
    8. Anthony F.J.van Raan,2004年。"科学中的睡美人,"科学计量学,施普林格;Akadémiai Kiadó,第59卷(3),第467-472页,3月。
    9. Pierre Azoulay和Joshua S.Graff Zivin和Gustavo Manso,2011年。"激励与创造力:来自学术生命科学的证据,"兰德经济学杂志,兰德公司,第42卷(3),第527-554页,9月。
    10. 王健,2013。"研究影响评价的引文时间窗选择,"科学计量学,施普林格;Akadémiai Kiadó,第94卷(3),第851-872页,3月。
    11. 戴安娜·希克斯,2012年。"基于绩效的大学研究资助系统,"研究政策爱思唯尔,第41卷(2),第251-261页。
    12. Lee Fleming,2001年。"技术搜索中的重组不确定性,"管理科学,INFORMS,第47卷(1),第117-132页,1月。
    13. Paul M.Romer,1994年。"内生生长的起源,"经济展望杂志,美国经济协会,第8卷(1),第3-22页,冬季。
    14. James D.Adams和Black、Grant C.和Clemmons、J.Roger和Stephan、Paula E.,2005年。"科学团队和机构合作:来自美国大学的证据,1981年至1999年,"研究政策爱思唯尔,第34卷(3),第259-285页,4月。
    15. James G.March,1991年。"组织学习中的探索与开发,"组织科学,INFORMS,第2卷(1),第71-87页,2月。
    16. Ed J.Rinia&Thed N.van Leeuwen&Eppo E.W.Bruins&Hendrik G.van Vuren&Anthony F.J.van Raan,2002年。"衡量科学领域之间的知识转移,"科学计量学,施普林格;Akadémiai Kiadó,第54卷(3),第347-362页,7月。
    17. Verhoeven,Dennis&Bakker,Jurriën&Veugelers,Reinhilde,2016年。"用专利指标衡量技术新颖性,"研究政策爱思唯尔,第45卷(3),第707-723页。
    18. 肯尼斯·阿罗,1962年。"经济福利与发明资源配置,"NBER章节,单位:发明活动的速度和方向:经济和社会因素,第609-626页,国家经济研究局。
    19. Lee,You-Na&Walsh,John P.&Wang,Jian,2015年。"科学团队的创造力:打开新颖性和影响力的包装,"研究政策爱思唯尔,第44卷(3),第684-697页。
    20. 沃尔夫冈·格兰泽尔和安德烈斯·舒伯特,2003年。"为科学计量评估目的而设计的科学领域和子领域的新分类方案,"科学计量学,施普林格;Akadémiai Kiadó,第56卷(3),第357-367页,3月。
    21. 琳达·巴特勒,2003年。"解释澳大利亚在三军情报局出版物中所占份额的增加——基于出版物数量的资助公式的影响,"研究政策爱思唯尔,第32卷(1),第143-155页,1月。
    22. Kevin J.Boudreau、Eva C.Guinan、Karim R.Lakhani和Christoph Riedl,2016年。"跨越知识边界:知识距离、新颖性与科学资源配置,"管理科学《信息》,第62卷(10),第2765-2783页,10月。
    23. 阿尔弗雷多·耶格罗斯(Alfredo Yegros-Yegros)、伊斯梅尔·拉夫尔斯(Ismael Rafols)和巴勃罗·德斯特(Pablo D’Este),2015年。"跨学科研究会带来更高的引用影响吗?近距离和远距离学科间性的不同影响,"普洛斯一号,公共科学图书馆,第10卷(8),1-21页,8月。
    24. 张瑞志、王建梅、亚军,2017。"在科学中寻找常青树:功能数据分析,"信息计量学杂志爱思唯尔,第11卷(3),第629-644页。
    完整参考文献 (包括与IDEAS上的项目不匹配的项目)

    最相关的项目

    这些是最常引用与本书相同作品的项目,也被与本书同样的作品引用。
    1. Banal-Estañol,Albert&Macho-Stadler,Inés&Pérez-Castrillo,David,2019年。"研究资助机构的评估:结构多样的团队是否有偏见?,"研究政策爱思唯尔,第48卷(7),第1823-1840页。
    2. 王健,2016。"协作网络中的知识创造:关系配置的影响,"研究政策爱思唯尔,第45卷(1),第68-80页。
    3. 阿尔伯特·班纳·埃斯塔尼奥尔(Albert Banal-Estañol)、伊内斯·马乔·斯塔德勒(Ines Macho-Stadler)和大卫·佩雷斯·卡斯特里洛(David Pérez-Castrillo),2016年。"公共研究拨款的关键成功驱动因素:资助学术界激进创新的种子?,"CESifo工作文件系列5852,CESifo。
    4. Jian Wang和Bart Thijs&Wolfgang Glänzel,2015年。"学科间性和影响:多样性、平衡性和差异性的不同影响,"普洛斯一号,公共科学图书馆,第10卷(5),第1-18页,5月。
    5. Sotaro Shibayama和Jian Wang,2020年。"衡量科学的独创性,"科学计量学,施普林格;Akadémiai Kiadó,第122卷(1),第409-427页,1月。
    6. 尼古拉·卡莱约尔(Nicolas Carayol),2016年。"正确的工作和工作权利:科学中的新颖性、影响力和期刊分层,"打印后哈尔-02274661,哈尔。
    7. 丰塔纳、马格达和伊奥里、马蒂娜和蒙托比奥、法比奥和西纳特拉、罗伯塔,2020年。"新的和非典型的组合:新颖性和跨学科性的评估,"研究政策爱思唯尔,第49卷(7)。
    8. 弗朗西斯科·夸特拉罗(Francesco Quatraro),2010年。"知识一致性、多样性与经济增长:来自意大利地区的制造业证据,"研究政策爱思唯尔,第39卷(10),第1289-1302页,12月。
    9. Kwon,Seokbeom,2022年。"跨学科知识整合作为技术开发的独特知识来源和资金分配的作用,"技术预测与社会变革爱思唯尔,第181(C)卷。
    10. Boudreau,Kevin J.和Lakhani,Karim R.,2015年。"创新、激励和后续重用的“公开”披露:累积创新过程理论和计算生物学领域的现场实验,"研究政策爱思唯尔,第44卷(1),第4-19页。
    11. 陈士吉(Shiji Chen)、宋延辉(Yanhui Song)、费舒(Fei Shu)和文森特·拉里维尔(Vincent Lariviere),2022年。"学科间性和影响:引文时间窗的影响,"科学计量学,施普林格;Akadémiai Kiadó,第127(5)卷,第2621-2642页,5月。
    12. 吕东清、龚凯乐、阮宣民、程英、李江,2021年。"研究合作是否会影响文章的“中断”?来自神经科学的证据,"科学计量学,施普林格;Akadémiai Kiadó,第126卷(1),第287-303页,1月。
    13. Andrea Bonaccorsi和Nicola Melluso&Francesco Alessandro Massucci,2022年。"探索欧洲研究委员会跨学科研究的前因:主题建模方法,"科学计量学,施普林格;Akadémiai Kiadó,第127卷(12),第6961-6991页,12月。
    14. 罗塞洛、朱利娅和考恩、罗宾和梅丽斯、雅克,2020年。"STEM博士研究成果:性别和种族在监督中的作用,"MERIT工作文件2020-021年,联合国大学马斯特里赫特创新与技术经济社会研究所(MERIT)。
    15. Krafft Jackie&Quatraro Francesco&Colombelli Alessandra,2011年。"高增长公司和技术知识:瞪羚遵循勘探还是开发战略?,"经济与统计系Cognetti de Martiis LEI&BRICK——创新经济实验室“Franco Momigliano”,学院创新、复杂性和知识研究局201114年,都灵大学。
    16. 柯青,2020。"生物医学研究的技术影响:基础性和新颖性的作用,"研究政策爱思唯尔,第49卷(7)。
    17. 安东尼·克里斯蒂亚诺(Antonelli Cristiano),2012年。"强制许可:制度创新的基础,"经济与统计系Cognetti de Martiis LEI&BRICK——创新经济实验室“Franco Momigliano”,学院创新、复杂性和知识研究局2012年7月,都灵大学。
    18. Min,Chao&Sun,Jianjun&Pei,Lei&Ding,Ying,2016年。"测量论文的延迟识别:不均匀加权总和和总引用,"信息计量学杂志爱思唯尔,第10卷(4),第1153-1165页。
    19. 巴伊兰,朱迪特,2008年。"21世纪初的信息计量学——综述,"信息计量学杂志爱思唯尔,第2卷(1),第1-52页。
    20. 马丁·卡尔萨斯(Martin Kalthaus),2020年。"技术生命周期中的知识重组,"进化经济学杂志,施普林格,第30卷(3),第643-704页,7月。

    有关此项目的更多信息

    JEL公司分类:

    • 第123页-健康、教育和福利——教育——高等教育;研究机构
    • O31号机组-经济发展、创新、技术变革与增长——创新;研发;技术变革;知识产权---创新与发明:过程与激励
    • O33号机组-经济发展、创新、技术变革与增长——创新;研发;技术变革;知识产权——技术变革:选择与后果;扩散过程
    • O38号机组-经济发展、创新、技术变革与增长——创新;研发;技术变革;知识产权---政府政策

    NEP字段

    本文已在以下内容中公布NEP报告:

    统计

    访问和下载统计

    更正

    本网站上的所有材料均由各自的出版商和作者提供。您可以帮助纠正错误和遗漏。请求更正时,请提及此项目的句柄:RePEc:nbr:nberwo:22180。请参阅一般信息关于如何更正RePEc中的材料。

    如果您编写了此项目,但尚未在RePEc注册,我们鼓励您这样做在这里。这允许将您的个人资料链接到此项目。它还允许您接受我们不确定的该项目的潜在引用。

    如果CitEc公司识别了书目参考,但没有将RePEc中的项目链接到它,您可以帮助这个表格.

    如果你知道引用这一条的缺失条目,你可以通过以与上述相同的方式为每个引用条目添加相关引用来帮助我们创建这些链接。如果您是该项目的注册作者,您可能还想查看您的RePEc作者服务个人资料,因为可能有一些引文等待确认。

    有关此项目的技术问题,或更正其作者、标题、摘要、书目或下载信息,请联系:负责人(以下电子邮件可用)。供应商的一般联系方式:https://edirc.repec.org/data/nberrus.html.

    请注意,更正可能需要几周时间才能筛选出来各种RePEc服务。

    思想是一个经济学研究论文服务。RePEc使用各出版商提供的书目数据。