是什么决定了政策中是否引用研究文章？

政府如何选择他们用来指导决策的研究证据，尤其是在应对全球危机时？

这场流行病导致了诸如学校关闭等措施，中断了超过15亿学生的学习。世界各地的教育政策制定者在数千份政策文件中讨论了这些措施，其中大多数参考了学术研究。

他补充道：

2020年3月至2022年12月，发表了45万篇关于新冠肺炎的学术论文。综上所述，这几乎是迄今为止发表的所有气候变化研究论文的数量。因此，我们有兴趣了解教育政策制定者如何利用大量文献。

他们的发现使他们感到惊讶。

主要调查结果

1.政策制定者引用“旧”研究论文的频率高于新发现。

巴西尔和他的合著者重点关注2020年3月至2022年12月期间发布的政策，其中包含对教育机构新冠肺炎措施的建议或评论。他们发现75%这些政策中引用的同行评议论文中，有篇是在2020年之前发表的。使用自然语言处理，他们还为48%在那些较旧的研究论文中，有一些较新的文章具有可比的摘要。巴兹尔指出：“平均每篇旧论文有70篇新论文，尽管值得注意的是，有些论文有很多，而另一些论文很少。”

2.政策更可能引用最近的医学研究，而不是最近的教育研究。

仅当20%这些政策中引用的教育研究中，有一项是在2020年以后发表的，这一数字上升到了80%用于医学研究。巴兹尔说：“鉴于在疫情爆发之前没有对冠状病毒进行研究，医学研究结果并不令人惊讶。然而，这一比例对于教育来说非常低。”

3.决策者更可能引用本国的消息来源。

巴兹尔认为，就教育研究而言，这在一定程度上是因为其中很大一部分是本地化的。他补充道：“我们还对美国、英国、欧盟和政府间组织（涉及两个或更多国家的政府间组织）之间的研究使用情况进行了比较分析0.62%所有四个司法管辖区共享了个引文。政府间组织引用的科学文章最为普遍，超过10%所有其他政策的引用。”

4.推断的研究卓越性与政策引用之间的关系较弱。

巴兹尔将论文分为两组：政策中引用的论文和与政策相关但未被引用的论文。对于每一篇论文，他检查了研究卓越性的代表，如领域加权引用影响（FWCI），平均值小时-所有合著者的索引，以及发表该索引的期刊的CiteCore。

他说：“我们发现，平均而言，旧论文在所有指标上的表现都更好。”。“然而，总体而言，指标与政策引用之间的联系相对薄弱。”

巴兹尔表示，这可能是因为在疫情期间，压力不足的政策制定者重新转向“他们已经熟悉的研究或他们信任的人发表的文章”

研究作者还检查了研究可及性和政策引用之间的联系。巴兹尔指出：“有趣的是，我们发现政策中引用的大多数论文都不是开放存取的。”。“我认为这有多种原因；例如，开放存取论文在10年前并不像今天那样流行。”

合并数据以获得新见解

在该项目中，巴兹尔与爱思唯尔的ICSR实验室合作，该实验室是一个基于云的计算平台，研究人员可以使用该平台分析大型结构化数据集，包括支持爱思唯尔解决方案的数据集，如Scopus公司和PlumX指标在新选项卡/窗口中打开-以及与奥弗顿在新选项卡/窗口中打开全球政策文件及其引文数据库。

奥弗顿向作者提供了一份符合他们标准的2452项政策清单。这些政策总共涵盖49个国家，尽管大多数（86%）来自美国、英国和欧盟。

总的来说，这些政策包括大约24000篇学术论文的引用，经过重复数据消除后，这些论文的独特性达到了12000篇左右。巴西尔使用这些论文的DOI（数字对象标识符）将它们与ICSR实验室中的数据集进行匹配，ICSR Lab为他提供了8818篇政策编辑文章的元数据。

在确定了许多政策都引用了较旧的论文之后，巴兹尔和他的合著者希望了解是否有关于政策制定者本可以使用的同一主题的较新论文（2020年后）。

为了做到这一点，他们求助于SciVal主题突出度巴兹尔解释道：“SciVal将每篇论文分配给96000个不同主题中的一个；这些是具有共同智力兴趣的出版物。我们将2589篇被引用的论文与一个主题进行了匹配。然后，我们对它们的摘要进行了自然语言处理，以发现2021年和2022年期间是否有其他关于该主题的类似论文发表。我们发现，48%的旧论文都有关于同一主题的更新文章。”

巴兹尔表示，ICSR实验室的参与对该项目至关重要：“与实验室合作为您提供了灵活性，您可以在获得新发现时轻松地改变或调整您的项目。虽然其他数据集可能包含更高的论文总数，但它们也有局限性；例如，你不仅会得到同行评审的论文，而且很难确定什么是什么。

“通过ICSR实验室，我知道我正在分析的所有论文都是在经过同行评议的期刊上发表的，并且流程良好，因为它们已经通过了Scopus的期刊选择标准。除了标准出版物元数据之外，我还获得了许多其他信息。这使我能够以不同的方式对数据进行切片和切分，并为更精细的分析开辟了道路。”

他补充道：“这个平台不仅仅是关于数据的，它还提供计算能力。考虑到我们正在分析的庞大数据集，这对我们来说很重要。”

爱思唯尔大学的安德鲁·普拉姆博士（Andrew Plume）是国际科学研究院（ICSR）主席，也是巴兹尔研究的主管，他说：“该项目及其对危机时期公共政策制定动态的第一部分见解，对我们这个中心的人来说是有启发的。“他补充道：

下一步-为决策者建立新工具

巴兹尔的目标是继续完善他为这个案例研究建立的模型：例如，通过添加国家之间的比较分析，并继续优化参数。他还计划就气候变化等关键政策主题开展新的案例研究。他解释道：

目标是创建一个管道，一个可以插入不同主题进行分析的模型。我想把它变成一个可能支持两个用例的工具。

第一个是为政府提供资金决策数据。

巴兹尔说：“每年，全球政府机构在研究方面的投资约为6000亿美元。这是旨在帮助改善研究生态系统并造福公众的公共资金。”。“但是，他们在资助什么？决策是如何制定的？这样的工具将为他们提供数据，以指导有关投资于何处以证据为基础的公共政策的决策。”

巴兹尔还认为有机会将其用作诊断工具来准确跟踪怎样研究正在进入政策。“你可以为政策、资助者和机构制定基准。你可以帮助决策者了解他们吸收知识的程度以及需要改进的地方。这对研究人员来说更公平。目前，有一种假设，如果研究人员A的政策引用比研究人员B多，前者的研究可能会更好。但也许研究人员A所在的国家决策者更善于发现和吸收研究。我们可以解释这一点，并提供更具情境敏感性的指标。”