菜单
威利网络

8关于注册报告和研究预注册的回答

8个答案-关于注册报告-研究-注册和为什么两者都重要

克里斯·格拉芙, 威利开放研究团队前科研诚信总监。

2017年12月6日

我们对注册报告有疑问。所以我最近与来自开放科学中心了解一些答案。它们在这里。我们有一个特别的信息给Wiley杂志编辑(我们在最后重复):请与您的出版商谈谈我们的注册报告工具包,这样我们可以共同为您所在社区的研究人员提供此选项。

大卫,谢谢你同意和我们谈话。那么,预注册是怎么回事?

答:。预注册是一个带有时间戳的研究计划,你可以在进行研究后指向它,以向自己和他人证明你确实在测试一种预测的关系。

预注册已经存在一段时间了。几十年来,统计学家一直在警告我们,如果我们只报告一些答案,让数据告知我们正在测试的假设,或者改变结果,那么常用的测试可能会歪曲科学证据。这些问题影响了药物试验的可信度,因此,大约20年来,许多国家的法律都要求临床研究提前明确。然而,类似的工具可以应用于基础研究,为政策提供信息,或影响我们对世界运作方式的理解,因此在这些情况下,预先注册也可以提高可信度。

问:看起来这又是一个研究人员需要跳过的圈……这有什么意义?为什么要麻烦?

答:。对一些人来说,这无疑是工作流程中的一个新步骤。然而,每个人都想得出最严谨和可信的结论。预注册使验证性研究和探索性研究之间的区别更加清晰。验证性研究检验了一个非常具体的预测。探索性研究寻找出乎意料的东西。两者对知识进步都至关重要。然而,在报告探索性的初步结果时,使用我们现有的验证性假设测试工具,可以使研究更容易发表,但这是以牺牲可信度为代价的。解决这一冲突是我们工作的动力。

哦,我明白了。研究作为一个整体可能会带来好处。但是预注册的研究人员有什么好处吗?

答:。个人研究人员有几个好处。第一个来自更好的规划。进入预注册的每一步:编写假设、定义变量和创建统计测试,都是我们在某些时候必须采取的步骤。在数据收集之前制作它们可以改进研究者的研究设计。

我们构建了一个结构化、易于使用的系统,指导研究人员在开放科学框架.由于这是一个全新的步骤,能够提高科学水平,劳拉和约翰·阿诺德基金会将为1000名通过预注册挑战这场教育运动是我们向不熟悉实践的研究人员介绍这一概念的方式。

图像

研究人员的另一个主要好处是与提供注册的报告这些期刊(目前有80种)将在结果公布之前考虑接受该研究。根据1)研究问题的重要性和2)提出的方法回答这些问题的能力,通过同行评审对提交的研究计划进行评估。如果这两个标准都得到了积极的评价,那么论文就可以得到原则上的接受,这是一个无论结果如何都要发表的承诺。

这对研究人员来说是一个巨大的好处。当研究人员有机会真正改进研究时,他们会提前获得对他们提议的研究的反馈。发布的决定是基于工作的质量和研究问题的重要性,而不是结果,这对任何想要发布的人来说都非常有吸引力。

图像

尽管如此,我还是不相信。我们有什么迹象表明研究人员甚至对预注册感兴趣?

答:。临床研究人员已经使用这个过程很长时间了。但对于基础科学或临床前领域的研究人员来说,这是一个新课题。自2013年以来,我们为任何研究人员提供了工具,OSF上的预注册数量呈爆炸性增长。

图像

OSF是为任何领域的研究人员设计的,但在特定学科的注册中心之间,如国际注册中心,都有大量的预注册需求影响评估、和教育。甚至有一些预注册支持者制作的工具可以帮助研究人员简明扼要预注册.

问:现在我们已经到了。那么,期刊在预注册中可能扮演什么角色?

答:。期刊可以采取四个具体步骤,并在透明度和开放性促进(TOP)指南.

  1. 第一种方法是让研究人员披露是否有任何实证研究预先注册。
  2. 下一步将包括预注册方案和报告结果之间的比较,以评估是否遵循了研究计划。链接到预注册至少可以在出版后进行,但我们希望在同行评审期间进行这些比较。
  3. 第三步是要求对任何相关工作进行预注册。发表临床研究的期刊采取这一步,其他期刊也可以。
  4. 最后一步是提供注册报告供研究人员使用。

问:这如何符合“开放研究”议程?

答:。开放科学是将研究的每一部分联系起来,形成最终结果。传统上,我们没有办法轻松共享数据,也没有办法指出有时间戳的研究计划,也没有方法传播印刷期刊附录部分以外的材料。然而,现在我们有了实现理想工作流程的方法,并使科学按照其本意工作。

这对职业早期的研究人员意味着什么?

答:。我认为十年后这个领域将有不同的期望。研究人员将通过指向包含所有基本部分的一系列工作来展示可复制的工作:预先注册的计划、使用持久和唯一ID标识的材料、具有明确描述符的数据集、对这些数据进行测试的代码、显示初步发现的预印本、,最后是同行评审的手稿,指导读者完成完整准确的叙述。

我们现在正处于紧要关头。对于那些处于领先地位的人来说,可以引用完整的工作流。但这也需要人们关心科学和透明度,以便根据学者作品的再现性和透明度做出出版、授予资助和提供工作的决定。

好吧……我相信这值得一试。那么,期刊如何帮助研究人员进行预注册呢?

答:。除了前面提到的四个具体步骤外,期刊可以做很多事情来更快地实现这一点。他们可以使用开放科学徽章让研究人员在采取这些步骤时发出信号。他们可以通过在自己的网站或社交媒体平台上分享有关预注册挑战的新闻,让作者知道预注册的价值。他们可以指出预注册示例指导研究人员。

图像

你可以把我算进去!那么……我们的“带回家”是什么?

答:。无论你是职业生涯早期的研究员还是经验丰富的学者;期刊编辑或作者,你可以采取一些步骤来改进科学。提高认识,与同事交谈,在下一个项目中做一件比上一个项目更开放的事情,在不久的将来,我们将带来巨大的变化。

谢谢,大卫。我们将在您的网站上列出的5种威利期刊中添加新的期刊,以发布注册报告在这里。对于在神经心理学杂志(威利为英国心理学会出版)即将推出注册报告。我们还有更多的期刊在排队。

对于威利杂志的编辑们,这是我们的闭幕词。我们有一个注册报告工具包,可以帮助快速启动注册报告。请与您的出版商联系,我们会安排好一切。谢谢您。

David Mellor(如图)在开放科学中心与研究人员、期刊、出版商和资助者共同开展激励计划。他获得了生态学和进化学博士学位,拥有行为生态学和公民科学背景。在网上找到他推特 ORCID公司.

相关文章