利用早期获取全球繁荣研究数据衡量注册报告的影响

立即注册

概述

r3ct GFS流程图1发布前承诺设备,如预注册注册报告(RR)已被开发为减少出版偏见、出版前偏见(例如p-hacking和HARKING)和其他可疑研究实践的方法。他们是否达到了这些目的,以及这些干预措施是否会产生意想不到的后果,仍然是积极研究的领域。

开放科学中心(COS)将通过对注册报告进行随机试验,结合受控数据发布,为这一不断增长的证据体系做出贡献全球繁荣研究(GFS)审查预注册和注册报告对研究管道的影响。

如果研究人员提交预注册或注册报告,他们通常可以提前访问GFS数据。在本试验中,我们要求参与者随机分配他们选择的数据访问路径(预注册或RR)。随机化后,研究人员将正常完成GFS研究项目,即在分析数据之前向GFS注册中心提交预注册或第1阶段注册报告。此外,参与者-以及任何提交给GFS注册的人-有机会通过预注册和/或注册报告分享他们的经验和信念,并通过一系列定期调查记录关键项目成果。  

这种自然主义的试验设计使我们能够观察注册报告和预先注册的研究项目的研究和出版过程,并将帮助科学界了解这些开放科学实践的优势、局限性和意想不到的后果。

 

为什么要参加审判?

预注册和注册报告可能会改变研究的进行方式。 

参与这项试验是一个在受支持的环境中了解这些机制并为其证据库做出贡献的机会。观看下面的网络研讨会了解更多信息。

观看此网络研讨会了解更多关于随机试验以及如何参与的信息。 

 

什么是全球繁荣研究(GFS)?

这个全球繁荣研究(GFS)是一项为期5年的纵向数据收集和研究合作。这项耗资4340万美元的计划包括为来自22个地理和文化多样性国家的约240000名参与者收集数据,并衡量在6个领域繁荣生活的因素:

  1. 幸福和生活满意度
  2. 心理和身体健康
  3. 含义和目的
  4. 性格和美德
  5. 密切的社会关系
  6. 物质和政治稳定

每年将发布一波数据,每一波数据将在首次受控发布一年后公开访问。然而,研究人员可以通过向COS提交预注册或第1阶段注册报告,在波浪发布后立即访问波浪。了解有关GFS的更多信息

 

时间表

研究人员现在可以填写以下内容参加这项试验形式。没有报名参加试验的截止日期,参与者可以申请获取随后的GFS数据。

GFS样本数据将于2023年8月中旬发布,第一批数据将于2020年下半年提前发布

 


这项研究由美国国家科学基金会(2152424号拨款)资助已由弗吉尼亚大学机构审查委员会批准(#5976)。

试验如何进行

r3ct GFS 2

本试验分为两部分。第一个也是主要的组成部分是随机试验,参与者被随机分配,向GFS登记处提交预先登记或计划分析的第一阶段登记报告。第二部分是定期调查,提交给GFS注册的任何人都可以参加,包括那些不属于RCT的人,该调查记录了出版渠道和项目成果,以及预注册/注册报告的信念和经验。

 

谁应该参与?

研究人员:

  • 希望尽早访问GFS数据集,但尚未决定是进行预注册还是注册报告
  • 想要尝试注册报告,但不确定从哪里开始
  • 愿意参与越来越多的承诺前设备(如注册报告和预注册)证据收集

每个参与者只能在该RCT中注册一个项目。

 

工作流程

  1. 填写报名表这将包括对试验的知情同意和基线人口调查。
  2. 接收随机分配的任务。这将在通过电子邮件填写表格后不久发生。对于那些不熟悉预注册或注册报告的人,将提供资源。
  3. 将您的提交上传到GFS注册表(预注册或注册报告)。分配给预注册部门的人员将向GFS注册中心提交其对GFS数据集的计划分析的预注册,分配给注册报告部门的人员则将向注册中心提交第1阶段注册报告(使用相同的预注册模板)以及他们选择的杂志。(注意:您是在请求访问GFS数据集之前,需要从日志中接收主管验收(IPA)。然而,在检查数据之前,我们强烈建议您在收到IPA之前检查您的期刊关于访问数据的指南)。
  4. 获得数据访问权限后,请正常执行项目。
  5. 参与季度调查,了解您的项目状态以及您在研究/出版过程中的经验和信念。如果您将项目标记为已完成或表示不再希望参与调查,则调查期结束。

如果您已经向GFS注册中心提交了申请,或者对随机调查不感兴趣,但仍然希望参与到不断增长的承诺前设备证据收集中,您仍然可以选择定期调查。所有GFS研究人员在将提交的资料上传至GFS注册中心后,将通过电子邮件收到邀请。

 

作者

如果您同意随机选择并完成以下所有要求,您将有资格成为本研究最终稿的合著者:

  • 接受随机分配给预注册或注册报告部门
  • 满足GFS的所有数据共享要求
  • 保持对其工作状态查询的响应能力,至少完成4项调查
  • 参与本试验结果的后续书写和/或编码任务,总共需要2-10小时

参与者可以随时退出试验,包括放弃分配和/或停止参与调查。退出试验不会以任何方式影响他们对GFS数据的访问。

有关审判的问题可以直接向诺亚·哈伯咨询(noah@cos.io)和梅西·戴利(macie@cos.io)

如何注册

随机分配

填写这个表格参加审判。表格需要大约10分钟才能完成,其中包括基线调查和知情同意书。填写完调查后,您将通过电子邮件收到随机分配的任务。

调查

所有GFS研究人员将被邀请在向注册中心上传提交材料后通过电子邮件参与我们的调查。

即使您已经向GFS注册中心提交了申请,或者您对参与试验不感兴趣,您仍然可以参与定期调查。

常见问题解答

预注册报告和第一阶段注册报告之间的区别是什么?

A类预注册和第1阶段注册报告(RR)密切相关。这两种机制都是在科学研究进行之前记录你的假设、方法和/或分析的一种方式。

第1阶段RR通常在收集或分析数据之前提交期刊审查。一旦第1阶段RR经过同行评审并获得原则上的认可,作者就可以访问他们的数据并进行分析。

相反,预注册不进行同行审查。当你预先注册你的研究时,你只是在学习之前指定你的研究计划并将其提交给注册中心。

我可以从GFS数据集中获取样本数据并继续参与本试验吗?

对!您可以访问样本数据以告知您的研究项目,并可以在查看样本数据后选择参加随机试验。有关如何访问示例数据集的更多信息,请单击在这里

如果我被随机选入注册报告部门,如果事情无法解决,我会被强制查看注册报告吗?

不!我们只是要求您认真尝试通过项目的注册报告途径。如果你选择放弃这一途径,而是通过预注册或其他途径继续你的项目,那没关系!本试验主要是通过注册报告途径获得经验和时间表,您的经验(无论是什么)是本试验的主要结果。

在我可以访问GFS数据集之前,我的第一阶段注册报告是否需要获得期刊的原则认可(IPA)?

不需要,您不需要收到IPA,COS就可以授予您访问数据集的权限。只要您已将阶段1 RR提交给日志并满足所有其他GFS要求,您就可以被批准访问。

然而,在大多数情况下,期刊限制研究人员在获得IPA之前访问其注册报告的数据。因此,如果您提交了阶段1 RR,我们强烈建议您在请求访问或查看GFS数据集之前,联系您正在合作的期刊,讨论他们在授予IPA之前查看数据的规则。

哪些期刊接受注册报告?

查看接受注册报告的期刊的精心策划(但并非详尽无遗)列表在这里

注册报告路径比预注册路径更费力吗?

预注册和注册报告都改变了典型的研究过程工作流程,尽管不一定要增加更多的工作。这两种机制都指导研究人员在进行分析之前彻底规划他们的项目,这意味着大部分工作必须在研究开始时进行,而不是在研究过程的后期。

注册报告通过要求在分析数据之前对项目的假设、方法和/或分析进行审查,进一步改变了典型的工作流程。所有提交发表的论文都必须经过审查,在RR过程中,这一步骤比通常的做法更早。这可能会减少出版的总时间,因为一旦收到IPA,研究人员不需要花时间提交多份期刊,直到他们的手稿被接受。然而,目前我们还没有强有力的证据证明注册报告如何影响时间表,这是我们希望在本研究中获得的关键见解之一。

作为本次试验最终稿的合著者,有什么要求?

本项目的合著要求如下:

  • 接受随机分配给预注册或注册报告部门
  • 满足GFS的所有数据共享要求
  • 保持对工作状态查询的响应能力,至少完成4项调查
  • 参与本试验结果的后续书写和/或编码任务,总共需要2-10小时

参与者必须完成上述四项要求,才能获得合著资格。 

参与者多久接受一次调查?

参与者将每三个月接受一次调查,直到他们的项目结束,或者直到他们表示不再愿意参与。

我有多个合作者在这个项目上工作。我们每个人都需要单独参加这个试验吗?这对合著资格有何影响?

本次试验旨在从ICMJE的作者指南

我们要求每个项目都有一个人注册并参与本研究。理想情况下,这将是向GFS注册表提交的个人。注册并参与试验的个人,只要符合合著的所有要求,就有资格成为本试验最终稿的合著者。这将在个案基础上进行审查。