《PLOS发布2018-2023开放科学指标数据》

  • 编译者: 华宁
  • 发布时间:2024-05-31
  • 2024年第一季度PLOS开放科学指标(Open Science Indicators, OSI)结果显示,PLOS文章中的数据存储库使用率和代码共享率在2023年达到新高,而预印本的采用率自大流行病以来已趋于平稳。

    最新的OSI数据集是与DataSeer合作制作的,包括2018年1月1日至2023年12月31日期间发表的所有107 719篇PLOS研究论文,以及一个较小的参照语料库(21 991篇文章)。对于PLOS论文,最新结果显示:

    数据存储库的使用率在2023年第四季度达到新高(31%),高于第三季度(30%),2023年总体数据存储库的使用率达到年度新高(29%),2022年为28%。

    代码共享率在2023年第四季度为16%,第三季度为17%,2023年总体代码共享率达到年度新高(16%),2022年为15%。

    预印本共享率在2023年第四季度降至24%,第三季度为25%,2023年总体共享率为24%,2022年为24%。

    对于参照系统的论文,预印本的采用率在2023年继续上升,在2023年第四季度达到31%。参照系统与PLOS之间的差异主要是由于Springer Nature期刊发表的文章使用了Research Square平台,以及Journal of Medical Internet Research(JMIR)期刊发表的文章使用了预印本服务。

    最近,PLOS和DataSeer以及其他解决方案提供商正在与英国再现性网络(UK Reproducibility Network)合作,在英国机构中开展若干开放研究指标试点项目。此外,PLOS还分享了涉及研究资助者和研究机构的研究成果,试图了解如何或计划如何在其范围内监控开放科学(研究)实践,并为未来的开放研究指标开发提供信息。

    OSI数据集继续被PLOS之外的研究人员和组织重复使用或引用,包括在加拿大科学院理事会2024年2月的一份报告中。此外,PLOS Biology上的一篇编者按利用OSI了解作者采用开放科学的实践情况,并设定了2024年的目标,这篇编者按已被纳入《研究评估宣言》( Declaration on Research Assessment,DORA)资源库。该资源库汇集了各种资料,以促进负责任研究和研究人员评估政策与实践的发展。

    未来,第5个OSI正在准备中,并将在2024年6月发布,用于衡量研究注册(预注册)的普遍程度。

相关报告
  • 《PLOS发布探索开放科学指标的首个数据集》

    • 来源专题:科技期刊发展智库
    • 编译者:刘晶晶
    • 发布时间:2023-01-28
    •   PLOS根据FAIR原则制定了一个衡量开放科学实践的框架,并与DataSeer合作开发了一套与已发表研究文章中可观察到的特定开放科学特征和行为相关联的数值“指标”。2022年12月12日,第一个数据集可以在Figshare上下载。该数据集专注于三个开放科学实践:数据共享、代码共享和预印本发布。 ●开放科学指标和数据集建立的背景   开放科学正在崛起。这可以从开放获取出版选项的扩展中推断出这一点;bioRxiv发文量稳步上升;新的国家、机构或资助者的政策不断推出等。   但我们对开放科学实践的日常现实究竟了解多少?标准是什么?它们在不同的研究领域和地区有什么不同?开放科学实践是否会随着时间而改变?下一个机会在哪里?采用开放科学的障碍在哪里?   为了开始探索这些问题和其他类似的问题,需要就如何定义和衡量开放科学实践达成共识。此外,还需要了解当前开放科学的采用状态,以便随着时间的推移跟踪进展。这就是开放科学指标项目的切入点。 ●如何使用此数据集?   开放科学指标是一种工具,对研究交流中的许多不同情况和问题具有广泛的潜在应用。这些指标可以补充和支持教科文组织开放科学监测框架工作组的目标,并满足希望更好地了解开放科学实践的组织的需求。它们还可以用于评估政策变化的影响,就像最近的OSTP备忘录中所述的那样,在整个文献中,或者在未来,通过研究学科或主题、机构、地区或时间段进行分析。它们可以告诉我们哪些基础设施最常被使用,以及被谁使用。   PLOS希望更好地理解开放科学工具和实践在今天是如何应用的,可以帮助我们识别障碍,理解社区规范,更好地支持最佳实践,并随着时间的推移跟踪变化。   重要的是,我们的目的不是让这些指标被用作对期刊、作者或机构进行排名的工具。对于研究特征的每一项定量评估,都需要衡量其背景和多样性,来保证这些指标被负责任地使用(例如,The Metric Tide and Leiden Manifesto)。因此,我们认为,这些指标最好用作改进工具。 ●这仅仅是个开始   在未来,我们计划用新的数据点、额外的出版年份和与开放科学实践的其他方面相关的新指标来扩展这个数据集。我们感谢您的反馈,以帮助告知未来的迭代。我们需要知道您对收集的数据字段、我们的开放科学指标定义、确定的开放实践以及我们如何在这第一次结果共享中衡量它们的看法。 ●初步观察   在初始数据集中,我们主要分析了来自PLOS发表的论文和其他一些科学文献中的数据共享和代码共享行为。该数据集还包括对预印本发布的观察。   数据涵盖了PLOS在2019年1月至2022年6月期间发表的约61000篇论文,以及来自PubMed Central的6000篇公开研究论文的比较样本(占PLOS论文样本的10%)。   值得注意的是,此数据集仅测量机器可检测的特征。例如,如果一篇文章的作者共享了一个数据集但没有这样标记,则该数据可能不会被标记为“共享”。数据共享的准确率范围从比较样本的81%到PLOS论文的85%。对于代码共享,准确率范围从比较样本的94%到PLOS论文的97%。比较样本的预印本准确率为96%,PLOS论文为94%。我们的目标是使所有指标和内容来源的准确率至少达到85%。要使开放科学指标大规模发挥作用,必须使流程自动化并将这项工作与其他研究人员的工作进行比较,PLOS正在与DataSeer合作以提高这些准确率,这将在每次数据发布时报告。 ●数据存储库使用   虽然共享数据的方式有很多种,但最佳做法是,将其存放在专门构建的数据存储库中。数据存储库提供的好处包括提升数据的可发现性和元数据、稳定的唯一标识符,以及随着时间的推移保持记录完整性。   开放科学指标数据集提供了两种不同的数据共享方法视图: 1.经认证的数据存储库:数据存储在“已知存储库”中,据保守估计,该存储库基于约130个存储库的受控列表。 2.在线可访问:数据可在可识别的URL上获得。这是一个不太保守的数字,其中包括不常用的存储库、机构存储库,以及其他共享数据的在线方法(例如共享文档、实验室网站等)。   通过任何一种衡量标准,PLOS论文比其他地方发表的同类论文更有可能链接到相关的公共数据集。随着时间的推移,PLOS和比较样本中的论文更有可能在确认存储库使用方面呈现积极趋势。 ●代码共享   PLOS论文和比较样本中的论文之间的代码共享率通常接近。总体而言,任何形式的代码共享都没有数据共享那么普遍,部分原因可能是相关性降低(大多数研究成果会生成数据集,但只有一些研究成果被生成代码)。   除了代码共享率之外,该数据集还追踪了代码是否作为研究成果的一部分,从而为采用率和未来潜在采用提供新的见解。PLOS的目标是在以后的文章中更全面地探索这些数据。 ●预印本发布   数据表明,与其他地方发表的同类文章相比,PLOS论文更有可能拥有相关的预印本。总体而言,21%的PLOS 论文有相关的预印本,而对比数据中这一比例为 19%。 ●“开放科学指标”的下一步是什么?   上述内容探讨了三个指标,但还有许多其他方法可以分析数据集来了解开放科学实践。例如,我们可以深入研究数据和代码共享方法,区分作为支持信息 (SI) 或在存储库中的共享。 图 2 PLOS 和比较样本在数据共享、代码共享、预印本发布方面的论文对比情况 图 3 PLOS 和比较样本中的论文在支持信息之外的数据共享逐年变化图 图4 PLOS和比较样本中的论文在代码共享率的对比情况图 ................................................................................................................................................................................................ *所有数据截至2022年6月30日(上半年末);所有比率均按所有分析文章的百分比计算。
  • 《PLOS发布2023年第一季度的文章的开放科学指标》

    • 来源专题:科技期刊发展智库
    • 编译者:华宁
    • 发布时间:2023-09-15
    •   近日,PLOS公布了开放科学指标(Open Science Indicators,OSIs)数据集的最新更新——增加了三个月的数据,相关数据已更新至2023年第一季度末。目前,完整的数据集的时间跨度为从2019年1月1日到2023年3月31日,最新版本包含82,298篇文章的数据。 (1)关于开放科学指标   PLOS开放科学指标是一个大型公共数据集,通过自然语言处理技术来识别和判定已发表文献中重要的开放科学实践,包括整个PLOS语料库以及从PubMed Central提取的较小的比较数据集。目前的开放科学指标专注于三个方面,分别是数据共享、代码共享和预印本发布。 (2)创建开放科学指标的意义   PLOS最初创建开放科学指标的目的是为了更好地了解研究人员和他们的分享行为,以及这些行为在不同群体中的差异。由此,PLOS依据FAIR原则制定了一个衡量开放科学实践的框架,进一步更好地支持研究人员,同时开发新的解决方案,并推进开放科学的使命。   通过公开分享数据,希望也能帮助满足PLOS以外的个人和相关组织的需求。目前,该数据集的用户包括资助者、机构、学术图书馆员等。Figshare上的数据集已经吸引了5600多次浏览和700多次下载,并被多个学术预印本平台所引用。 (3)开放科学指标趋势   在2023年第一季度,PLOS发表文章的开放科学指标趋势与上一季度和2022年整体相比基本保持稳定。