SPARC Europe宣布将与洛林大学协调一项新倡议“开放科学监测倡议”。开放科学监测倡议(OSMI)由法国夏里特医学院、法国高等教育和研究部、国家信息与自动化研究所(Inria)、PLOS 和联合国教科文组织共同发起,致力于为监测开放科学提供一个通用的全球框架。
OSMI的协调委员会由SPARC Europe的Vanessa和Andrea以及洛林大学研究数据和文献计量支持服务负责人Laetitia Bracco组成。委员会的目标是在践行这一新兴倡议时为一系列政策制定利益相关者提供必要的支持,以确保政策转化为行动。
发展单一框架来监测开放科学的任务响应了2020年开放学术基础设施原则和2021年联合国教科文组织关于开放科学的建议。OSMI还与PathOS开放科学指标手册和巴塞罗那开放研究信息宣言保持一致。
OSMI在与联合国教科文组织开放科学监测工作组协商后,已经制定了开放科学监测的草案原则。
草案原则现对所有人开放审查,具体内容如下:
在全球范围内,开放科学政策正逐渐被各国政府、大学、研究机构和资助机构采纳。为了衡量开放科学在不同地区的进展,出现了许多监测倡议,但这些倡议往往存在差异性、不可比较和难以跨区域应用的问题。因此,开放科学监测原则的目的是建立一套最佳实践和指导方针,以鼓励对开放科学监测结果的汇集、比较和重用。
该倡议旨在帮助国家政府、研究机构和国际组织等利益相关者建立自己的监测工具,同时考虑到研究和政策多样性所需的监测方法的多样性。它还旨在建立一套广泛适用的标准,这些标准可以被国际组织、国家政府、研究机构、资助机构以及数据或相关服务的供应商采纳。这些原则来自于在各自领域内监测开放科学实践的组织,但并不局限于任何特定的监测服务或软件解决方案。
文件中定义了一系列广泛且高层次的原则,旨在以一种务实的方法监测向开放科学的全面转型及其对研究生态系统和社会的影响。文件的范围涵盖了所有类型的研究结果及其对学术生态系统的影响,并可能在未来扩展到全面监测开放科学政策。文件的目标是通过为选定的指标系列提供技术规范来补充,这些指标系列包括出版物的开放获取、临床试验结果的共享、研究数据的开放或共享、在开源许可下发布研究中使用的软件、开放科学成本和学术影响的估计、开放科学社会影响的估计、研究社区价值观和信仰的研究、公民科学的演变、开放引用的研究以及开放科学方法对日常研究流程影响的研究等。
文件强调开放科学监测应依赖于开放、透明和可复制的方法,并遵循共享和公认的原则。
在“相关性”内容下,草案提到的原则有:
? 适用性和明确性:指标必须对于手头的特定监测任务有意义、适用且相关,其范围应明确界定。指标适用性的任何限制或约束都应明确说明并清晰传达。
? 对公共政策有意义:指标应可供各种利益相关者设计自己的开放科学政策,促进基于证据的决策和行动,适应其特定情境。指标旨在为公共政策提供信息,不应用于评估个体研究者,如在资助申请、招聘或员工晋升中。
? 共创性:指标的采用应尽可能地基于利益相关者的积极参与和自愿参与。应通过公开咨询和对话,与研究政策制定者、研究执行机构、研究资助机构和研究社区共同创造指标。利益相关者应有权选择不采用指标。
? 包容性:指标应考虑学术领域、社会环境和语言的多样性。
? 成熟度:每个指标的成熟度需要明确。实验性方法应明确标记。应在公开发布新指标前后,估计新指标的成熟度。
? 不同情境的指标工具箱:为了降低组织在建立开放科学监测系统时的复杂性并减少实施工作,目标应该是开发一套适用于不同情境的指标工具箱。这种方法使得各利益相关方能够根据他们特定的需求和条件,从这些工具箱中挑选合适的指标。
? 可比性:指标应旨在促进机构、国家、地区和研究领域之间的可比性。在实践中努力实现可比性,同时承认任何指标的适用性限制,是监测工作的重要部分。
? 更新指标:提供定期更新的指标。
在“透明度和可复制性”内容下,草案提到的原则有:
? 面向公众的沟通:需要向各方清晰传达从指标、生成的数据和可视化中得出的结论。
? 流程和方法论的公开文档:应提供公开可用的文档,描述监测项目所做的数据收集、数据来源、处理和实施选择。
? 明确的数据来源:整个数据流程应该是透明的和开放的,严格记录每个数据点的来源和许可证,以提供清晰的由来信息。
? 开放的输出数据:输出数据应该是开放的,新产生的知识和数据应在开放许可下分发,特别是涉及版权保护的文本和数据挖掘,输出应遵守版权规则和隐私保护。
? 包含FAIR和CARE原则:输出数据应尽可能符合FAIR原则(可发现、可访问、可互操作、可重用)和CARE原则(集体利益、控制权、责任和伦理)。
? 抽样:在无法获得完整数据的情况下,可以采用随机抽样和其他成熟的统计技术、插值和透明启发式方法,只要这些技术有适当记录即可。
? 开源软件:用于数据获取和处理的软件应该是开源的,有版本记录,并在促进合作和贡献的平台上发布适当的文档,以促进长期开放合作和重用。
? 标准化指标:核心指标使用公开和集体定义程序进行标准化,每个指标都公开记录在既定规格文档中。
? 指标质量的透明度:应评估每个指标的准确性(如精确度和召回率)、覆盖范围和及时性,并在合适情况下公开。
? 设计上可重用:监测结果和指标成果应通过API和批量下载功能访问,定期更新。
在“自我评估和负责任的使用”内容下,草案提到的原则有:
? 自我评估:实施这些原则的倡议被邀请根据本文件评估他们的监测工作,并将评估结果公开。
? 监测以促进改进:监测应用于激励而非惩罚缺乏实践的行为。
? 持续评估监测倡议:由于任何指标都可能促进不当行为的尝试,需要对指标和方法论进行持续评估,以及实践可能向非预期方向的潜在转变。
? 适应性:随时间演变,变更和发展应该是透明的,并公开记录。
? 避免排名:这些指标不得用于创建排名。