我我信息网
随着最近一次关于如何监测开放科学实践的咨询接近尾声，Louise Bezuidenhout、Paola Castaño、Sabina Leonelli、Ismael Rafols和Andrea Vargiu认为，如果监测框架旨在捕捉开放科学作为一种实践的最广泛维度，那么它们应该包括案例研究。开放科学正在从理论转向实施，目前有大量的努力旨在监测其进展。
最近，PLOS、SPARC Europe和教科文组织合作的开放科学监测倡议（OSMI）发起了一项关于监测开放科学一般原则的全球协商（他们将在12月4日的公开会议上讨论其调查结果）。我们认识到教科文组织《开放科学建议书》和指导此次磋商的OSMI原则的重要性，但这些原则究竟应该如何实施？正如教科文组织《开放科学展望》所报告的那样，目前的大多数监测都侧重于跟踪开放研究产品的创建情况。
在实践中，这主要意味着计算公开出版物。即使这些监测方法包括获取期刊文章以及重复使用数据集和软件，它们也为教科文组织建议书中概述的更广泛目标提供了狭隘的视角。目前的大多数监控都集中在跟踪开放研究产品的创建上。在实践中，这主要意味着计算公开出版物
然而，人们普遍认为，开放科学涉及各种活动、参与形式和与社会行为者的对话，这些活动、参与和对话超出了产出范围（图1）。
在整个科学体系中，这些参与和对话的过程采取了不同的形式，在不同的规模上运作，并且经常以非正式的方式发生。忽视开放科学的这些方面可能会产生不正当的激励，就像它们在现有的研究评估系统中所做的那样。我们建议，由于开放科学意味着研究体系的更广泛转型，它也应该意味着其监测的转型。为此，我们认为基于案例的监测开放科学实践的方法至关重要。图1：自开放科学参与者以来，来源：开放科学展望1（2023）。图标：
甘孔莱，米罗斯拉夫·库尔多夫，阿德里安·科奎特，韦恩·纳夫斯·塞耶，由The Noun Project提供，CC BY 3.0*
开放科学监测系统的案例研究
案例研究调查了现实生活中的现象。已经有几项努力通过案例研究详细记录了现有的开放科学实践和倡议，其中一些已经发表，另一些正在开发中。它们在开放科学监测中的使用有两个关键优势。
首先，它明确指出，监测的目的不是竞争或基准测试，而是学习如何改进研究系统。其次，由于案例研究可以确定影响的关键过程和途径，因此可以描述特定的开放科学形式为什么以及如何产生特定的用途和益处。案例研究可以确定影响的关键过程和途径，从而可以描述特定的开放科学格式为什么以及如何产生特定的用途和益处。
这些解释克服了当前监测器的一个主要盲点，监测器描述了科学系统的输出，但无法解释这些输出是如何产生的，如果被使用，或者它们是否有助于取得积极的科学或社会成果。更好地理解结果对于做出基于证据的决策至关重要，即在特定情境的系统中投资资源，避免“一刀切”的方法。然而，案例研究不需要排除所有其他方法。
调查也可以作为对现有方法的补充监测，例如在共享研究材料、公开同行评审、政策使用、与非学者的接触、诚信或更广泛的开放科学观念和习惯方面。研究评估中的案例研究学习
案例研究以前曾用于国家监测和评估工作，正是为了评估不仅研究产品，而且影响过程和途径都被视为重要的现象。最突出的例子是英国的卓越研究框架（REF），该框架使用案例研究来评估研究影响。
其他例子包括澳大利亚的评估影响（EI）演习、香港的研究评估演习（RAE）和意大利的国家高等教育和研究评估机构（ANVUR）。虽然案例研究已被证明在评估研究影响方面是有效的，但也有缺点。大规模的案例研究方法既耗时又资源密集。由于它们的背景特异性，它们的经验稳健性受到质疑，它们的普遍性也是如此。进一步的挑战与案例研究的策划有关。为了使这些不仅仅是活动的证明，它们需要被负责任地策划和搜索。
因此，需要制定FAIR数据标准和受控词汇表，以促进跨案例搜索。案例研究已被证明在研究评估中很有用，这些评估涉及过程和结果，并面临着一小部分指标无法捕捉到的各种贡献
尽管存在这些局限性，但案例研究已被证明在研究评估中是有用的，这些评估涉及过程和结果，并面临着一小部分指标无法捕捉到的各种贡献。相反，重要的是要记住，使用定量指标也是特定选择的结果。
虽然案例研究可能不像定量指标那样具有普遍性，但它们捕捉到了关键过程和途径。案例研究越多，我们就越能在无法分析甚至无法识别的领域创造出共同的线索和集群。基于案例研究的开放科学监测概述
在我们提交给OSMI的咨询中，我们提供了一个模板，说明开放科学的案例研究方法在实践中可能会是什么样子。目标是将下拉菜单形式的多项选择答案与开放式叙述相结合，各种组织或倡议可以在其中描述他们的实践和挑战。
这一叙述方面是核心，因为它为参与填充模板的人员提供了一个机会，让他们反思导致具体结果的活动和挑战。这些反思对于掌握定量方法难以理解的开放科学中不同类型的参与和参与至关重要。通过对这些案例的专题分析，还可以整理这些数据，以跟踪各级活动。因此，开放科学监测倡议提供了一个独特而及时的机会，使衡量和理解当前向开放科学范式转变的方式多样化。
Sabina Leonelli目前正在领导该模板的试点，该模板使用了多元化研究环境开放科学哲学项目的案例研究。该项目围绕案例研究构建，研究数据作物管理、公民科学、全球医疗保健、数据密集型空间生物学、生态学以及大型数据库和/或公民科学倡议的治理模式等实践。我们的目标是使用这些案例研究的结果来填充模板并进行跨案例分析，以跟踪开放科学实践在这些环境中的影响，并如上所述，确定产生这种影响的过程和途径。
开放科学监测可以而且应该通过纳入案例研究来丰富。如果正如人们普遍承认的那样，开放科学的目标不仅仅局限于开放产出，那么我们需要一个能够承认这一点的监测框架。因此，开放科学监测倡议提供了一个独特而及时的机会，使衡量和理解当前向开放科学范式转变的方式多样化。本博客上生成的内容仅供参考。本文仅代表作者的观点和意见，并不反映社会科学影响博客（博客）或伦敦政治经济学院的观点和看法。
如果您对在下面发表评论有任何疑问，请查看我们的评论政策。
