单一研究结果的局限性
一些新闻标题常常以“科学表明……”或“最近的一项研究证明……”开头,表明对科学证据的重视。然而,克莱门等人表示,没有得到足够重视的一点是,任何研究都有权衡和局限性,当人们阅读此类研究文章时,很难理解背景知识。显然,当一系列专业性强、技术性很强的知识和信息传播给政策制定者和相关受众时,需要进行一定程度的转化。在这个过程中,从事研究的学者可以用各种方式解释自己的研究成果,但这种方式可能会造成更多的混乱。
例如,在一个司法案件中,经济学家们对同一话题产生了分歧。在学生公平录取组织诉哈佛大学案中,学生公平录取组织指控哈佛大学持续歧视亚裔申请者。加州大学伯克利分校和杜克大学的两位经济学家在法庭上作证,在提供论据的过程中,使用了不同的方法得出了相互矛盾的结论,让公众和法官难以辨别真假。克莱曼表示,学术界也有不法之徒,一些研究结果可能是基于捏造数据的谎言。无论如何,个别研究结果很难被理解和解读,读者很难有能力去评价每一篇学术文章。在这种情况下,元研究成为学术界的必然选择。
元研究是对研究本身的研究
澳大利亚昆士兰科技大学公共卫生与社会工作学院教授阿德里安·巴内特在接受本报记者采访时表示,元研究又称元科学整合科学,即关于研究的研究、关于科学的科学。“我们能不能做更好的研究?当前的研究存在什么问题?”学者们可以通过元研究的方法回答这类反思性的问题。斯坦福大学元研究创新中心联席主任约翰·帕特里克·约安尼迪斯表示,元研究是对研究本身的研究,包括研究方法、报告、可重复性和评价等。随着科学研究的不断发展,知识创新的机遇与科学研究的完整性和有效性的挑战并存。元研究用跨学科的方法来研究、促进和捍卫科学的稳健性。
伊奥尼迪斯认为,虽然大多数科学家都有自己的专注领域,但某种程度上,每一位科学家都是元研究者,而元研究的鸟瞰视角与专注于特定领域的研究方法密不可分。根据伊奥尼迪斯的经验,新研究的灵感往往来自于在特定领域进行研究时遇到的问题或错误。当该领域的元研究指出具体问题并提出建设性批评时,研究人员更容易改进和提升。科学仍然是人类进步的主要动力,但如何最好地资助科学活动和激励高质量的科学研究仍然是一个需要回答的话题。放任研究实践面临的偶然性、偏见和方法论无知是一种非常低效的行为。因此,学术界需要元研究来避免浪费精力并进一步优化资源。元研究可以帮助传播有效的研究实践并摒弃无用的结果,大大提高有用科研成果的产出和转化率。
元研究有很多优点
元研究考察的是知识产生的过程和规范,其对象是已经发表的研究成果。元研究在很多方面成为科学研究的关键。例如,宾夕法尼亚大学沃顿商学院教授亚当·格兰特在《反思》一书中强调,在理想世界中,每一个洞察都将来自元研究。事实上,一些引用率高的文章中就包含元研究,因为这些文章整合了大量的文献,更容易被学者引用。克莱门等人从以下三个方面阐述了元研究的优势。
元研究是一种高层次的研究整合。科学进步的步伐缓慢而渐进,这种步伐是为了保证研究结果的相对稳定性。然而,其结果是任何研究都非常详细和集中。面对这样的研究,读者如果不经过一定的语境变换,很难理解如此详细的结果。元研究可以从更高的视角出发,尽量覆盖很多领域,以确保文章能保持整体性和普遍性。 等人合作进行了一个元研究项目,系统地评估了 77 篇声称使用了工具变量统计技术的研究。该研究关注如何将工具变量纳入科学研究以提高结果的稳健性,并采取了循序渐进的方式整合所有相关内容。这种广泛的覆盖面确保了研究结果及其影响的可识别性,这对于非学术领域的读者来说非常重要。
元研究是平衡的。同行评审是期刊编辑邀请具有专业知识的学者对论文的学术质量进行评审并做出判断的过程。这一过程有助于消除一些不精确或误导性的研究,提高科研质量。但为了在同行评审中表现更好,研究人员会非常积极地展示即将发表的结果,导致许多研究被迫只展示一个特定的方面。在这种情况下,研究结果的独特性和研究人员的自信比开放和谦逊等特质更受重视。元研究的优点之一是它具有高度的描述性,不专注于任何特定的领域。研究人员通常试图对某个领域的现状给出一个平衡的概述。例如,在他们对工具变量的回顾中,等人讨论了该方法如何在各种情况下运作,并最终将结果呈现得尽可能详细和具有代表性。这样,元研究就成为实现科研平衡的最佳方法之一。
元研究具有反思性。科学家通常被称为专家,然而,这个头衔可能会掩盖科学家也是人,有缺点、偏见和盲点。个人容易犯错,因此科学之路往往充满停顿和曲折。不幸的是,在报道科学家的发现时,这一事实可能会被忽略。因此,当元研究从更广泛的视角比较各种研究方法和研究结果时,读者可以通过关注科学共识,更容易识别各种研究中的不一致和弱点。元研究要求研究人员具有批判性整合科学,专注于揭示某一领域的不足之处。好的科学应该是反思性的,学术界不应该只关注单个专家学者的观点或论点,而应该重视能够推动科学进步的集体智慧。
扩大元研究的范围
元研究是一个非常新的领域,是近几十年才发展起来的。最初被元研究吸引,是因为他接触到了英国牛津大学前医学统计学教授Doug 等人关于元分析的研究成果。元分析是一种定量分析方法,它利用一些测量和统计分析技术,对已有的研究进行总结和评估。等人研究了卫生研究领域的研究人员如何呈现研究结果以及它们之间的差异,并制定了指南,以增强研究结果报告的透明度和准确性网校哪个好,提高已发表研究文献的价值和可靠性。对元分析做出了开创性的认识,预见了研究整合的重要作用。目前,元研究主要在欧洲和美国受到关注。认为,这一重要的研究领域应该得到广泛推广。
此外,元研究应该涵盖整个研究过程。 解释称,研究人员如何获得资助、提出问题、开展研究、报告研究、同行评议研究以及如何将研究转化为政策和实践都应纳入其中。“元”意味着研究人员需要退后一步以获得更广阔的视角,研究过程的任何部分都可以也应该被研究。作为一名统计学家, 最感兴趣的领域是如何运用统计学。他发现现实中许多研究人员甚至不理解 P 值和样本量计算等基本概念。因此,研究人员有必要放慢脚步,从元研究的角度研究统计方法,避免在之后的数据收集等其他任务上浪费时间。
当然,元研究也存在一些风险和不足。美国东康涅狄格州立大学心理学助理教授 -(-)表示,研究者存在的一些偏见可能会影响元研究的效度和信度。首先是出版偏见,比如统计检验意义越强的文章越容易被发表。其次是搜索偏见,使用不同的关键词或策略搜索数据库,会产生不同的搜索结果。最后是选择偏见,研究者需要从大量的研究中筛选出所需要的数据,而不同研究数据的可信度和质量可能有所不同,这会影响元研究的权威性和科学性。这些问题都应该引起研究者的重视,以便更好地促进元研究的发展。