arrow

研究技能

研究中的效度与信度:区别、类型和示例

本文的核心结论是:信度关注测量结果是否稳定一致,效度关注测量是否真正反映了目标概念。一个工具可以具有较高信度却缺乏效度,因此稳定并不等于准确。研究者应根据研究设计检查重测信度、评定者间信度、内部一致性以及内容效度、效标效度和构念效度等指标。提高研究质量的关键,是同时保证测量的一致性和准确性,并在研究方法与结果解释中清楚说明相关检验。

研究中的效度与信度:区别、类型和示例

研究中的效度与信度其实是两个不同的问题。信度问的是:“如果我再做一次,会得到相同的答案吗?”效度问的是:“我是否真的在测量正确的东西?”两者都需要得到肯定的答案。下面,你会看到每一种的简单示例,以及检查它们的方法。

简短答案

信度关注的是一致性。效度关注的是正确性。想象一个浴室体重秤,它会在你的体重上多加 2 公斤。它每次都会显示相同的数字,所以你可以相信它是一致的。但这个数字是错误的,所以它并不准确。

研究中的效度与信度一览

信度 

效度 

主要问题 

结果是否稳定? 

是否测量了正确的内容? 

简单理解 

每次得到相同的结果 

得到正确的结果 

示例 

一把每次都测出相同长度的卷尺 

一把能够测出真实长度的卷尺 

能否单独成立? 

不能,稳定的结果仍然可能是错误的 

严格来说也不能,因为一个结果忽高忽低的测量工具不可能准确 

检查难度 

较容易 

较难 

什么是信度?

把信度理解为稳定性。在相同条件下重复进行测量时,你应该得到接近相同的答案。

你通常会遇到四种常见类型:

  • 重测信度: 对同一批人进行两次相同的测试。两次得分是否一致?

  • 评定者间信度: 两个人对同一内容进行评分。他们是否一致?当人们对访谈进行编码或观察行为时,这一点非常重要。

  • 内部一致性: 在调查中,关于同一个概念的问题是否会得到相似的答案?

  • 平行形式信度: 你有两个版本的测试。它们是否会给出一致的结果?

什么是效度?

效度关注的是是否击中目标。想象一名弓箭手。如果所有箭都落在彼此很接近的位置,这就是有信度。如果它们落在靶心上,这就是有效度。

这里也有几种类型:

  • 内容效度: 你的测试是否涵盖了整个主题?专家通常会检查这一点。这不仅仅是表面效度,表面效度只是看这个测试乍一看是否合适。

  • 效标效度: 你的结果是否与一个可信的外部测量一致?它包括同时效度(它是否与当前已有的测量相关)和预测效度(它是否能够预测未来结果)。

  • 构念效度: 你测量的是不是更深层的概念?比如焦虑或智力?一份指南指出,这是测试效度的主要关注点。

有些指南还把效度分为两组:测试效度,也就是关于测量工具的效度,以及实验效度,也就是关于研究设计的效度。

两者如何联系

它们彼此相关,但并不是一回事。这就是为什么研究中的效度与信度并不是一场比赛。你不需要选出一个更重要的。

关键点在这里。一个测量如果每次都变化很大,就不可能准确,因此你需要信度来支持效度。但只有信度并不能证明任何事情。一个测量可以很稳定,但仍然是错误的。

血压计很好地说明了这一点。假设它每次都会高出 8 mmHg。每次的读数几乎都相同,所以它有信度。但每次读数都有偏差,因此它没有效度。

一份指南补充说,效度比信度更难检查,而且也更重要。毕竟,研究的整个目的就是捕捉真实的东西。

如何提高两者

要提高信度:

  • 每次都保持相同的条件,包括相同的说明和相同的环境。

  • 对任何负责评分或编码数据的人进行培训。

  • 编写清晰、简单的问题。

要提高效度:

  • 尽早考虑它,在收集任何数据之前。

  • 在可以的情况下,使用早期研究已经测试过的测量工具。

  • 请专家检查你的问题是否涵盖了整个主题。

你应该检查哪一种类型?

你的情况 

检查这一项 

你在不同时间重复进行同一项测试 

重测信度 

由不同人员对你的数据进行评分或编码 

评分者间信度 

你用一组调查问题来测量同一个概念 

内部一致性 

你有两个版本的测试 

平行形式信度 

你想知道测试是否涵盖了整个主题 

内容效度 

你可以与一个可信的测量标准进行比较 

效标效度 

你测量的是压力、动机等抽象概念 

构念效度 

应该在哪里写这些内容

正在写论文或研究报告?你可以在多个部分讨论研究中的效度与信度,比如你的研究方法和讨论部分。只需要清楚说明你采取了哪些措施来保证两者。

常见错误

  • 认为稳定的结果就代表正确的结果。

  • 只报告信度,而忽略效度。

  • 混淆表面效度(看起来是对的)和内容效度(真正涵盖了主题)。

  • 在不同轮次的测试之间改变环境或说明。

  • 在已经存在经过测试的问卷时,又重新设计一份全新的问卷。

本指南无法告诉你的内容

这是一个面向初学者的概述。适合你研究的方法和判断标准取决于你的研究领域以及导师的要求,因此请先查看这些要求。

常见问题

效度和信度有什么区别?

信度是一致性。效度是准确性。

一个测量可以有信度但没有效度吗?

可以。一个总是显示体重偏高的体重秤很稳定,但它是错误的。

哪一个更重要?

效度才是真正的目标,但你需要信度来支持它。两者都应该报告。

这也适用于定性研究吗?

部分适用。评定者间一致性可以检查不同人员对访谈进行编码或观察行为时是否保持一致。

最后的想法

从两个简单的问题开始:它是否稳定,以及它是否正确?一旦你理解了研究中的效度与信度如何相互配合,你就能选择更好的测量方法,并更有信心地解释你的结果。