理解validity和reliability有助于做好essay reference引用
发表时间:2018-02-08 10:18:04 作者:zhouzhengmao 阅读:190次
Validity侧重在measurement当中的“准确性”(accurate assessment)。
怎么才知道一个研究的测量是否具有较高的validity呢？
首要的标准是看其研究测量（measurement）是否符合和适用于其要去检验的、提出的研究问题和研究目的-----research的总体目的应该是我们设计整个研究的统领和导向，偏离了目标的测量就是缺乏validity的测量。
要看知道一个研究是不是缺乏validity，我们具体可以看它的以下几点：
①Face validity （表面效度)：这个是最基本的一种validity，研究者问的问题从表面上来看跟他的研究目的是否相关呢？----想买萝卜的人到处问黄瓜的价格吗？想说喜欢你的人说出口的是“今晚的月亮真圆啊”—啊，效度太差LOL
②Content validity (内容效度): 一个标准定义是“The degree to which a measure covers the range of meanings included within a concept”---你要检验的概念被完整的涵盖了吗？比如哈，上面最后一个例子，想研究"蔬菜销量和经济健康指标关系"却只测量了菠菜销量的，这就没有涵盖“蔬菜”这个概念的全部，缺乏内容效度。
③Criterion-related validity（效标关联效度): "The degree to which a measure related to some external criterion”---比如，使用大学生的GRE分数来测量他们的学习能力，这是不是一种有效度的测量呢？GRE分数能够完美看出一个人的学习能力吗？再比如，要测量一个人对宗教的信仰程度，我使用这个人每周去参加宗教性服务的次数，这又是不是有效度的测量呢？
④Construct validity （结构效度): 访谈或者问卷的问题真的测的是你要研究的某个具体概念吗？还是其实测了另一个概念？社会科学中有很多概念是非常主观和接近的，比如，你问的某个问题是测了一个人的自信度(confidence), 还是自我效能 (self-efficacy)？你对某两个人之间彼此态度的问题测出来的是他们的信任度(trust)还是友谊(friendship)?
上面我们说完了validity之后，再来看下另一个概念是“reliability”（信度）,一个好的研究测量必须既有validity又有reliability。 如果说validity关注的是你是不是能正中靶心，那么reliability关注的则是你在多大程度上能总是命中靶心---即一个测量的稳定性、一致性（consistency）
一个研究，可能具有较高的效度却没有信度；可能具有较高的信度却没有效度。我们的目标是两者都照顾到。类比关系请见下图（图片来自网络）。
Reliability(信度）到底是什么呢？
社会研究中的measurement也一样需要reliability。 比如吧，你发明了一个测量智商的一套问题，共100个问题，交给一个小学的班级里50名学生测试他们的平均智商。第一次测量结果是平均75分；隔了一个月，你又去同一个班测了一次，这一次得出的结果是55分；隔了一个月你又去测了一次，这次120分......------如果假设其他因素都被控制不变，这三次差距如此之大的结果说明你设计的这套问题的reliability非常低，你要是用它来去测别人智商，得到的结果总是没个准，你说这样的结果你要是用在论文里，别人应该相信吗？自己良心会不会疼？
那你可能会问了，在社会科学里存在那种完美reliability的measure吗？比如说，像一个正常的体重秤一样总是能得出百分之百稳定结果，心理学、管理学、或者社会学的测量, 存在这么完美的稳定性吗？
答案是，几乎不存在。比如测自信心高低，不同的学者可能会使用不同的问题术去测量一个人的自信心，慢慢的就会有一套大多数学者承认的测量指标，如果你研究的东西已经有了比较成熟的这一套scale，你就应该去使用或者至少要借鉴, 而不是完全从零开创一套全新测量。
既然不存在完全完美reliability的测量，用什么指标知道一个measurement的reliability有多好呢？ 最常用的指标是Cronbach’s Alpha, range在0和1之间的一个指标，越接近1 越说明这个测量时reliable的， 一般SPSS之类的软件都能算出来，也要在论文里面汇报出来以供其他学者参考。
忽然想聊validity 和reliability的原因大概是它连接了“研究设计”，“数据收集”和“数据分析”这三个个社会研究中的核心环节。我们作为初阶研究者，可能最需要的能力就是把做research过程中每个核心部分之间的关系搭建起来在脑中形成全景图。
Research process的每一个步骤都需要环环相控、遥相呼应，每一步每一环最终都是为了能够达到那个大目标----去回答research question。 关于理解research process的不同环节，可配合阅读 Research Process: 做一个高质量的社会研究项目一般都需要涵盖哪几个步骤？
而理解了validity和reliability，对于深度理解文献和以前学者对于该课题的研究有非常大的帮助，自然而然就可以有更多的想法写到自己的essay当中去。
