心理测量测量的信度课件.ppt

1、测量的信度测量的信度案例一案例一 有一个体操运动员参加跳马比赛，第一次跳有一个体操运动员参加跳马比赛，第一次跳了了8.9分，转播席上的嘉宾评论员说这不是他真分，转播席上的嘉宾评论员说这不是他真实的水平，他的真实水平应该在实的水平，他的真实水平应该在9.5分以上。果分以上。果然第二次他跳出了然第二次他跳出了9.9分。如果没有嘉宾的点评，分。如果没有嘉宾的点评，你认为哪次成绩是该运动员的真实水平？你认为哪次成绩是该运动员的真实水平？案例二案例二 王先生去应聘某公司的经理岗位，考官拿出王先生去应聘某公司的经理岗位，考官拿出一个企业忠诚度测验让王先生答卷，经评估后一个企业忠诚度测验让王先生答卷，经评估

2、后得出结论，王先生忠诚度不够。结果王先生不得出结论，王先生忠诚度不够。结果王先生不服，要求重新答一次，结果正好相反。服，要求重新答一次，结果正好相反。案例三案例三 小明学习成绩一直很差，他找张老师咨询，小明学习成绩一直很差，他找张老师咨询，张老师找了一个智力测验让他做，结果还不错，张老师找了一个智力测验让他做，结果还不错，智商有智商有120。母亲觉得不可思议，这么高的智母亲觉得不可思议，这么高的智商为什么学习成绩那么差呢，于是她带着小明商为什么学习成绩那么差呢，于是她带着小明去了一家咨询机构，那里的咨询师拿出了同样去了一家咨询机构，那里的咨询师拿出了同样一个智力测验让小明做，结果算出来智商只有

3、一个智力测验让小明做，结果算出来智商只有88。哪一次的结果是可信的。哪一次的结果是可信的。第一节第一节 信度概述信度概述定义：测验结果一致性的判断定义：测验结果一致性的判断 (一个测验可靠性和稳定性的指标一个测验可靠性和稳定性的指标)一个好的测验在多次测量同一个人的时候一个好的测验在多次测量同一个人的时候结果应该是基本一致的结果应该是基本一致的.真分数理论真分数理论在实测分数中真分数所占的比率在实测分数中真分数所占的比率 实测分数实测分数=真分数真分数+误差误差 (X =T +E)公式公式 105.0 r=-=0.87 120.2真分数理论的三个假设真分数理论的三个假设误差分数的平均数是零误差

4、分数的平均数是零 (因为误差是随机的因为误差是随机的)误差分数与真分数相互独立误差分数与真分数相互独立,没有任何相关没有任何相关 (如果有相关如果有相关,那误差就不成为误差了那误差就不成为误差了)两次测量的误差分数之间的相关为零两次测量的误差分数之间的相关为零 (因为误差是随机的因为误差是随机的,所以测量之间没有必然的所以测量之间没有必然的联系联系)测量分数、真分数和误差分数的分布假设测量分数、真分数和误差分数的分布假设 学生学生 测量分数测量分数 =真分数真分数 +误差分数误差分数 A 3 5 -2 B 17 15 +2 C 16 20 -4 D 23 25 -2 E 27 25 +2 F

5、25 25 0 G 35 25 +10 H 26 30 -4 I 33 35 -2 J 45 45 0 总数总数 250 250 0 平均数平均数 25.0 25.0 0 方差方差 120.2 105.0 15.2 标准差标准差 10.9 10.2 3.9 测量分数测量分数=真分数真分数+误差分数误差分数误差之和为零误差之和为零测量分数的平均数测量分数的平均数=真分数的平均数真分数的平均数测量分数的方差等于真分数的方差与误差方差之测量分数的方差等于真分数的方差与误差方差之和和(但标准差并没有如此之关系）但标准差并没有如此之关系）因为每一次测量结果中都可能有误差的存因为每一次测量结果中都可能有误

6、差的存在，所以一次测量不一定能准确反映真实的情在，所以一次测量不一定能准确反映真实的情况，而多次测量可以弥补这一不足，因为误差况，而多次测量可以弥补这一不足，因为误差是随机出现的，所以理论上可以用多次测量结是随机出现的，所以理论上可以用多次测量结果的平均数来代表真分数，而每一次测量分数果的平均数来代表真分数，而每一次测量分数与平均数的离差就是误差。一个测验结果的离与平均数的离差就是误差。一个测验结果的离散度越小说明误差也就越小。散度越小说明误差也就越小。真正在心理测量中真分数是不可能直接获得真正在心理测量中真分数是不可能直接获得的。可行的是探查一个测验的误差有多大，然的。可行的是探查一个测验的

7、误差有多大，然后通过用测验分数与误差分数相减来求取真分后通过用测验分数与误差分数相减来求取真分数。数。信度是真分数与实测分数相关的平方信度是真分数与实测分数相关的平方,用相用相关系数来表示关系数来表示.相关系数越大说明真分数在实测相关系数越大说明真分数在实测分数中的比率越大分数中的比率越大,也就说明信度越高也就说明信度越高.第二节第二节 误差及误差的来源误差及误差的来源定义：与测量目的无关的因素造成了测定义：与测量目的无关的因素造成了测 验结果验结果的的 不一致或不准确不一致或不准确种类：种类：1 随机误差：随机误差：方向和大小完全是随机方向和大小完全是随机 的，没有规律性的，没有规律性 2

8、系统误差：系统误差：稳定地存在于每一次测稳定地存在于每一次测 量中，有规律可循量中，有规律可循 3 抽样误差：由抽样变动而引起的抽样误差：由抽样变动而引起的误差来源误差来源 1.测验内部引起测验内部引起 1）题目取样误差）题目取样误差 2）题目用词模棱两可）题目用词模棱两可 3）题目太难）题目太难 4）规定的测验时间太短）规定的测验时间太短 5）题型的原因）题型的原因 2 测验过程引起的测验过程引起的 1）物理环境）物理环境 2）主试方面）主试方面 3）意外干扰）意外干扰 4）计分）计分 3 被试引起的被试引起的 1）动机）动机 2）焦虑）焦虑 3）练习）练习 4）经验）经验 5）生理因素）生

9、理因素第三节第三节 估计信度的方法估计信度的方法一一、稳定系数稳定系数（重测信度）（跨时间的一致性）（重测信度）（跨时间的一致性）对同一个测验前后做两次，然后计算两次对同一个测验前后做两次，然后计算两次测测 验结果的一致性。验结果的一致性。公式：公式：测测验验被被 试试12345678910 1112 13 14 15x116 15 1313 13 1110 10 10 998876x216 15 1614 12 1113 12 10 1111910 87测验测验xx xx 2Sxx1 1x x2 2x x1 1158178410.532.831946x x2 2199214711.672.6

10、5被试被试数学数学x阅读阅读yxyx2y2xy14117+1-4116-423828-2+7449-1434822+8+1641843216-8-564254053418-6-33691863615-4-616362474124+1+319384320+3-191-394723+7+2494141040270+60360 40021000244186864021采用重测信度需注意之处采用重测信度需注意之处 两次测验的时间应该是合理的两次测验的时间应该是合理的,即既不能太即既不能太长又不能太短。长又不能太短。相隔太长的时间被试在所测量的特征上可相隔太长的时间被试在所测量的特征上可能会发生变化，相

11、隔太短有记忆的效应。能会发生变化，相隔太短有记忆的效应。重测信度的使用局限性重测信度的使用局限性1.被试在这期间自身发生了变化被试在这期间自身发生了变化2.第一次测验的经验对第二次测验产生影响第一次测验的经验对第二次测验产生影响 (如第一次测验产生了焦虑就会影响第二次测如第一次测验产生了焦虑就会影响第二次测验验)3.记忆的作用记忆的作用4.耗时耗精力耗时耗精力,被试不好找被试不好找 二二 等值系数等值系数（复本信度）（复本信度）（跨（跨形式的一致性）形式的一致性）一个测验有一个测验有A，B两个版本，对一两个版本，对一组被试测试，组被试测试，求取两个测验结果的一求取两个测验结果的一致性致性 两个

12、版本连续施测称为等值性两个版本连续施测称为等值性系数系数,如果两个版本间隔一段时间如果两个版本间隔一段时间施测称为稳定性等值系数施测称为稳定性等值系数.三三 内在一致性系数内在一致性系数 以一次测验的结果来估计测以一次测验的结果来估计测验的信度验的信度.用以估计测验内部的用以估计测验内部的一致性一致性.内在一致性系数的几种估计方法内在一致性系数的几种估计方法1.分半信度分半信度 把一次测验的结果人为地分成对等的两半，把一次测验的结果人为地分成对等的两半，然后计算两半分数之间的相关。然后计算两半分数之间的相关。计算分半信度的一个重要之处是如何进行合计算分半信度的一个重要之处是如何进行合理的分半理

13、的分半.分半信度只是半个测验的信度，所以需加以校分半信度只是半个测验的信度，所以需加以校正。正。校正公式：校正公式：2.2.库库德德 理理查逊查逊估估计计法法库德库德理查逊理查逊1937年提出了一种分析题目间一致年提出了一种分析题目间一致性来估计信度的方法，即应用项目统计量来避免性来估计信度的方法，即应用项目统计量来避免任意的两半分法导致产生的误差。常用任意的两半分法导致产生的误差。常用KR20公公式式:公式：公式：假设一个测验有假设一个测验有5个测题个测题,施测于一个施测于一个30个人的个人的样本样本,结果求出标准差为结果求出标准差为2.5测题测题 答对人数答对人数 p q pq 1 15

14、0.50 0.50 0.25 2 20 0.67 0.33 0.22 3 12 0.40 0.60 0.24 4 10 0.33 0.67 0.22 5 6 0.20 0.80 0.16 pq=1.093.稳定系数稳定系数稳定系数（克伦巴赫稳定系数（克伦巴赫 系数）系数）公式：公式：内在一致性系数的使用局限性内在一致性系数的使用局限性1.只适合于同质性的测验只适合于同质性的测验2.特别不适合于速度测验特别不适合于速度测验二个评分者分别对一组被试的测验二个评分者分别对一组被试的测验结果加以评分，然后求取两组人分数结果加以评分，然后求取两组人分数的一致性。的一致性。另一种方法是求取完全相同评分的另

15、一种方法是求取完全相同评分的比例比例.四四 评分者信度评分者信度三个以上评分者对一组被试的测验结果评分，三个以上评分者对一组被试的测验结果评分，其一致性的求取采用肯特尔和谐系数。其一致性的求取采用肯特尔和谐系数。公式：公式：三个教师给三个教师给6篇作文评分篇作文评分将分数值转换为得分等级（最高为将分数值转换为得分等级（最高为1）然后）然后求出每一篇作文所得等级之和（求出每一篇作文所得等级之和（Ri）教师教师123456A253027202832B222621202530C152018142122123456A524631B425631C534621 Ri147131883 Ri 14+7+13

16、+18+8+363 Ri2811K3N=6被评对象在被评对象在3-7人时，直接查表，人时，直接查表，w值大于表中数值大于表中数值说明信度是高的，如被评对象超过值说明信度是高的，如被评对象超过7人，则可人，则可计算计算 2值，作值，作 2检验。检验。2k(N-1)w df=N-1不同类型测验的信度要求不同类型测验的信度要求标准化智力测验标准化智力测验 0.90 (中等到高的信度中等到高的信度)标准化成就测验标准化成就测验 0.85标准化人格测验标准化人格测验 0.80 (中等到低的信度中等到低的信度)标准化团体测验标准化团体测验 0.70某些投射测验某些投射测验 0.60 (低信度低信度)第四节

17、第四节 影响信度的因素影响信度的因素测验分数分布的范围对信度的影响测验分数分布的范围对信度的影响 分数分布的范围越大，信度就越分数分布的范围越大，信度就越高，分数分布的范围越小信度就越低。高，分数分布的范围越小信度就越低。用异质团体的信度来推测同质团体的信度用异质团体的信度来推测同质团体的信度公式：公式：例：例：二二 测验的长度对信度的影响测验的长度对信度的影响测题数量越多信度就越高测题数量越多信度就越高以已有测题数量所得信度来预测达到某种信度水以已有测题数量所得信度来预测达到某种信度水平需增加的题数平需增加的题数公式：公式：例：例：以增加题目的数量来推测所能达到的信度以增加题目的数量来推测所

18、能达到的信度公式：公式：例：例：进一步增加题数可达到的信度水平进一步增加题数可达到的信度水平题数题数1050100200300400500相关系数相关系数0.500.830.910.950.968 0.976 0.98三三 测验的难度对信度的影响测验的难度对信度的影响 难度间接影响信度。难度间接影响信度。即难度影响测验分数的分布，然即难度影响测验分数的分布，然后影响信度。后影响信度。第五节第五节 测量的标准误差测量的标准误差定义：误差分数分布的标准差定义：误差分数分布的标准差标准误也可用来判断一个测验的稳定性程度。标准误也可用来判断一个测验的稳定性程度。信度系数是估计整个样本的误差程度，而标信

19、度系数是估计整个样本的误差程度，而标准误则是用来估计个人分数中的误差水平。准误则是用来估计个人分数中的误差水平。标准误的计算公式标准误的计算公式标准误的用途标准误的用途确定分数的有效区间确定分数的有效区间 例：一个儿童做韦氏智力测验测得智商例：一个儿童做韦氏智力测验测得智商120，已，已知韦氏测验的标准差为知韦氏测验的标准差为15，信度是，信度是0.95。公式：公式：以以95%的置信水平来确定这个儿童智商分数的置信水平来确定这个儿童智商分数的有效区间，那么真分数有的有效区间，那么真分数有95%的可能性会落在的可能性会落在X+/-1.96 Se的范围内，的范围内，即即120+/-1.96 3.3

20、5=113-127。评价两个不同测验分数是否有明显的差异。评价两个不同测验分数是否有明显的差异。例：一个儿童的韦氏言语智商是例：一个儿童的韦氏言语智商是102，操作智商，操作智商为为108，操作智商是否显著地高于言语智商呢？，操作智商是否显著地高于言语智商呢？以标准误来检验，先算出差异分数的标准误以标准误来检验，先算出差异分数的标准误公式：公式：4.741.96=9.29 两个分数差异大于两个分数差异大于9分以上才有显著性差别，分以上才有显著性差别，现在现在108-102=6，所以这个儿童的两种智力没有，所以这个儿童的两种智力没有差异。差异。以图形也可来辨认两种分数的差以图形也可来辨认两种分数的差异。如果置信区间有重叠，尤其是一异。如果置信区间有重叠，尤其是一半以上重叠，那就不能说一个分数比半以上重叠，那就不能说一个分数比另一个高。另一个高。