心理测量学第四节-测量的效度课件.ppt

1、第四节第四节 测验的效度测验的效度第一单元第一单元 效度的概念效度的概念v效度（效度（ValidityValidity）是指一个测验或量表实际）是指一个测验或量表实际能测出所要测量的心理特质的程度。能测出所要测量的心理特质的程度。v从心理测量理论的角度，效度是与测量目标从心理测量理论的角度，效度是与测量目标有关的真实分数方差（有效分数方差）与总有关的真实分数方差（有效分数方差）与总分方差的比率。分方差的比率。(S(SV V2 2/S/SX X2 2)20082008年年1111月三级月三级v6060、在心理测验中，效度是指一个心理测验、在心理测验中，效度是指一个心理测验的（的（）v A A、稳

2、定性、稳定性 v B B、准确性、准确性 v C C、可信度、可信度 v D D、区分性、区分性效度的性质效度的性质v效度具有相对性效度具有相对性v效度具有连续性效度具有连续性信度与效度的关系信度与效度的关系v信度是效度的必要而非充分条件信度是效度的必要而非充分条件v效度是受信度制约的效度是受信度制约的第二单元第二单元 效度评估的方法效度评估的方法v一一.内容效度内容效度v二二.构想效度构想效度v三三.效标关联效度效标关联效度一一.内容效度内容效度v内容效度内容效度(content-related validity)(content-related validity)是指测是指测验题目对有关内

3、容或行为总体取样的适当性程验题目对有关内容或行为总体取样的适当性程度。因为这种效度主要是考察测验的内容度。因为这种效度主要是考察测验的内容,因此因此叫内容效度。叫内容效度。内容效度确定的方法内容效度确定的方法v专家判断法（逻辑效度）专家判断法（逻辑效度）v经验判断法经验判断法v统计分析法统计分析法20092009年年5 5月（二级）月（二级）v多选：多选：9292、为了使内容效度的确定过程更为、为了使内容效度的确定过程更为客观，弥补不同专家对同一测验的判断可能客观，弥补不同专家对同一测验的判断可能的不一致，可采用的步骤是（）的不一致，可采用的步骤是（）v（A A）定义好测验内容的总体范围）定义

4、好测验内容的总体范围v（B B）编制双向细目表）编制双向细目表v（C C）制定评定量表来测量测验的整体效）制定评定量表来测量测验的整体效度度v（D D）进行统计分析）进行统计分析20082008年年1111月（二级）月（二级）v105105、除了描述性语言外，内容效度的确定也、除了描述性语言外，内容效度的确定也可采用一些统计分析方法，如（可采用一些统计分析方法，如（）v A A、计算评分者信度、计算评分者信度v B B、计算复本信度、计算复本信度 v C C、专家推测、专家推测 v D D、再测法、再测法20092009年年5 5月（三级）月（三级）v多选：多选：119119、内容效度的评估方

5、法有（、内容效度的评估方法有（）v （A A）专家判断法）专家判断法 v （B B）双向细目表法）双向细目表法 v （C C）统计分析法）统计分析法v （D D）经验推测法）经验推测法内容效度的适用内容效度的适用v编制任何测验都要加以考虑的基本方面编制任何测验都要加以考虑的基本方面v教育和职业成就测验最适合教育和职业成就测验最适合v对于能力倾向测验和人格测验不大适合对于能力倾向测验和人格测验不大适合v内容效度与表面效度（内容效度与表面效度（face validityface validity）20062006年年1111月月v5454、在编制测验时，效度是要考虑的重要特、在编制测验时，效度是要

6、考虑的重要特性。如果编制最高行为测验，除了内容效度，性。如果编制最高行为测验，除了内容效度，也要求有（也要求有（）。）。（A A）较高的表面效度）较高的表面效度（B B）较好的专家判断）较好的专家判断（C C）较好的外行判断）较好的外行判断 （D D）主观性）主观性二二.构想效度（构想效度（contruct validitycontruct validity）v构想效度构想效度就是测验对于某一理论概念就是测验对于某一理论概念或特质测量的程度。或特质测量的程度。v构想构想是指心理学理论所涉及的抽象的、是指心理学理论所涉及的抽象的、假设性的概念或特质。假设性的概念或特质。确定构想效度的基本步骤确定

7、构想效度的基本步骤确定构想效度的步骤确定构想效度的步骤建立理论框架建立理论框架推演相关假设推演相关假设验证提出的假设验证提出的假设 确定构想效度的方法确定构想效度的方法多方面搜集证据：多方面搜集证据：v 测验内方法测验内方法v 测验间方法测验间方法v 研究测验的实证效度研究测验的实证效度v 实验研究实验研究测验内方法测验内方法v确定测验的内部效度确定测验的内部效度v分析被试对题目的反应特点分析被试对题目的反应特点v考查测验的同质性考查测验的同质性测验间方法测验间方法v相容效度（相容效度（congrugent validitycongrugent validity）v区分效度（区分效度（disc

8、riminate validitydiscriminate validity）v因素分析法（因素分析法（factor analysisfactor analysis）20082008年年5 5月（二级）月（二级）v多选：多选：106106、可以作为构思效度证据的有、可以作为构思效度证据的有()()v(A)(A)测验的内容效度测验的内容效度-v(B)(B)测验的内部一致性指标测验的内部一致性指标 -v(C)(C)分析几个测验间的相互关系分析几个测验间的相互关系 (D)(D)分析被试者对题目的反应特点分析被试者对题目的反应特点-三三.实证效度实证效度/效标效度效标效度/效标关联效效标关联效度（度（

9、critreion-relatedcritreion-related）v 实证效度实证效度是指一个测验对处于特定情景中的个体行是指一个测验对处于特定情景中的个体行为进行预测的有效性。为进行预测的有效性。v也就是对于研究者感兴趣的行为预测得怎么样。被也就是对于研究者感兴趣的行为预测得怎么样。被预测的行为是衡量测验是否有效的标准，简称预测的行为是衡量测验是否有效的标准，简称效标效标。v所谓效标效度，就是考查测验分数与效标的关系，所谓效标效度，就是考查测验分数与效标的关系，看测验对效标的预测程度，因此叫看测验对效标的预测程度，因此叫效标效度效标效度。v因为效标效度需要有实际证据，所以又叫因为效标效度

10、需要有实际证据，所以又叫实证效度实证效度。效标效度效标效度v根据搜集效标的时间：根据搜集效标的时间：同时效度（同时效度（concurrent validityconcurrent validity）预测效度（预测效度（predictive validitypredictive validity）v阿斯丁将效标细分为两个层次：阿斯丁将效标细分为两个层次：理论描述水平的理论描述水平的“观念效标观念效标”操作定义水平的操作定义水平的“效标测量效标测量”效标测量的判断标准效标测量的判断标准v有效性有效性v可靠性可靠性v客观性客观性v实用性实用性 实证效度的检验方法实证效度的检验方法v相关法相关法v区分

11、法区分法v命中率法命中率法相关法相关法v计算测验分数与效标测量的相关。计算测验分数与效标测量的相关。根据变量的性质不同根据变量的性质不同,可分别采用不可分别采用不同的积差相关同的积差相关,等级相关法等级相关法,二列相二列相关法等。关法等。区分法区分法v看预测源分数是否能区分由效标测量看预测源分数是否能区分由效标测量所定义的不同团体。所定义的不同团体。v最常采用的最常采用的t t检验。检验。命中率法命中率法v预测源与效标关系可能四种情况：预测源与效标关系可能四种情况：效标效标测量测量预测源预测源成功成功失败失败成功成功A A（命中）（命中）B B（失误）（失误）失败失败C C（失误）（失误）D

12、D（命中）（命中）命中率法两种指标命中率法两种指标v总命中率总命中率v正命中率正命中率ctA DPA B C D 命中正确命中 失误总数*100%*100%cpApAB成功人数选择人数例题：有例题：有100100人参加测验，根据预测源，又让人参加测验，根据预测源，又让100100人参加实际训练，结果及格组人参加实际训练，结果及格组4545人中，人中，3838人优秀，人优秀，7 7人淘汰；失败人淘汰；失败5555人中，人中，2222人优秀，人优秀，有有3333人淘汰。人淘汰。vP Pctct=38+33/100=71%=38+33/100=71%vP Pcpcp=38/45=84%=38/45=

13、84%优秀优秀 淘汰淘汰 合计合计优秀优秀 A38A38B7B74545淘汰淘汰 C22C22D33D335555合计合计 6060404010010020062006年年1111月（月（20082008年年5 5月）月）v105105、效标效度的主要评估方法有（、效标效度的主要评估方法有（）。）。v （A A）命中率法）命中率法 （B B）区分法）区分法 （C C）失误法）失误法 （D D）相关法）相关法20092009年年5 5月（三级）月（三级）v5757、检验测验分数能否有效地划分由效标所、检验测验分数能否有效地划分由效标所定义的团体的一种方法是（定义的团体的一种方法是（）v（A A）

14、相关法）相关法v（B B）区分法）区分法 v（C C）命中率法）命中率法 v（D D）失误法）失误法20062006年年1111月月v多选：多选：102102、使用同一测验，在同样条件下对同一、使用同一测验，在同样条件下对同一组被试者前后施测两次测验，求两次得分间的相关组被试者前后施测两次测验，求两次得分间的相关系数，叫（系数，叫（），又称（），又称（）。）。v （A A）复本信度）复本信度 （B B）重测信度）重测信度 （C C）稳定性系数）稳定性系数v （D D）分半信度）分半信度 第三单元第三单元 效度的功能效度的功能v预测误差预测误差v预测效标分数预测效标分数v预测效率分数预测效率分数

15、预测误差预测误差v郊度系数的实际意义常常以决定性系数来郊度系数的实际意义常常以决定性系数来表示，它表示测验正确预测或解释的效标表示，它表示测验正确预测或解释的效标的方差占总方差的比例。的方差占总方差的比例。vR Rxyxy2 2代表效度系数的平方，即决定系数；代表效度系数的平方，即决定系数；S Sy y为效标成绩的标准差。为效标成绩的标准差。v真正效标分数落在预测效标分数的不同水真正效标分数落在预测效标分数的不同水平的平的SestSest范围内。范围内。21xyS estS yr习习 题题v2121、如果某测验的效度是、如果某测验的效度是0.700.70，则在测验中，则在测验中无法作出正确预测

16、的比例是（无法作出正确预测的比例是（）。）。（A A）0.30 0.30（B B）0.51 0.51（C C）0.49 0.49（D D）0.70 0.70 20082008年年5 5月（二级）月（二级）v 5858、效度系数的实际意义常常以决定系数来、效度系数的实际意义常常以决定系数来表示，如测验的效度是表示，如测验的效度是0 08080，则测验可以正，则测验可以正确预测或解释的效标的方差可占效标总方差确预测或解释的效标的方差可占效标总方差的的()()v(A)36(A)36 (B)46(B)46 v(C)56(C)56 (D)64(D)64二预测效标分数二预测效标分数v建立测验分数预测效标成

17、绩的回归方程建立测验分数预测效标成绩的回归方程vY Y是预测的效标分数；是预测的效标分数；a a是纵轴的截距，是纵轴的截距，b byxyx是斜率，即是斜率，即Y Y向向X X回归回归的系数；的系数；X X为测验分数。为测验分数。vr rxyxy是测验分数与效标分数的相关，即效度系数。是测验分数与效标分数的相关，即效度系数。y xaYbXyxYabX/yxxyyxbrS S 预测效率指数预测效率指数v无关系数，用无关系数，用K K表示，表示，K K值大小表明预测源分数与值大小表明预测源分数与效标分数的无关程度。效标分数的无关程度。v（1-K1-K）可作为预测效率的指数，用）可作为预测效率的指数，

18、用E E表示，表示，E E值大值大小表明使用测验比盲目猜测能减少多少误差小表明使用测验比盲目猜测能减少多少误差2/1yxyKSest Sr100(1)EK影响效度的因素影响效度的因素v测验本身的因素测验本身的因素v测验实施中的干扰因素测验实施中的干扰因素v样本团体的性质样本团体的性质v效标的性质效标的性质一、测验本身的因素一、测验本身的因素v测验取材的代表性测验取材的代表性v测验长度测验长度v试题类型试题类型v难度难度v区分度区分度v编排方式编排方式二、测验实施中的干扰因素二、测验实施中的干扰因素v主试主试v时间间隔时间间隔v测验情境测验情境v被试被试三、样本团体的性质三、样本团体的性质v样本的异质性样本的异质性v干涉变量（干涉变量（moderator variablemoderator variable）性别性别 年龄年龄 教育水平教育水平 智力智力 动机动机 兴趣兴趣四效标的性质四效标的性质v效标与测验分数之间的关系效标与测验分数之间的关系是否是否线性相关线性相关v效标测量本身的可靠性效标测量本身的可靠性