测验信度效度课件.ppt

1、心理测验客观性的常用指标心理测验客观性的常用指标 1、信度：、信度：reliability 2、效度；效度；validity3、项目分析（难度和鉴别力）项目分析（难度和鉴别力）1、信度、信度 指测验结果的可靠程度指测验结果的可靠程度。只有测验结果接近或等只有测验结果接近或等于实际真值于实际真值，或多次测验结果十分接近或多次测验结果十分接近，就可以认为测验结果是可靠的。科学的东西必须能够重复，两次测验的结果必须具有一定的一致性，差异比较小，信度问题实质是一组被试两次测验结果的一致性问题。测验的可靠性，是指对某一群体而言，不是针对某一个被试而言。信度高低可以用相关系数来表示。信度的信度的作用作用和

2、和意义意义作用作用：1）解释预测个人分数的意义 2）解释真实分数与实得分数间的关系 3）确定测验好坏的一个指标；最理想 r=1.00意义意义：1）信度系统为样本测验分数的总方差中有多少比例是真分数方差，也就是测验的总变异中真分数造成的变异占百分之几2）测量的标准误是有多大可能性真实分数在某一分数范围内。并且可以预测实得分数再测时可能的变化情况。信度估计方法信度估计方法 （1）重测信度）重测信度 考虑误差来源是时间取样，主要针对时间变量，采集数据方法是对同一组被试间隔一定的时间相同的测验重复测试一次，计算方法是积差相关法积差相关法,求得首测与再测这两次测验的相关。时间间隔选择依测验性质和目的而定

3、。不是所有测验都可以计算重测信度，如：智力测验，成就测验；重测信度只反映了随机误差的影响，而不是反映被试心理特点的长期变化。（2）复本信度）复本信度 又叫等值性系统，考虑误差来源是内容取样，采集数据方法：给被试施测两个内容等值但题目不同的测验，即：一个测验有平行的两个版本测验A、B，先作A式测验，在最短时间内再作测验B式，求两组数值的相关，计算积差相关法。复本信度的高低反映两个互为复本的测验等价的程度，而不是反映一个测验本身受随机误差影响的大小，关键取决于复本测验的选择。（3）分半信度（内在一致性信度）分半信度（内在一致性信度）劈半信度或折半信度，如智力测验，成就测验，是一种将测验分成等值的两

4、半来求相关系统的信度。考察一个测验内容两伴题目测量的是否同一个心理特点或行为。采集数据方法：一次测验结束后，将测验按一定标准分为等值的两半，分别计算每位被试在两半测验上的分数，求出相关系数，计算用积差相关法。常用的方法是将一个测验分裂为两个假定相等而独立的部分，然后计算这两部分的得分相关系数（如奇偶项），之后再用斯皮尔曼布朗公式（2r/1+r）估计整个测验的信度。（4）同质性信度）同质性信度 同质性信度：考虑测验内容是否异质，同质性是测同一种心理行质或行为，测验所有题目间性质的一致性，同质性是测验单一特质的必要条件。判别标准：题目间呈高正相关。数据采集方法：施测一次测验，算出所有题的得分，求出

5、各题目的相关，同质性信度也是一种构思效度，或叫结构效度。（5）评分者信度）评分者信度 评分信度：考虑测验随机误差来源是评分者间的差别，由评分者造成，用积差相关法求得不同评分者所评 分值间的相关。2个评分者用斯皮尔曼等级相关法，3人以上用肯德尔和谐系统。影响信度的因素影响信度的因素 1）样本特征样本特征：样本团体得分分布的影响，样本越分散信度越高；样本团体异质性的影响，异质性越高信度越高；样本团体平均能力水平的影响，平均能力越低信度越高2）测验的长度测验的长度：测验越长题目越多，测验的内容取样就越有代表性；测验越长被试的猜测因素影响越小，信度就高。3）测验的难度测验的难度：测验难度对信度有间接影

6、响。对于人格测验、兴趣、态度、价值观等测验，不存在难度问题。从理论上说，只有难度水平为50%时，才能使测验分数分布范围最大，求得的信度也最高。4）测量的时间间隔测量的时间间隔：时间间隔只对重测信度和不同时测量的复本有影响，时间越短信度值越高。2、效度 它表示一个测验实际测量出所测特性或功能的真它表示一个测验实际测量出所测特性或功能的真实性程度实性程度，或它指一个测验真正确实地测量到它所或它指一个测验真正确实地测量到它所欲测量的东西的程度欲测量的东西的程度。含义：1）测验测量什么？2）测验对测量目标的测量精确度和真实性是多少？同一测验中其它条件相同时，效度必然低于信度。往往效度比信度更重要。鉴别

7、一个测验的好坏，首要的指标就是效度。效度是针对测验目的而言的。不同测验有不同的目的。比如智力测验，如果用来测验智力就可能是高效的，用来测验性格则肯定是无效的。所以在使用心理测验时必须明白测验的目的。效度估计方法效度估计方法 （1）内容效度）内容效度 表示测验所选的题目（测题）符合所欲测验内容的程度。是测验题目对有关内容或行为总体取样的适当性程度。能力倾向和人格测验不适合作内容效度确定内容效度的方法：逻辑法：专家判断，专家对测验题目进行考核，看测验是否能够测出所要测的内容；经验法：经验判断，通过实践检查测验能否测出欲测的内容。统计法：统计分析，通过统计学对项目进行分析。（2）结构效度）结构效度

8、也叫构想效度，表示测验实际测量出所欲测量的心理结构或特征的程度。用一个结构框架去衡量效度。构思效度无单一指标，由各方面证据累积直接来作出评价。确定方法：测验内部方法，测验间方法，效标效度研究，实验和观察法验证（3）效标关联效度）效标关联效度 又称效标效度，实证效度或准则关联效度。它是测验分数与作为效标的另一独立测验结果之间的一致性程度；或测验总分数与外在标准之间的相关程度，反映的是用测验预测个体在某种情境下行为表现如何的有效性程度。同时效度同时效度：效标资料与测验分数同时获得。主要用来查明新编测验的效度。预测效度预测效度：效标分数在测验之后相当长时间获得。主要用来评价测验的预测能力。反映从测验

9、分数预测任何效标情境或一段时间后被试的行为表现程度 常用效标：常用效标：学业成就，临床诊断，实际工作表现，特殊训练成绩，效标团体比较，先前有效测验，等级评定。（4）表面效度）表面效度 它是一个测验看起来好像是测量所要测的东西的程度，不是效度，不反映测验正测量的东西，只是外行人的一种评价。影响效度的因素影响效度的因素 1）测验本身因素测验本身因素，包括：测验题目质量，测验长度，测验实施中的干扰，被试因素，增加测验误差，降低测验效应。2）测验施测的样本性质测验施测的样本性质，样本同质性越高，效度越低。不同团体对同一测验反应可能不同；同一测验，效度团体性质不同；样本团体的异质性 3）效标的性质效标的

10、性质：若其它条件一样，所测量的行为或心理特质与效标行为或特质越相似，效度系统就越高信度和效度的关系信度和效度的关系 St2=Sco2+Ssp2+Se2 St2:总分变差。Sco2:由所测量的心理特性引起的主要变差。Ssp2:由与所测量的特性无关的其它个别性质所造成的变差（系统误差引起的变差）。Se2:误差变异。rtt=(Sco2+Ssp2)/St2；Val=Sco2/St2信度和效度的关系说明：相同相同：信度和效度是以相关系统来表示的不同不同：涉及的误差不同，信度仅考虑偶然的随机误差占测验总变异的比例；效度则还包括与测验无关但稳定的测量误差联系联系：1）信度是效度的必要而非充分条件，信度越高，

11、效度不一定越高2）效度是受信度制约的，在同一个测验里其信度必然高于效度，至少相等。3、项目分析（难度和鉴别力）测验的好坏与项目（测题）的选择有很大的关系，好的测题是鉴别力高并且难度适宜的项目。项目分析三内容1）诱答分析：每个项目只有一个正确答案其余均为诱答。2）难度分析：通过率：回答某个项目的样本中，正确回答该项目的人数P=R/N*100。3）鉴别力分析：鉴别力是对于所测量的心理特性的区分能力。（1）项目难度）项目难度 项目难度是衡量测题难易水平的数量指标。估计项目难度的方法通常是以被试通过每个项目的百分比来决定的，如果一个项目通过百分比太高或太低，说明该项目太易或太难，一般情况下这两个项目应该删除。通过率：回答某个项目的样本中，正确回答该项目的人数P=R/N*100，项目的平均难度接近0.50，各项目难度在0.50+0.20之间变化 （2）项目鉴别力（区分度）项目鉴别力（区分度）它是衡量测题对不同水平被试区分程度的指标。如果一个测题鉴别力高，那么水平高的或能力强的被试就得高分，否则得低分，这样就能把不同水平得被试区分开来。估计鉴别力方法通常是以不同水平的被试通过每个项目的百分比之差来决定（D=PH-PL）。鉴别力指标通常选取25%-33%之间。