命题和试题质量分析课件.pptx

1、2022-8-11命题和试题质量分析命题和试题质量分析某考试，共有四道题，5名考生得分如下。假设这次考试只有这五名考生，求。一、难度（一）含义：难度指试题的难易程度。问题：试题问题：试题1的难度系数为的难度系数为0.86，试题试题2的为的为0.41。哪份试题更难。哪份试题更难些？些？结论：结论：难度系数越大，试题越容易；难度系数越大，试题越容易；难度系数越小，试题越难。难度系数越小，试题越难。（二）难度系数的计算kXP：A）“1、0”记分题：P=通过人数/全体人数B）非“1、0”记分题：P=平均分/该题满分：方法1：P=平均分/整卷满分方法2：P=各题难度系数加权后的平均数 （这里的权数：各题

2、的满分值）（三）试题难度的评价：P0.9 很易0.71P0.89 偏易0.30P0.70 适中0.11P0.29 偏难P0.10 很难（四）试题难度系数多大才适宜1、理论上，大部分试题的难度系数P在0.5左右为宜。(=pq=0.50.5=0.25)如：某次考试要从1000名考生录取200名，录取率为0.2，则要求试题的难度系数尽量达到0.2左右。3、还要考虑到考生的实际情况1）若不同层次考生差异性太大，特别是其中的弱势群体人数较多时，考虑到教育公平，试题难度应偏易。2）要考虑考生学习信心和兴趣，及参与测试的信心，试题难度可稍偏易。（五）未考试，如何判定试题的难度某次语文统考，5名考生得分如下。

3、假设这次考试只有这五名考生，求各题的。水平高者，成绩好；水平低者，成绩差。则区分度高。反之，则区分度低。ABC1、相关法：yxiiXYSSNYYXXr*)(2、高低分组法：D=PH -PL（三）区分度多大,才算一份好试题：D0.40 区分度很好 0.30D0.40 区分度良可 0.20D0.30 区分度尚可，但要修改 D0.20 区分度差，必须淘汰（四）区分度的运用1、挑选典型题目组成微型试题，在正式考试前的进行预备性测试，计算出每题的区分度，为正式命题提供依据。l 预备性测试中区分度差的题目，正式命题时应放弃类似题目。l 预备性测试中区分度尚可的题目，正式命题时若要设计类似题目，则要修改。n

4、 可见，区分度是试卷编造过程中筛选测题的主要依据。2、通常情况下，区分度分析主要用于单一测题的分析，整份卷的区分度较难分析。原因是难以找到衡量被试该能力水平的变量。l 将一份试卷中所有题目的区分度简单平均以计算整份试卷的区分度，此做法缺乏科学依据。l 将一份试卷中所有题目的区分度进行加权平均以计算整份试卷的区分度，此做法亦缺乏科学依据。三、信度某考试，数学科共有三道大题，5名考生得分如下。假设这次考试只有这五名考生，求数学试题的。三、信度（一）含义：经过多次测试，所得结果的一致性程度 (假定多次测试期间，被试没发生任何变化）（二）信度的分类：用同一份试题对同一组考生考两次，所得结果的一致性程度

5、。（）：指将两份程度相同的试题分别对同一组考生进行考试，所得结果的一致性程度。：把一次考试人为地分为两个部分，比较两个部分的一致性程度。（三）内部一致性信度的计算)1(122TiSSkk=（四）对试题信度的要求（五）影响信度的因素（六）如何提高考试的信度1、适当增加考试题目的数量2、进行信度分析的测题应尽量同质3、试题的难度要适中4、考试的程序应统一5、给考生提供良好的考试环境。6、抽取的样本数应达到要求。四、效度（一）效度的含义（二）效度的分类v（三）对效度高低的要求勇于开始，才能找到成功的路Q1：发现问题的能力Q2：判断他人的能力Q3：作出决定的能力Q4：建立团体一致的能力Q5：帮助他人作

6、决定的能力Q6：与团队协同工作的能力因子分析法来估计 例：教学研究人员的能力例：教学研究人员的能力,共包括共包括6 6种能力种能力:问：理论上这六种能力可划分哪两个系列?这是理论上分析得到的能力结构，但与实际测量的数据中所反映的能力结构是否相符？Rotated Component Matrixa.832.877.945.928.949.920 发现问题的能力监督他人的能力作出决定的能力建立团体一致的能力帮助他人作决定的能力与团队协同工作的能力12ComponentExtraction Method:Principal Component Analysis.Rotation Method:Var

7、imax with Kaiser Normalization.Rotation converged in 3 iterations.a.（五）如何提高效度编制测题之前应设计命题计划双向细目表1、命题计划是设计测题的蓝图。它能使命题工作避免盲目性而具有计划性，使测题的内容更完善地反映考试目标，有利于提高考试的效度。2、命题计划往往要通过双向细目表反映出来。双向细目表：包括有两个维度的表格，其中一维是考试内容，主要指考试内容的各章节；另一维是考试目标，考试目标一般以布卢姆的认知目标体系为基础，包括有：知识、理解、应用、分析综合、创见（评价）双向细目表示范1：双向细目表示范2：3、要保证试题的内容效

8、度，具体从以下五步进行命题1）列出课程的主要教学内容和教学目标。可参考课程教学大纲来拟定。2）根据各部分教学内容和教学目标的重要程度，确定它们在测试内容上所占的比例。主要考量以下问题：a)各知识单元在整个学习领域的重要程度如何？b)分配给各知识单元的教学时数比重如何？c)哪些知识单元对未来学习的价值较大些？一般参照教学大纲来确定。3）编写出命题双向细目表。包括考试内容和考试目标的两个维度的表格。4）根据双向细目表正式命题。5）试题编制好后，对其内容进行分析，将试题分析结果 与双向细目表对照，二者吻合度高，则试题内容效度较高。二、试题偏易。台湾绝大部分题目为单项选择题，难度不高。美国ACT的科学

9、推理测试均以题组题的形式出现，整个考卷共分为78个题组题，每个题组题首先为考生提供关于自然科学方面的资料，资料后面提供了5-7道问题。这些资料主要包括三种形式：形象数据呈现（如图形、表格以及其他的图表形式）实验研究摘要（就自然科学方面的某一问题，提供几个相关联的实验描述）对立观点(就自然科学方面的某一问题，提供几个相互矛盾对立的观点或假设)这7个题组题中，有3个通过图表呈现数据，34个是进行实验研究描述，1个提供两个对立的观点。形式1：一项在一块废弃小麦地进行“生态演变”研究:如图一所示，随着时间的演变，植物（动物）的规则级数会发生改变。提示：在生态演变过程中，我们认为植物群落是有规律分布的 在生态演变的早期阶段，占主导地位植物群落称之为优势群落，见图2描述：生态演变的末期阶段，主要特点是极顶群落（在不受干扰下能生长的植物）占了主导地位。图3描述的是松树林如何逐渐演变成阔叶林的。1、从图1中提供的数据可知，80年过后，废弃的小麦地上将会出现：A、仅剩松树 B、仅剩橡树山胡桃树C、有侵略性的杂草（如乍蓬）D、大片的松树林，及阔叶树下层矮生植被2、从松树演变为阔叶树的数据中可知，100年后，松树林的密度为：A、增加，橡树山胡桃树林的密度也增加B、增加，橡树山胡桃树林的密度减少C、减少，橡树山胡桃树林的密度增加D、减少，橡树山胡桃树林的密度也减少