第三章 信度.ppt

教育统计与测评;第一节　误差源与信度 ;二、信度的操作定义 ;三、测验的误差源 ;第二节　再测信度 ;或：;使用积差相关法的条件： （1）两个变量都是连续性数据； （2）两个变量的总体呈正态分布，或接近于正态分布，至少是单峰对称的分布； （3）必须是成对的数据，每对数据之间是相互独立的，而且变量对数N30； （4）两个变量之间呈线性关系； ;二、适用范围及优缺点 ;２、优缺点 优点：两次测验只需要一套题，省时省力； 同一套题目无论施测几次，所测属性完全相同； 最符合重复测验的涵义。 缺点：易受记忆的影响，使第二次测验的分数有系统性的增加； 如两次测验时间间隔较长，被试身心的发展和新知识的获得会使两次测验结果不同； 第二次测验会降低被试的兴趣，因此一般情况下不要告知是重复测验。 ;第三节　复本信度 ;例2：假设对10名学生用两个等值的测验A、B施测，测验实得分数分别用X和Y表示，测验结果如下：求该测验的信度？;本例仍利用积差相关系数计算复本信度。;二、适用范围及优缺点 ;第四节　内在一致性信度;（一）０、１记分测验的分半信度;估计方法： 1、斯皮尔曼——布朗（Spearman—Brown）公式 校正法 先将测验分为两个“半测验”，用积差相关系数公式计算两个“半测验”的相关系数，然后用斯皮尔曼——布朗（Spearman—Brown）公式 校正。;被试;2、卢农（Rulon)公式估计法;同质性测验指组成测验的各个部分都以同等的程度测量着被试的同一种属性，测题之间高度相关的测验。 使用库德——理查逊（Kuder—Richarson）公式来估计同质性测验的信度，不需要将试题进行分半处理。 1、K—R20公式;2、K—R21公式 ;例：10名被试在某测验上的得分情况;例：;（三）非０、１记分同质性测验的内在一致性信度 ;例： 5名被试在某测验上的得分情况;二、内在一致性信度的适用范围与优点;第五节　评分者信度;２、两个评分者，测题等级记分 使用斯皮尔曼等级相关公式 ;例：某次物理测验，两位评分教师对10名学生进行评分，并评定了等级，计算两位评分者等级评分的相关系数。（如一个评分者给不同被试相同等级，则其等级取平均值）;计算得rtt＝0.67， 显著性水平取0.05，n=10,df=n-2=8 查等级相关系数界值表得r0.05(10)=0.738, rxxr0.05(10) , 说明两评分人所评分数不相关，故测验评阅人信度低，评分结果不可靠，作出此结论的可靠度为95％。;３、多个评分者，测题连续记分 使用柯龙贝（L.J.Cronbach）的?系数公式 ;例：某次测验有三位评分者对7个学生的问答题进行评分，这三位评分者的评分是否一致？;;４、多个评分者，测题等级记分 使用肯德尔（Kandall）和谐系数公式。 ;例：肯德尔和谐系数计算说明; 等级评定时，若遇到两个或两个以上被试的等级相同，计算肯德尔和谐系数采用下面的修正公式：;例：有相同等级时肯德尔和谐系数的计算;二、评分者信度与其它几种信度的区别 不同的信度针对的是不同的误差源及其不同方面，因此一种信度高不代表另一种信度也高。如测验的复本信度高，其内在一致性可能比较小。评分者信度高，其复本信度却比较小。 １、评分者信度是两个或几个评分者之间对于同一组测验结果评定的一致性程度。 ２、再测信度是同一组被试对同一个测验先后两次测验成绩的一致性程度，反映测题在时间上的稳定程度。 ３、复本信度是同一组被试在两个等值测验上成绩的一致性程度，反映特殊测题对一般能力测量的一致程度。 ４、内在一致性信度是测验内部各部分测量结果的一致性程度，与复本信度相似，反映特殊测题对一般能力测量的一致程度。 评分者信度与其它信度的相关性很低。 ;第六节　提高测验信度的方法 影响测验信度的主要因素是随机误差，其次是抽样误差。因此，影响测验信度的因素可分为两类：一类是测验本身，如测验的长度、测验的难度、测验的区分度、测验的速度、测验的程序、测验的环境条件以及评分方法等；另一类来自被试，如被试在某种能力或某种成绩上的整齐度、参加测验的动机水平、对测验的态度和积极性等。 提高信度的具体方法有： １、延长测验的长度。 就一项测验而言，题目越少，测验越短，得分就越容易受试题抽样的偶然因素的影响，测验的信度就越低。测验长度的增加和信度的提高不是等比例的。从rxx提高到rtt，测验长度应增加的倍数的求解公式： ;２、测验的难度要适中 测验的难度太大时，被试得分普遍偏低；测验难度太小时，被试得分普遍偏高。这两种情况，得分集中在高分端或低分端，分数分布的范围和分数之间的差异小，测验的方差也小