信度与效度分析.ppt
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_05.gif)
《信度与效度分析.ppt》由会员分享,可在线阅读,更多相关《信度与效度分析.ppt(65页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、关于信度与效度分析现在学习的是第1页,共65页 根据调查目的设计的调查问卷是一种测量工具根据调查目的设计的调查问卷是一种测量工具。其质量高低对调查结果的真实性、适用性等具有。其质量高低对调查结果的真实性、适用性等具有决定性的作用。为了保证问卷具有较高的可靠性和决定性的作用。为了保证问卷具有较高的可靠性和有效性。在形成正式问卷之前,应当对问卷进行试有效性。在形成正式问卷之前,应当对问卷进行试测,并对试测结果进行测,并对试测结果进行信度和效度信度和效度分析,根据分析分析,根据分析结果筛选问卷题项,调整问卷结构,从而提高问卷结果筛选问卷题项,调整问卷结构,从而提高问卷的信度和效度。的信度和效度。 调
2、查问卷的信度和效度分析绝非赘疣蛇足,而调查问卷的信度和效度分析绝非赘疣蛇足,而是研究过程中必不可少的重要环节。信度和效度分是研究过程中必不可少的重要环节。信度和效度分析的方法包括逻辑分析和析的方法包括逻辑分析和统计分析。统计分析。 现在学习的是第2页,共65页第一节第一节 信度分析方法信度分析方法 一、信度的概念 信度(Reliability)即可靠性,是指根据测量工具所得到的测量结果的一致性或稳定性,反映客观事物被测特征真实程度的度量指标。一般而言,两次或两个测量的结果愈是一致,则误差愈小,所得的信度愈高。 现在学习的是第3页,共65页 信度信度(reliability)又称稳定性或精确度。
3、用以反映在相同条件下,对同一客观事物测量若干次,测量结果的相互符合程度或一致程度,说明数据的可靠性。当使用同一测量工具重复测量某一客观事物时所得结果的一致程度越高,则该测量工具的信度就越高。 现在学习的是第4页,共65页误差误差( error)( error)是指对事物某一特征的度量值偏是指对事物某一特征的度量值偏离真实值的部分,即测定值与真实值之差,样离真实值的部分,即测定值与真实值之差,样本统计量与总体参数之差。本统计量与总体参数之差。二二 误差的分类误差的分类XTBE实测值实测值 真实值真实值系统误差系统误差 测量误差测量误差现在学习的是第5页,共65页 1.1. 抽样误差抽样误差 二二
4、 误差的分类误差的分类抽样误差抽样误差(sample errorsample error) :由于抽样:由于抽样造成的样本指标与总体指标之间及各样本造成的样本指标与总体指标之间及各样本指标之间的差异。与测量的优劣没有必然指标之间的差异。与测量的优劣没有必然的联系,进行信度和效度分析时,可以忽的联系,进行信度和效度分析时,可以忽略略抽样误差。抽样误差。现在学习的是第6页,共65页 2. 2. 系统误差(系统误差(systematic errorsystematic error) 系统误差是指由于偏倚(使测量结果系统系统误差是指由于偏倚(使测量结果系统地偏离真值,地偏离真值, biasbias)产
5、生的错误结果,与)产生的错误结果,与随机误差不同,可校正和消除。随机误差不同,可校正和消除。 现在学习的是第7页,共65页3. 3. 随机测量误差随机测量误差 随机测量误差随机测量误差(random measurement errorrandom measurement error) 是指在测量过程中,即使消除了系统误差,但由是指在测量过程中,即使消除了系统误差,但由于各种偶然因素的影响也会造成对同一个体的多于各种偶然因素的影响也会造成对同一个体的多次测量结果的不一致,次测量结果的不一致,测量结果发生的偏差往往测量结果发生的偏差往往不具有方向性。不具有方向性。信度主要受随机信度主要受随机测量误
6、差测量误差的影响,的影响, 现在学习的是第8页,共65页 问卷(量表)测量中的测量误差通常来源于两个方问卷(量表)测量中的测量误差通常来源于两个方面:面: 一是产生于问卷(量表)测量过程中的误差,称为测一是产生于问卷(量表)测量过程中的误差,称为测量误差(量误差(measurement Errormeasurement Error),也称为随机误差),也称为随机误差(random errorrandom error);); 二是由问卷(量表)的结构质量造成的误差,称为系二是由问卷(量表)的结构质量造成的误差,称为系统误差(统误差(system Errorsystem Error)。)。 mea
7、surement Error reliability system Error validity现在学习的是第9页,共65页 信度是用估计测量误差大小的尺度,来说明测量结果中测量误差所占的比例。 信度可定义为真实分数(true score)的方差与测量实得分数(observed score) 的方差之比,当实得分数变异可以全部由真实分数的变异解释时,测量误差就是0,这时测量结果的信度为1。 XTBE 实测值实测值真实值真实值系统误差系统误差测量误差测量误差现在学习的是第10页,共65页若用变异表示测量结果的信度,理论上应有 或 式中 表示真实分数的方差; 表示实得分数的方差; 表示误差的方差。
8、22XTXXr221XEXXr2T2X2E现在学习的是第11页,共65页信度包含两层含义:信度包含两层含义: 一是相同的个体在不同时间,以相同的测量工具测量,或以复本测量,或在不同的情景下测量,是否能得到相同的结果,即测量结果是否随时间和地点等因素而变化; 二是能否减少随机误差对测验结果的影响,从而能够反映测量工具所要测量的真实情况,即测量结果是否具有稳定性、可靠性和可预测性。一个好的测量工具必须是稳定可靠的,且多次测量结果应前后一致。现在学习的是第12页,共65页 信度指标多以相关系数表示,大致可分为三类: 稳定系数(跨时间的一致性),等值系数(跨形式的一致性)和内在一致性系数(跨项目的一性
9、)。 三、三、 信度的种类及计算方法与评价信度的种类及计算方法与评价 信度主要是指测量工具是否精准(precision)。信度分析涉及了问卷测量结果的一致性和稳定性,其目的是如何控制和减少随机误差。现在学习的是第13页,共65页三、信度的种类及计算三、信度的种类及计算信度主要分为四大类:信度主要分为四大类:重测信度重测信度(Test-retest Reliability)复本信度复本信度(Alternate-form Reliability)内部一致性信度内部一致性信度(Internal Consistency Reliability)评分者信度评分者信度(Scorer Reliability
10、)现在学习的是第14页,共65页 重测信度是指用同样的测量工具,对同一组被调查者间隔一定时间重复测试,两次测试结果的相关程度。重测信度可以通过两种途径进行考察:1. 重测信度 (1)计算两次测试结果的相关系数,如果经过统计检验,相关关系有统计学意义,则认为测量工具的信度高,否则信度低。也有人提出,测量工具的重测信度可以接受的标准是两次测试的相关系数在0.7以上。 现在学习的是第15页,共65页)()()()(2222nYYnXXnYXXYr重测信度的计算方法现在学习的是第16页,共65页1. 重测信度(2)对两次重复测试结果进行两个相关样本 差异的统计检验,如果差异有统计学意义, 则认为测量工
11、具的信度低,否则,信度高。现在学习的是第17页,共65页 重测信度法特别适用于事实式问卷,如性别、出生年月等在两次施测中不应有任何差异,大多数被调查者的兴趣、爱好、习惯等在短时间内也不会有十分明显的变化。如果没有突发事件导致被调查者的态度、意见突变,这种方法也适用于态度、意见式问卷。由于重测信度法需要对同一样本试测两次,被调查者容易受到各种事件、活动和他人的影响,而且间隔时间长短也有一定限制,因此在实施中有一定困难。1. 重测信度现在学习的是第18页,共65页 复本信度法是让同一组被调查者一次填答两复本信度法是让同一组被调查者一次填答两份问卷复本,计算两个复本的份问卷复本,计算两个复本的相关系
12、数相关系数。复本信度。复本信度法要求两个复本除表述方式不同外,在内容、格式、法要求两个复本除表述方式不同外,在内容、格式、难度和对应题项的提问方向等方面要完全一致,而在难度和对应题项的提问方向等方面要完全一致,而在实际调查中,很难使调查问卷达到这种要求,因此采实际调查中,很难使调查问卷达到这种要求,因此采用这种方法者较少。用这种方法者较少。2. 复本信度现在学习的是第19页,共65页2. 2. 复本信度(复本信度(alternate form reliabilityalternate form reliability) 复本通常是根据相同的设计说明分别独立编制的复本通常是根据相同的设计说明分别
13、独立编制的两个平行问卷两个平行问卷,即题目不同但是内容相似的两份问,即题目不同但是内容相似的两份问卷。复本信度也叫等值性系数(卷。复本信度也叫等值性系数(coefficient of coefficient of equivalenceequivalence)。两个复本间隔一定时间或同时施于同)。两个复本间隔一定时间或同时施于同一答卷者所得分数的相关系数就是复本信度。一答卷者所得分数的相关系数就是复本信度。现在学习的是第20页,共65页 缺点: 如复本编制不容易,易出现顺序效应,受练习的影响; 复本信度只能反应问卷内容所造成的误差,无法反应答卷者本身所造成的误差等。现在学习的是第21页,共65
14、页3. 分半信度 (split-half reliability) 分半信度常用在不可能进行重复调查的情分半信度常用在不可能进行重复调查的情况下。其计算方法是将调查的条目分成两半,计算这况下。其计算方法是将调查的条目分成两半,计算这两半测量结果的相关系数两半测量结果的相关系数r,又称分半信度系数,以此,又称分半信度系数,以此为标准来衡量整个量表的信度。为标准来衡量整个量表的信度。现在学习的是第22页,共65页3. 3. 分半信度分半信度 分半信度是将调查项目分为两半,计算两半得分半信度是将调查项目分为两半,计算两半得分的相关系数,进而估计整个量表的信度。分分的相关系数,进而估计整个量表的信度。
15、分半信度属于内在一致性信度,测量的是两半题半信度属于内在一致性信度,测量的是两半题项得分间的一致性。这种方法一般不适用于事项得分间的一致性。这种方法一般不适用于事实式问卷(如年龄与性别无法相比),常用于实式问卷(如年龄与性别无法相比),常用于态度、意见式问卷的信度分析。在问卷调查中,态度、意见式问卷的信度分析。在问卷调查中,态度测量最常见的形式是态度测量最常见的形式是5级李克特(级李克特(Likert)量表。量表。现在学习的是第23页,共65页3. 3. 分半信度分半信度 使用分半信度评价信度时,应注意:使用分半信度评价信度时,应注意:一是问卷一是问卷题项所测的应是同一种特质;题项所测的应是同
16、一种特质;二是如果量表中二是如果量表中含有反意题项,应先将反意题项的得分作逆向含有反意题项,应先将反意题项的得分作逆向处理,以保证各题项得分方向的一致性。三是处理,以保证各题项得分方向的一致性。三是然后将全部题项按奇偶或前后分为尽可能相等然后将全部题项按奇偶或前后分为尽可能相等的两半,计算二者的相关系数(的两半,计算二者的相关系数(rhh,即半个量,即半个量表的信度系数),最后用斯皮尔曼表的信度系数),最后用斯皮尔曼-布朗布朗(Spearman-Brown)公式:)公式: 求出整个量表的信度系数(求出整个量表的信度系数(ru)。)。hhhhurrr12现在学习的是第24页,共65页 为问卷测验
17、总得分的方差,pi表示答对该题的人数占总答卷人数的比例,pi可视为该题的难度,qi=1-pi 。式中n为问卷包含的题项总数. 4.4.库得库得理查森信度理查森信度 (KuderRichardson)(KuderRichardson)库德-理查森信度适用于计算“对或错”的是非题的同质性信度,其是计算所有可能的分半信度的平均数。最有代表性的计算公式是库德-理查森公式: )1 (12120XniiiKRSqpnnr2XS现在学习的是第25页,共65页 Cronbachs 系数是Cronbach于1951年创立的,用于评价问卷的内部一 致性。系数取值在0到1之间,系数 越高,信度越高,问卷的内部一致性
18、越好。Cronbachs 系数不仅适用于两级记分的问卷,还适用于多级计分的问卷。 5. Cronbachs Cronbachs 信度系数信度系数现在学习的是第26页,共65页 Cronbach 信度系数是目前最常用的信度系数,其计算公式为: 其中,K为量表中题项的总数, 为第i题得分的题内方差, 为全部题项总得分的方差。21211TkiiKK5. Cronbachs 信度系数2i2T现在学习的是第27页,共65页 从公式中可以看出,系数评价的是量表中各题项得分间的一致性,属于内在一致性x信度系数。这种方法适用于态度、意见式问卷(量表)的信度分析。5. Cronbachs Cronbachs 信
19、度系数信度系数现在学习的是第28页,共65页 系数有以下性质:系数有以下性质:(1)系数是所有可能的分半信度的平均值;(2)系数是估计信度的最低限度;(3)当问卷计分为二分名义变量时,即答案为0或1,系数与KR20值相同,即库德-理查森信度公式是克隆巴赫的系数的一个特例。现在学习的是第29页,共65页 低信度:0.35, 中信度:0.350.70,高信度: 0.70 一般地,问卷的系数在0.8以上该问卷才具有使用价值。 Cronbachs 值皆达0.85以上,表明问卷信度良好。现在学习的是第30页,共65页6.6.评分者信度(评分者信度(inter-scorer reliabilityinte
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 信度 分析
![提示](https://www.taowenge.com/images/bang_tan.gif)
限制150内