信度和效度.ppt

问卷测验中测量误差通常来源于两个方面： 一是产生于问卷测验过程中的误差，称为测量误差（measurement Error），也称为随机误差（random error） 二是由问卷的结构质量造成的误差，称为系统误差（system Error） measurement Error reliability system Error validity 2.信度的定义 信度是用估计测量误差大小的尺度，来说明问卷测验结果中测量误差所占的比率。 信度可定义为真实分数(true score)的方差与测验实得分数(observed score) 的方差之比，当实得分数变异可以全部由真实分数的变异解释时，测验误差就是0，这时问卷测验的信度为1。 若用表示问卷测验的信度，理论应有 或 式中 表示真实分数的方差； 表示实得分数的方差； 表示误差的方差。 信度系数类型 ： 重测信度 复本信度 分半信度（Spearman — Brown； Guttman） 库德-理查森系数 克隆巴赫α系数 评分者信度* （1）重测信度(test-retest reliability) 假定短时间内一批对象的状况并没有改变，对每个对象用同一个问卷先后测验两次，两次测验得分的相关系数就称为重测信度。重测信度是用皮尔逊积差相关系数r公式计算的。 重测信度也存在着局限性： 间隔时间长，环境影响； 如果间隔时间短，记忆影响。 (2)复本信度（alternate form reliability） 复本通常是根据相同的设计说明分别独立编制的两个平行问卷，即题目不同但是内容相似的两份问卷。复本信度也叫等值性系数（coefficient of equivalence）。两个复本间隔一定时间或同时施于同一答卷者所得分数的相关系数就是复本信度 缺点： 如复本编制不容易，易出现顺序效应，受练习的影响； 复本信度只能反应问卷内容所造成的误差，无法反应答卷者本身所造成的误差等。 (3)分半信度(split-half reliability) 当测验没有复本且测验不可避免地受到时间的影响，只适合用于一次测验时，可用分半信度。 分半的方法很多，一般是将奇数题和偶数题各作为一半，而非前后分半，目的是避免顺序效应。分半信度也叫折半信度，其计算方法是将问卷的题目分成对等的两半，分别求出两半题目的总分，再计算两部分总分的相关系数。 使用分半信度时要注意两个问题： 一是问卷题目所测的应是同一种特质； 二是两半题目应是等值的。对问卷题目进行分半会造成了对整个问卷信度的低估，为此需要对分半信度进行校正。 (4)库得─理查森信度 (Kuder ─ Richardson) 库德-理查森信度适用于计算“对或错”的是非题的同质性信度，其是计算所有可能的分半信度的平均数。 最有代表性的计算公式是库德-理查森公式: (5)克隆巴赫信度系数 (Cronbach’s α) Cronbach’s α系数是Cronbach于1951年创立的，用于评价问卷的内部一致性。α系数取值在0到1之间，α系数越高，信度越高，问卷的内部一致性越好。Cronbach’s α系数不仅适用于两级记分的问卷，还适用于多级计分的问卷。 其计算公式为： α系数有以下性质： （1）α系数是所有可能的分半信度的平均值； （2）α系数是估计信度的最低限度； （3）当问卷计分为二分名义变量时，即答案为0或1，α系数与KR20值相同，即库德-理查森信度公式是克隆巴赫的α系数的一个特例。 低信度：α0.35, 中信度： 0.35α0.70,高信度： 0.70α 一般地，问卷的α系数在0.8以上该问卷才具有使用价值。 Cronbach‘s α值皆达0.85以上，表明问卷信度良好。 (6)评分者信度（inter-scorer reliability）* 考察评分者信度的方法为，随机抽取相当份数的问卷，由两位评分者按记分规则分别给分；然后根据每份问卷的分数计算相关系数，就得到评分者信度。评分者信度也可以是一位评分者两次评分的相关系数。如果是多个评分者或一位评分者两次以上的评分，可采用肯德尔和谐系数和Kappa系数。肯德尔和谐系数用于等级资料，Kappa系数用于定性资料。 5.提高信度的方法 问卷的信度越高，受到人、时、地、物的干扰就越低，其所能反应事实或让人相信的程度越高，因此在问卷实施前如何有效提高信度是问卷测验成败的关键。通常提高问卷信度的方法为： （1）适当延长问卷的长度 问卷题目较