
问卷调查的信度分析方法.doc
4页问卷调查法是教育研究中广泛采用的一种调查方法,根据调查目的设计的调查问卷调查法是教育研究中广泛采用的一种调查方法,根据调查目的设计的调查 问卷是问卷调查法获取信息的工具,其质量高低对调查结果的真实性、适用性问卷是问卷调查法获取信息的工具,其质量高低对调查结果的真实性、适用性 等具有决定性的作用为了保证问卷具有较高的可靠性和有效性,在形成正式等具有决定性的作用为了保证问卷具有较高的可靠性和有效性,在形成正式 问卷之前,应当对问卷进行试测,并对试测结果进行信度和效度分析,根据分问卷之前,应当对问卷进行试测,并对试测结果进行信度和效度分析,根据分 析结果筛选问卷题项,调整问卷结构,从而提高问卷的信度和效度信度和效析结果筛选问卷题项,调整问卷结构,从而提高问卷的信度和效度信度和效 度分析的方法包括逻辑分析和统计分析,本文主要讨论后者度分析的方法包括逻辑分析和统计分析,本文主要讨论后者 一、信度分析一、信度分析信度(信度(ReliabilityReliability)即可靠性,它是指采用同样的方法对同一对象重复测)即可靠性,它是指采用同样的方法对同一对象重复测 量时所得结果的一致性程度信度指标多以相关系数表示,大致可分为三类:量时所得结果的一致性程度。
信度指标多以相关系数表示,大致可分为三类: 稳定系数(跨时间的一致性),等值系数(跨形式的一致性)和内在一致性系稳定系数(跨时间的一致性),等值系数(跨形式的一致性)和内在一致性系 数(跨项目的一致性)信度分析的方法主要有以下四种:数(跨项目的一致性)信度分析的方法主要有以下四种:1 1、重测信度法、重测信度法这一方法是用同样的问卷对同一组被调查者间隔一定时间重复施测,计算这一方法是用同样的问卷对同一组被调查者间隔一定时间重复施测,计算 两次施测结果的相关系数显然,重测信度属于稳定系数重测信度法特别适两次施测结果的相关系数显然,重测信度属于稳定系数重测信度法特别适 用于事实式问卷,如性别、出生年月等在两次施测中不应有任何差异,大多数用于事实式问卷,如性别、出生年月等在两次施测中不应有任何差异,大多数 被调查者的兴趣、爱好、习惯等在短时间内也不会有十分明显的变化如果没被调查者的兴趣、爱好、习惯等在短时间内也不会有十分明显的变化如果没 有突发事件导致被调查者的态度、意见突变,这种方法也适用于态度、意见式有突发事件导致被调查者的态度、意见突变,这种方法也适用于态度、意见式 问卷由于重测信度法需要对同一样本试测两次,被调查者容易受到各种事件、问卷。
由于重测信度法需要对同一样本试测两次,被调查者容易受到各种事件、 活动和他人的影响,而且间隔时间长短也有一定限制,因此在实施中有一定困活动和他人的影响,而且间隔时间长短也有一定限制,因此在实施中有一定困 难2 2、复本信度法、复本信度法复本信度法是让同一组被调查者一次填答两份问卷复本,计算两个复本的复本信度法是让同一组被调查者一次填答两份问卷复本,计算两个复本的 相关系数复本信度属于等值系数复本信度法要求两个复本除表述方式不同相关系数复本信度属于等值系数复本信度法要求两个复本除表述方式不同 外,在内容、格式、难度和对应题项的提问方向等方面要完全一致,而在实际外,在内容、格式、难度和对应题项的提问方向等方面要完全一致,而在实际 调查中,很难使调查问卷达到这种要求,因此采用这种方法者较少调查中,很难使调查问卷达到这种要求,因此采用这种方法者较少3 3、折半信度法、折半信度法折半信度法是将调查项目分为两半,计算两半得分的相关系数,进而估计折半信度法是将调查项目分为两半,计算两半得分的相关系数,进而估计 整个量表的信度折半信度属于内在一致性系数,测量的是两半题项得分间的整个量表的信度折半信度属于内在一致性系数,测量的是两半题项得分间的 一致性。
这种方法一般不适用于事实式问卷(如年龄与性别无法相比),常用一致性这种方法一般不适用于事实式问卷(如年龄与性别无法相比),常用 于态度、意见式问卷的信度分析在问卷调查中,态度测量最常见的形式是于态度、意见式问卷的信度分析在问卷调查中,态度测量最常见的形式是 5 5 级李克特(级李克特(LikertLikert)量表进行折半信度分析时,如果量表中含有反意题项,)量表进行折半信度分析时,如果量表中含有反意题项, 应先将反意题项的得分作逆向处理,以保证各题项得分方向的一致性,然后将应先将反意题项的得分作逆向处理,以保证各题项得分方向的一致性,然后将 全部题项按奇偶或前后分为尽可能相等的两半,计算二者的相关系数(全部题项按奇偶或前后分为尽可能相等的两半,计算二者的相关系数(r rhhhh,即,即 半个量表的信度系数),最后用斯皮尔曼半个量表的信度系数),最后用斯皮尔曼- -布朗(布朗(Spearman-BrownSpearman-Brown)公式:)公式:求出整个量表的信度系数(求出整个量表的信度系数(r ru u)4 4、、αα 信度系数法信度系数法CronbachCronbach αα 信度系数是目前最常用的信度系数,其公式为:信度系数是目前最常用的信度系数,其公式为:其中,其中,K K 为量表中题项的总数,为量表中题项的总数, 为第为第 i i 题得分的题内方差,题得分的题内方差, 为全部题项为全部题项 总得分的方差。
从公式中可以看出,总得分的方差从公式中可以看出,αα 系数评价的是量表中各题项得分间的一系数评价的是量表中各题项得分间的一 致性,属于内在一致性系数这种方法适用于态度、意见式问卷(量表)的信致性,属于内在一致性系数这种方法适用于态度、意见式问卷(量表)的信 度分析 二、效度分析二、效度分析效度(效度(ValidityValidity)即有效性,它是指测量工具或手段能够准确测出所需测)即有效性,它是指测量工具或手段能够准确测出所需测 量的事物的程度效度分为三种类型:内容效度、准则效度和结构效度效度量的事物的程度效度分为三种类型:内容效度、准则效度和结构效度效度 分析有多种方法,其测量结果反映效度的不同方面常用于调查问卷效度分析分析有多种方法,其测量结果反映效度的不同方面常用于调查问卷效度分析 的方法主要有以下几种的方法主要有以下几种1 1、单项与总和相关效度分析、单项与总和相关效度分析这种方法用于测量量表的内容效度内容效度又称表面效度或逻辑效度,这种方法用于测量量表的内容效度内容效度又称表面效度或逻辑效度, 它是指所设计的题项能否代表所要测量的内容或主题对内容效度常采用逻辑它是指所设计的题项能否代表所要测量的内容或主题。
对内容效度常采用逻辑 分析与统计分析相结合的方法进行评价逻辑分析一般由研究者或专家评判所分析与统计分析相结合的方法进行评价逻辑分析一般由研究者或专家评判所 选题项是否选题项是否““看上去看上去””符合测量的目的和要求统计分析主要采用单项与总和符合测量的目的和要求统计分析主要采用单项与总和 相关分析法获得评价结果,即计算每个题项得分与题项总分的相关系数,根据相关分析法获得评价结果,即计算每个题项得分与题项总分的相关系数,根据 相关是否显著判断是否有效若量表中有反意题项,应将其逆向处理后再计算相关是否显著判断是否有效若量表中有反意题项,应将其逆向处理后再计算 总分2 2、准则效度分析、准则效度分析准则效度又称为效标效度或预测效度准则效度分析是根据已经得到确定准则效度又称为效标效度或预测效度准则效度分析是根据已经得到确定 的某种理论,选择一种指标或测量工具作为准则(效标),分析问卷题项与准的某种理论,选择一种指标或测量工具作为准则(效标),分析问卷题项与准 则的联系,若二者相关显著,或者问卷题项对准则的不同取值、特性表现出显则的联系,若二者相关显著,或者问卷题项对准则的不同取值、特性表现出显 著差异,则为有效的题项。
评价准则效度的方法是相关分析或差异显著性检验著差异,则为有效的题项评价准则效度的方法是相关分析或差异显著性检验 在调查问卷的效度分析中,选择一个合适的准则往往十分困难,使这种方法的在调查问卷的效度分析中,选择一个合适的准则往往十分困难,使这种方法的 应用受到一定限制应用受到一定限制3 3、结构效度分析、结构效度分析结构效度是指测量结果体现出来的某种结构与测值之间的对应程度结构结构效度是指测量结果体现出来的某种结构与测值之间的对应程度结构 效度分析所采用的方法是因子分析有的学者认为,效度分析最理想的方法是效度分析所采用的方法是因子分析有的学者认为,效度分析最理想的方法是 利用因子分析测量量表或整个问卷的结构效度因子分析的主要功能是从量表利用因子分析测量量表或整个问卷的结构效度因子分析的主要功能是从量表 全部变量(题项)中提取一些公因子,各公因子分别与某一群特定变量高度关全部变量(题项)中提取一些公因子,各公因子分别与某一群特定变量高度关 联,这些公因子即代表了量表的基本结构通过因子分析可以考察问卷是否能联,这些公因子即代表了量表的基本结构通过因子分析可以考察问卷是否能 够测量出研究者设计问卷时假设的某种结构。
在因子分析的结果中,用于评价够测量出研究者设计问卷时假设的某种结构在因子分析的结果中,用于评价 结构效度的主要指标有累积贡献率、共同度和因子负荷累积贡献率反映公因结构效度的主要指标有累积贡献率、共同度和因子负荷累积贡献率反映公因 子对量表或问卷的累积有效程度,共同度反映由公因子解释原变量的有效程度,子对量表或问卷的累积有效程度,共同度反映由公因子解释原变量的有效程度, 因子负荷反映原变量与某个公因子的相关程度在结束本文时应再次强调,为因子负荷反映原变量与某个公因子的相关程度在结束本文时应再次强调,为 了提高调查问卷的质量,进而提高整个研究的价值,问卷的信度和效度分析绝了提高调查问卷的质量,进而提高整个研究的价值,问卷的信度和效度分析绝 非赘疣蛇足,而是研究过程中必不可少的重要环节非赘疣蛇足,而是研究过程中必不可少的重要环节另外转的资料:另外转的资料: 一、信度的考验一、信度的考验(一)稳定性系数(重测信度)(一)稳定性系数(重测信度)重测信度是用同一批受试者做同一份量表,然后以前、后两次测验的分数做积差相关重测信度是用同一批受试者做同一份量表,然后以前、后两次测验的分数做积差相关 通常两次测验的间隔多以两周为度,有的量表甚至因其需要也有高达一个月或数个月的情通常两次测验的间隔多以两周为度,有的量表甚至因其需要也有高达一个月或数个月的情 形。
两次测验的相关若越高,则代表其越具有稳定性一般而言,形两次测验的相关若越高,则代表其越具有稳定性一般而言,.7~.9.7~.9 是属高相关,是属高相关,.4~.6.4~.6 是属中度相关,而是属中度相关,而.3.3 以下则是低相关以下则是低相关二)内部一致性系数((二)内部一致性系数(CronbachCronbach αα、折半信度)、折半信度)假如所得的假如所得的 CronbachCronbach αα 系数越高,则代表其测验的内容越趋于一致其次,内部一系数越高,则代表其测验的内容越趋于一致其次,内部一 致性系数还可用折半信度来求得,但由于折半信度是将题目分成两半分别求得两个总分致性系数还可用折半信度来求得,但由于折半信度是将题目分成两半分别求得两个总分 (通常是分为奇数题和偶数题),然后再以积差相关求两个分数的相关由于题目被分为(通常是分为奇数题和偶数题),然后再以积差相关求两个分数的相关由于题目被分为两半,常会造成信度偏低的现象因此,需要再加以校正较常用的校正方法有斯布两半,常会造成信度偏低的现象因此,需要再加以校正较常用的校正方法有斯布 ((Spearman-BrownSpearman-Brown)、福乐兰根()、福乐兰根(FlanaganFlanagan)、卢隆()、卢隆(RulonRulon)等校正公式。
