
四成绩分析的方法.ppt
28页四、成绩分析的方法四、成绩分析的方法常规平均分、标准差、优秀率、及格率、低分率、人数、排名、分数段良好率、得分率、最高分、最低分、名次段、成绩等级、百分等级、Z分数、标准分扩展达标平均分、达标贡献值、超均率、比均率、综合水平、虚拟科目难度、区分度、信度、效度、小题指标、选择率、题组分析、注意系数v 指标体系指标体系四、成绩分析的方法四、成绩分析的方法分析报告学生 1、学生分析报告、学生小题对照表班级 2、班级分析报告、班级学科汇总报告学校 3、总体分析报告、学科分析报告、学科汇总分析分析报表班级1、小题分、分数段、小题分析2、学生成绩、各科综合学校1、小题分、分数段、分数段对比、基本指标、名次段分布、综合指标、小题分析、小题平均分对比、小题掌握情况分析、学科分组分析2、学生成绩、平均分对比、各科综合、学科分析v 分析报告、分析报表分析报告、分析报表四、成绩分析的方法四、成绩分析的方法原始得分小题分、学生成绩分布情况分数段、分数段对比、名次段分布成绩统计基本指标、平均分对比、学科分析、各科综合、综合指标答题统计小题分析、小题掌握情况分析、小题平均分对比、学科分组分析注:1、红色报表表示可横向对比报表 2、报表文件组织根据对象范围v 分析报表分析报表分类分类五、主要指标说明五、主要指标说明[ [学生学生] ] 原始分、百分等级、Z分数、标准分、成绩等级、平均分、超均率、比均率、排名、达标贡献值、注意系数[ [群体群体] ] 人数、平均分、最高分、最低分、满分率、零分率、得分率、优秀率、良好率、及格率、低分率、超均率、比均率、排名、标准差、综合水平、达标贡献值、注意系数 分数段分布 名次段分布[ [考试考试] ] 人数、平均分、最高分、最低分、满分率、零分率、得分率、优秀率、良好率、及格率、低分率、标准差、达标平均分、达标贡献值、难度、区分度、信度 分数段分布五、主要指标说明五、主要指标说明Ø 集中量(平均分)(群体、考试、试题、题组) 集中量是代表一组数据典型水平或集中趋势的量。
常用的集中量有平均数、中位数、众数 平均数是使用广泛,也较为简单易懂的一种集中量,它能反映一组数据资料的某种水平 平均数集中代表性好,由于中位数和众数 平均数缺点:受极端数据影响较大Ø 差异量 差异量是描述数据间彼此差异程度的统计量,差异量可分为绝对差异量和相对差异量绝对差异量有全距、平均差、标准差,相对差异量有差异系数 标准差具有反应灵敏、计算简单等特点,所以应用最广泛 CV = * 100%S:标准差X:试题原始分数 :该试题原始分的平均数N:参试人数五、主要指标说明五、主要指标说明Ø 标准差(群体、考试、试题、题组) 标准差是反映一个群体的考生分数之间离散程度的指标它与平均分一起使用,决定了某次考试分数分布情况S值越大,表示部分考生离平均分的“差距越大”,也就是分数分布较广;S值越小,则分数分布较窄或说“集中在平均分附近”Ø 差异系数(群体、考试、试题、题组) 在进行不同组间离散程度比较时,适用于单位相同、平均数相近的情况如果各组数据单位不同,或虽然单位相同但平均数相差甚远时,不能直接用标准差比较,这时应使用差异系数。
五、主要指标说明五、主要指标说明原始分:是考试后直接从卷面上得到的分数标准分:是通过原始分转换而得到的一种地位量数, 它反应考生成绩在全体考生成绩中的位置 Z:Z分数 X:原始分数 :原始分的平均数 S:原始分的标准差 通过转换后得到的标准分Z在一般情况下都带小数,而且会出现负值,实际使用时不太方便,所以还要对Z分数进行线性变换(T变换): T = 500 + 100 * Z (T分数) 如果原始分的分布不符合正态分布的要求,则要先进行正态化处理,再转换为标准分,转换后的分数称为正态化标准分百分等级查表)Ø 标准分(学生、群体、考试、题组)五、主要指标说明五、主要指标说明Ø 成绩等级(学生) A、B、C、D等级制 按分数转换:500 按人数比例转换:50% 按名次转换:500#Ø 百分等级(学生) 百分等级是一种相对地位量数,计算方法是把考生各科的原始分在全体考生中从高到低排序。
算出每一个原始分以下的考生占全体考生总数的百分比这个百分数就称为百分等级 通过百分等级计算标准分Ø 排名(学生、群体、题组) 班排名、校排名、考试排名 同分同名 等值排名五、主要指标说明五、主要指标说明Ø 综合水平(群体) 平均分*1 + 优秀率*2 + 良好率*1.5 + 及格率*1 - 低分率*1Ø 人数(群体、试题) 参加人数、全体人数Ø 平均分(学生、群体、考试、试题、题组) 1卷、2卷、全卷Ø 最高分(群体、考试、试题、题组) 附加分的情况Ø 最低分(群体、考试、试题、题组) 移除0分(忽略缺考)五、主要指标说明五、主要指标说明Ø 优秀率(群体、考试) 按分数转换:500 按人数比例转换:50% 按名次转换:500# 默认80%的分数Ø 良好率(群体、考试) 按分数转换:500 按人数比例转换:50% 按名次转换:500# 默认按70%的分数Ø 及格率(群体、考试) 按分数转换:500 按人数比例转换:50% 按名次转换:500# 默认按60%的分数Ø 低分率(群体、考试) 按分数转换:500 按人数比例转换:50% 按名次转换:500# 默认按40%的分数五、主要指标说明五、主要指标说明Ø 分数段分布(群体、考试) 人数、比例、人数累计、累计比例 >=120 ; 105-120 ; <60Ø 名次段分布(群体、考试) <=10 ; 11-50 ; >=51Ø 得分率(学生、群体、考试、试题、题组) 分值 / 满分值 * 100%五、主要指标说明五、主要指标说明Ø 超均率、比均率(学生、群体) 超均率(比均率)是一个反映某分值超出(或低于)整体水平的程度的数值,常用于进行纵向比较。
超均率 = ( 班级平均分 – 全体平均分 ) / 全体平均分 * 100% 比均率 = 班级平均分 / 全体平均分 * 100%五、主要指标说明五、主要指标说明——难度难度Ø 难度(考试、试题、题组)1、难度的涵义、难度的涵义 难度指测验试题的难易程度试题的难度既可反映试题本身的复难度指测验试题的难易程度试题的难度既可反映试题本身的复杂程度,又可反映教师与学生之间的教与学的状况同一试题,在不杂程度,又可反映教师与学生之间的教与学的状况同一试题,在不同对象、不同环境中使用,所得的难度值不一定相同同对象、不同环境中使用,所得的难度值不一定相同2、难度的计算、难度的计算 难度实为考生的平均分得分率(用难度实为考生的平均分得分率(用P表示) (1)客观题难度计算:客观题难度计算:P = R/N (2)主观题难度计算:主观题难度计算:P = (PH + PL)/2 (3)通用的难度计算:通用的难度计算:P = 得分率得分率 P值越大,试题越容易,相反,值越大,试题越容易,相反,P值越小,试题越难。
值越小,试题越难五、主要指标说明五、主要指标说明——难度难度3、难度评价标准、难度评价标准 学校的考试,其试卷难度一般控制在学校的考试,其试卷难度一般控制在0.7~0.8之间为宜,因为之间为宜,因为这样考试有利于测量学生的真实水平,对不及格率也有较好的控制这样考试有利于测量学生的真实水平,对不及格率也有较好的控制但当难度但当难度<0.4时,试题偏难,学生失分严重,应分析其原因时,试题偏难,学生失分严重,应分析其原因4、影响难度的因素及控制、影响难度的因素及控制 一般说来,影响题目难度的主要因素有:(一般说来,影响题目难度的主要因素有:(1)考察知识点的多)考察知识点的多少;(少;(2)考察能力的复杂程度或层次的高低;()考察能力的复杂程度或层次的高低;(3)考生对题目的)考生对题目的熟悉程度;(熟悉程度;(4)命题的技巧与难度的控制:()命题的技巧与难度的控制:(5)对考生水平的正)对考生水平的正确估计;(确估计;(6)弄清弄懂各知识点等等弄清弄懂各知识点等等 ●一份优秀的试卷,试题的难度应有变化,应使难度适中的试题一份优秀的试卷,试题的难度应有变化,应使难度适中的试题占的分值比例大一些,难度较大的试题占比例小一些,使难度分布呈占的分值比例大一些,难度较大的试题占比例小一些,使难度分布呈正态分布,这样可以保证考试有一定的区分度。
正态分布,这样可以保证考试有一定的区分度 五、主要指标说明五、主要指标说明——区分度区分度Ø 区分度(考试、试题、题组)1、区分度的涵义、区分度的涵义 区分度指测验对考生实际水平的区分程度或鉴别能力通俗地区分度指测验对考生实际水平的区分程度或鉴别能力通俗地说,区分度高的试题(或试卷),能使学业水平高、实际能力强的学说,区分度高的试题(或试卷),能使学业水平高、实际能力强的学生得高分,相反的学生得低分在一定程度上,区分度是评价试题生得高分,相反的学生得低分在一定程度上,区分度是评价试题(或试卷)质量,筛选试题的主要指标和依据或试卷)质量,筛选试题的主要指标和依据2、区分度的计算、区分度的计算 区分度取值介于区分度取值介于 -1.00 — +1.00之间,值越大,区分效果越之间,值越大,区分效果越好,如果是负数,说明实际水平高的得了低分,实际水平低的得了高好,如果是负数,说明实际水平高的得了低分,实际水平低的得了高分每道题的区分度在某种程度上可衡量该题目的优劣,而各题区分分每道题的区分度在某种程度上可衡量该题目的优劣,而各题区分度的加权平均是衡量一份试卷优劣的重要指标。
度的加权平均是衡量一份试卷优劣的重要指标五、主要指标说明五、主要指标说明——区分度区分度3、区分度评价标准、区分度评价标准 区分度越高越好,不同要求的测验,区分度的评价标准可做适区分度越高越好,不同要求的测验,区分度的评价标准可做适当调整,一般地:当调整,一般地:0.4以上以上 优秀;优秀;0.3~0.39 良好,如能改进更好;良好,如能改进更好;0.2~0.29 尚可,需作改进;尚可,需作改进;0.19以下以下 劣,必须淘汰或改进劣,必须淘汰或改进4、提高区分度的方法、提高区分度的方法 ((1)使题目的难度适中,使整个考试难度适中这是提高区分度)使题目的难度适中,使整个考试难度适中这是提高区分度的重要方法的重要方法 ((2)着重考察复杂的学习结果使高能学生得高分或低能学生得)着重考察复杂的学习结果使高能学生得高分或低能学生得低分,使分数尽量分布在整个分数量尺上低分,使分数尽量分布在整个分数量尺上 ((3)掌握区分度的评价标准掌握区分度的评价标准五、主要指标说明五、主要指标说明——区分度区分度 5 5、区分度与难度的关系、区分度与难度的关系 区分度与难度的关系:难度的高低直接影响考生的得分,难度过高或过低的试题(或试卷),考生的得分都比较集中,从而区分度低;难度适中的试题(试卷),不同水平的考生将有较大差异的得分反应,从而有较高区分度。
作为命题者,对试题的难度控制是提供一份优质试卷的关键,这依赖于命题者对教学大纲的理解程度,对教学内容的熟悉程度,对应试者水平的了解程度五、主要指标说明五、主要指标说明——信度信度Ø 信度(考试)1、信度的涵义、信度的涵义 信度指的是测量结果的稳定性或可靠性的程度,亦即测量的结果信度指的是测量结果的稳定性或可靠性的程度,亦即测量的结果是否真实、客观地反映了考生的实际水平是否真实、客观地反映了考生的实际水平 信度是评价整个测量优劣的指标,它揭示测量值(信度是评价整个测量优劣的指标,它揭示测量值(X)与真值)与真值((T)的相差程度,从理论上讲,信度越高,测量结果越可信的相差程度,从理论上讲,信度越高,测量结果越可信2、信度的作用、信度的作用 测验试卷的信度无论学生还是教师都非常重要因为信度低的测测验试卷的信度无论学生还是教师都非常重要因为信度低的测验,其测量结果将无法对学生的学业水平与实际能力做出客观公正的验,其测量结果将无法对学生的学业水平与实际能力做出客观公正的评价,甚至还可能因此而影响到学生的升学与就业即便是对教师而评价,甚至还可能因此而影响到学生的升学与就业。
即便是对教师而言,也只有通过信度高的试卷对学生进行测量及分析,才能达到有效言,也只有通过信度高的试卷对学生进行测量及分析,才能达到有效改进教学的目的改进教学的目的 五、主要指标说明五、主要指标说明——信度信度3、信度指标种类、信度指标种类 A、重复信度(再测信度);、重复信度(再测信度);B、复本信度;、复本信度;C、折半信度(分、折半信度(分半信度);半信度); a系数(克龙巴赫)等系数(克龙巴赫)等4、信度计算方法、信度计算方法 不同的信度指标有不同的计算方法从我国现行的教育体制上看,不同的信度指标有不同的计算方法从我国现行的教育体制上看,我们认为采用我们认为采用a系数(克龙巴赫)的计算方法进行信度指标的计算是系数(克龙巴赫)的计算方法进行信度指标的计算是一种可行且有效的方法一种可行且有效的方法信度系数:信度系数:测验题目数:测验题目数:某题目分数方差:某题目分数方差:测验总分方差:测验总分方差五、主要指标说明五、主要指标说明——信度信度5、信度评价标准、信度评价标准 试卷信度以多大值为合适没有明确标准,可视测验目的和内容试卷信度以多大值为合适没有明确标准,可视测验目的和内容而定。
对学校的阶段性考试而言,而定对学校的阶段性考试而言,R>0.9为优秀试卷,为优秀试卷,0.7<=R<=0.9为较好试卷,为较好试卷,R<0.7为不合格试卷为不合格试卷【【注:信度数值注:信度数值为为0-1之间之间】】6、影响测验信度的因素、影响测验信度的因素 A、被试对象、被试对象 B、主试命题、主试命题 C、施测情境、施测情境 D、测量工具、测量工具 E、施测时间间隔、施测时间间隔其中试卷的难度、题其中试卷的难度、题型、题量、内容等是型、题量、内容等是由命题者把握的,也由命题者把握的,也是影响测验信度的最是影响测验信度的最重要因素重要因素五、主要指标说明五、主要指标说明——信度信度7、提高信度的方法、提高信度的方法 ((1)适当增加测验的长度)适当增加测验的长度 ((2)测验的难度要适中)测验的难度要适中 ((3)测验的内容应尽量同质)测验的内容应尽量同质 ((4)测验的程序应统一)测验的程序应统一 ((5)测验的时间要充分)测验的时间要充分 ((6))测验的评分要尽量做到客观化,减少评分误差测验的评分要尽量做到客观化,减少评分误差五、主要指标说明五、主要指标说明——效度效度Ø 效度(考试)1、效度的涵义、效度的涵义 效度指测量结果的准确性和有效性的程度,亦即测量是否达到预效度指测量结果的准确性和有效性的程度,亦即测量是否达到预期的目的。
期的目的 ■■效度是一个对测量目的或测量结果而言的相对概念任何测量效度是一个对测量目的或测量结果而言的相对概念任何测量结果总是有一定的效度,只是高低不同而已换句话说,不存在没有结果总是有一定的效度,只是高低不同而已换句话说,不存在没有效度的测量效度的测量2、效度的作用、效度的作用 效度通常用于评价任何一种测量或测量工具的有效性一个测验效度通常用于评价任何一种测量或测量工具的有效性一个测验如果没有效度,即使有再多优点,都无法发挥其真正的功能如果没有效度,即使有再多优点,都无法发挥其真正的功能五、主要指标说明五、主要指标说明——效度效度3、效度指标种类、效度指标种类 A、内容效度;、内容效度;B、效标关联效度;、效标关联效度;C、结构效度等结构效度等4、效度计算方法、效度计算方法 内容效度和结构效度都没有简单有效的定量分析方法效标关内容效度和结构效度都没有简单有效的定量分析方法效标关联效度又称统计效度或经验效度,它是以测验分数和效标之间的相关联效度又称统计效度或经验效度,它是以测验分数和效标之间的相关系数来表示系数来表示5、效度评价标准、效度评价标准 效度效度E的数值越接近的数值越接近1,其考试和试卷的有效性就越高,一般,其考试和试卷的有效性就越高,一般地,地,E>0.7为优秀试卷,为优秀试卷,0.4<=E<=0.7为较好试卷,为较好试卷,E<0.4为为不合格试卷。
不合格试卷五、主要指标说明五、主要指标说明——效度效度6、影响测验效度的因素、影响测验效度的因素 A、测验的构成(要素);、测验的构成(要素);B、测验实施(过程);、测验实施(过程);C、被试主、被试主观状态;观状态;D、估计效度所依循的效标;、估计效度所依循的效标; E 、测验样本测验样本 其中测验的构成(包括试题的其中测验的构成(包括试题的难度及分布、试题长度、编排方式、难度及分布、试题长度、编排方式、试题内容试题内容等)对测验效度的影响最大由于它是由命题者掌握或决定等)对测验效度的影响最大由于它是由命题者掌握或决定的,因此,提高测验效度关键在于提高命题者的命题质量和命题水平的,因此,提高测验效度关键在于提高命题者的命题质量和命题水平7、提高测验效度的方法、提高测验效度的方法 A、科学控制系统误差;、科学控制系统误差;B、精心编制测验量表;、精心编制测验量表;C、适度扩充、适度扩充样本的容量和代表性;样本的容量和代表性;D、合理处理效度和信度的关系;、合理处理效度和信度的关系;E、妥善地组、妥善地组织测验;织测验;F、适当增加测验长度。
适当增加测验长度五、主要指标说明五、主要指标说明 根据测验或考试总分数的实现目标(如上本科最低录取控制分数线等目标分数值),按各科试题难度系数的比例分配计算出的各科目标分数值: 在某次考试中,针对某个实现目标,某个考试群体的各科成绩所发挥作用的大小,参试群体可以是个体考生、某班考生、某校考生或某一类考生贡献值成功地把某群体在此次考试中各科目所作贡献大小量化了,同时也成功地把每个考生各科目贡献大小量化了,它具有可比性,因而具有评价作用Ø 达标平均分(考试)Ø达标贡献值(学生、群体、考试)R:该科目达标平均分权值 D:实现目标原始分数值 Pi:各科目试卷难度 P:该科目试卷难度C:达标贡献值 Z:参试群体科目原始分平均分 R:科目达标平均分权值五、主要指标说明五、主要指标说明本本A上线分数(理科)上线分数(理科)557分分语文语文理数理数英语英语理基理基物理物理109104991381070.530.510.480.690.52难度难度达标平均分达标平均分102108102135104某校平均分某校平均分-743-3-3达标贡献值达标贡献值五、主要指标说明五、主要指标说明如:某校考生有如:某校考生有251人,其中总分达到重点线的有人,其中总分达到重点线的有164人,人,上重点线率为上重点线率为 65.34% 。
科目科目语文语文理数理数英语英语理基理基物理物理上有效分人数上有效分人数90901581581891898484200200上有效分率上有效分率35.9%35.9%63.0%63.0%75.3%75.3%33.5%33.5%79.7%79.7%科目科目语文语文理数理数英语英语理基理基物理物理命中人数命中人数81811371371501508080154154命中率命中率90.0%90.0%86.7%86.7%79.4%79.4%95.2%95.2%77.0%77.0%Ø 学科命中率五、主要指标说明五、主要指标说明A学习良好稳定性高A’粗心大意,不细心造成错误B学习尚稳定,需要再用功一点B’偶尔粗心,准备不充分,需要再努力C学历不足,学习不够充分,需要更加努力用功C’学习很不稳定,对考试内容没有准备00.51.050%75%100%得分率注意系数。












