1、第六节第六节测验编制的一般程序测验编制的一般程序第六章第六章 测验编制的一般程序测验编制的一般程序v第一单元第一单元 测验的目标分析测验的目标分析v第二单元第二单元 测题的编写测题的编写v第三单元第三单元 测验的编排和组织测验的编排和组织第一单元第一单元 测验的目标分析测验的目标分析v一、测验的对象一、测验的对象v二、测验的用途二、测验的用途v三、测验的目标三、测验的目标一一.明确测验对象明确测验对象v明确测量哪些个人或团体明确测量哪些个人或团体年龄年龄性别性别职业职业受教育程度受教育程度经济状况经济状况民族民族文化背景文化背景二二.测验的用途测验的用途v显示性测验显示性测验:是指测验题目和所
2、要测量的是指测验题目和所要测量的心理特征相似的测验心理特征相似的测验样本测验样本测验:题目取自明确的总体题目取自明确的总体标记测验标记测验:题目取自全开放的总体题目取自全开放的总体v预测性测验预测性测验:预测一些没被测量的行为的预测一些没被测量的行为的测验测验三三.明确测验目标明确测验目标v明确测量什么心理特质和行为特征明确测量什么心理特质和行为特征v目标具体化目标具体化,转换成可操作的术语转换成可操作的术语,这这个过程称为个过程称为目标分析过程目标分析过程目标分析三种情况目标分析三种情况v工作分析工作分析(job analysis)(job analysis)v对特定概念下定义对特定概念下定
3、义v确定测验的具体内容确定测验的具体内容对于选拔和预测功对于选拔和预测功用用 的预测性测验的预测性测验.两个步骤:一是确两个步骤:一是确定哪些定哪些心理特征和心理特征和行为行为可能使要预测可能使要预测的活动成功,二是的活动成功,二是建立衡量被试是否建立衡量被试是否成功的标准成功的标准。目标分析三种情况目标分析三种情况v工作分析工作分析v对特定概念下定义对特定概念下定义v确定测验的具体内容确定测验的具体内容操作性定义操作性定义:是指:是指用可感知、度量的用可感知、度量的事物、事件、现象事物、事件、现象和方法对变量或指和方法对变量或指标作出具体的界定标作出具体的界定说明。说明。瑟斯顿分解的智力基本
4、因素瑟斯顿分解的智力基本因素v(1)(1)语文理解语文理解阅读时了解文义的能力。阅读时了解文义的能力。v(2)(2)词语流畅词语流畅准确迅速拼词与敏捷联想词义的能力。准确迅速拼词与敏捷联想词义的能力。v(3)(3)数学运算数学运算准确迅速运用数字解答数学问题的能力。准确迅速运用数字解答数学问题的能力。v(4)(4)空间关系空间关系-准确迅速判断空间方向与空间位置关系的准确迅速判断空间方向与空间位置关系的能力。能力。v(5)(5)机械记忆机械记忆对事物进行强记的能力。对事物进行强记的能力。v(6)(6)知觉速度知觉速度准确迅速观察和识别事物的能力。准确迅速观察和识别事物的能力。v(7)(7)一般
5、推理一般推理根据已知判断推出未知判断的能力。根据已知判断推出未知判断的能力。目标分析三种情况目标分析三种情况v工作分析工作分析v对特定概念下定义对特定概念下定义v确定测验的具体内容确定测验的具体内容描述性的显示描述性的显示测验,目标分测验,目标分析的主要任务析的主要任务是是确定显示的确定显示的内容和技能内容和技能,从中从中取样取样。双项细目表双项细目表 行为行为目标目标 内容目标内容目标 记忆记忆理解理解应用应用分析分析综合综合评价评价权重权重一一10104 40 03 32 21 12020二二5 55 53 32 22 23 32020三三5 55 55 55 54 46 63030四四1
6、 12 23 32 22 20 01010五五5 55 53 33 32 22 22020合计合计262621211414151512121212100100双项细目表的用途双项细目表的用途v编题阶段指出应该编多少题目,哪些编题阶段指出应该编多少题目,哪些种类的题目。在编制好题目后进行对种类的题目。在编制好题目后进行对照。照。v确定每类题目的确定每类题目的百分比百分比。20082008年年1111月(二级)月(二级)v107107、心理测验的目标分析以测验不同而异,、心理测验的目标分析以测验不同而异,一般可分为(一般可分为()v A A、工作分析、工作分析 v B B、对特定概念下定义、对特定
7、概念下定义v C C、编写测题、编写测题 v D D、确定测验的具体内容、确定测验的具体内容第二单元第二单元 测题的编写测题的编写v一、搜集资料一、搜集资料v二、命题的一般原则二、命题的一般原则v三、测题的编制要领三、测题的编制要领心理测验编制的基本程序心理测验编制的基本程序v收集测验资料收集测验资料v选择项目形式选择项目形式v编写测验项目编写测验项目(1)(1)资料要丰富。资料要丰富。(2)(2)资料要有普遍性。资料要有普遍性。(3)(3)资料要有趣味性。资料要有趣味性。题目的来源题目的来源v已出版的标准测验已出版的标准测验v理论和专家的经验理论和专家的经验v临床观察和记录临床观察和记录20
8、062006年年1111月月v5050、心理测验题目的来源应该排除(、心理测验题目的来源应该排除()。)。v(A A)直接翻译国外测验的题目)直接翻译国外测验的题目(B B)已出版的标准测验)已出版的标准测验(C C)理论和专家的经验)理论和专家的经验(D D)临床观察和记录)临床观察和记录命题的一般原则命题的一般原则v内容方面内容方面v文字方面文字方面v理解方面理解方面v社会敏感方面社会敏感方面测题的种类及编写要领测题的种类及编写要领两大类:两大类:v提供型提供型(supplysupply)自由应答型或开放式,题)自由应答型或开放式,题目要求被试给出正确答案。目要求被试给出正确答案。v选择型
9、选择型(selectionselection)题目要求被试在有限的)题目要求被试在有限的几个答案中选择正确的答案。几个答案中选择正确的答案。选择题编写要领选择题编写要领v题干问题明确,简单,明晰题干问题明确,简单,明晰v选项切忌冗长,要简明扼要选项切忌冗长,要简明扼要v答案唯一答案唯一v避免提供选择答案的线索避免提供选择答案的线索v选项最好用同一形式选项最好用同一形式是非题编写要领是非题编写要领v1内容应以内容应以有意义有意义的概念、事实或基本原则为基础,不要的概念、事实或基本原则为基础,不要在叙述中出现琐碎的细节或无关的话语,不要照抄原文。在叙述中出现琐碎的细节或无关的话语,不要照抄原文。v
10、2 2每道题只能包含每道题只能包含一个概念一个概念,避免两个或两个以上的概念,避免两个或两个以上的概念出现在同一个题目中,造成出现在同一个题目中,造成“半对半错半对半错或或“似是而非似是而非”的情况。的情况。v3 3尽量尽量避免否定避免否定的叙述,尤其是要避免用双重否定的叙述。的叙述,尤其是要避免用双重否定的叙述。v4 4若是表达意见的题目,最好说明若是表达意见的题目,最好说明意见的来源和根据意见的来源和根据,以,以便测出被试是否了解某个人或某些人的意见、信念或价值观便测出被试是否了解某个人或某些人的意见、信念或价值观念等。念等。v5 5“是是”、“非非”题的数目应有适应比例题的数目应有适应比
11、例,基本相等,且,基本相等,且要随机排列。要随机排列。“是是”、“非非”题目的编写在长度和复杂性上题目的编写在长度和复杂性上应尽量保持一致应尽量保持一致.简答题编写要领简答题编写要领v1 1宜用宜用问句问句形式。如果使用未完成的句子,形式。如果使用未完成的句子,则空格尽量放在最后。则空格尽量放在最后。v2 2如果是填充形式,如果是填充形式,空格不宜太多空格不宜太多,过多空,过多空格会使题意不明确,并且所空出的应该是关格会使题意不明确,并且所空出的应该是关键词句。键词句。v3 3每题应每题应只有一个正确答案只有一个正确答案,而且答案要简,而且答案要简短而具体。对不短而具体。对不完整的答案,应事先
12、规定评完整的答案,应事先规定评分标准。分标准。简答例:简答例:v使用直接问句可避免题意模糊不清的缺点:使用直接问句可避免题意模糊不清的缺点:v不佳:芦沟桥事变发生在(不佳:芦沟桥事变发生在()。(可以)。(可以填地名、抗战前等)填地名、抗战前等)v较佳:芦沟桥事变发生在什么时候?(亦可较佳:芦沟桥事变发生在什么时候?(亦可填抗战前等)填抗战前等)v最佳:芦沟桥事变发生在哪一年?(只能填最佳:芦沟桥事变发生在哪一年?(只能填年份)年份)20092009年年5 5月(二级)月(二级)v7777、不属于编制简答题原则的是()、不属于编制简答题原则的是()v(A A)将其操作化)将其操作化v(B B)
13、宜用问句形式)宜用问句形式v(C C)填充形式的空格不宜太多)填充形式的空格不宜太多v(D D)每题应只有一个正确答案)每题应只有一个正确答案操作题编写要领操作题编写要领v(1)(1)明确所要测量的明确所要测量的目标目标,并将其操作化。,并将其操作化。v(2)(2)选择合适的选择合适的真实性程度真实性程度。v(3)(3)指示语简单明确指示语简单明确,使被试知道要干什么和,使被试知道要干什么和在什么条件下去做,以及评价的依据。在什么条件下去做,以及评价的依据。v(4)(4)确定确定计分的方法计分的方法。作品量表作品量表(product scale)(product scale)检核表检核表 评定
14、量表评定量表内容方面内容方面v题目内容符合题目内容符合测验目的测验目的v内容内容取样取样要有代表性要有代表性v题目间内容相互题目间内容相互独立独立文字方面文字方面v使用准确的使用准确的当代文字当代文字v语句语句简单扼要简单扼要v一句话中一句话中不要不要使用使用两个两个或两个以上或两个以上的观念的观念v意义意义明确明确,不要暧昧不要暧昧,少用双重否定少用双重否定理解方面理解方面v应有确切答案应有确切答案v 题目的内容不要超出受测团体的知识水题目的内容不要超出受测团体的知识水平和理解能力平和理解能力v题目格式不被人误解题目格式不被人误解社会敏感性方面社会敏感性方面v应尽量避开应尽量避开,必须涉及的
15、要鼓励被试作必须涉及的要鼓励被试作出真实的回答出真实的回答.v菲力普的几条策略菲力普的几条策略:命题假定被试具有某种行为命题假定被试具有某种行为命题时假定规范不一致命题时假定规范不一致指出该行为是常见的指出该行为是常见的,虽然是违规的虽然是违规的.第三单元第三单元 测验的编排和组织测验的编排和组织v一、合成测验一、合成测验v二、预测和项目分析二、预测和项目分析v三、信度和效度考察三、信度和效度考察v四、常模制订四、常模制订v五、编写指导手册五、编写指导手册一、合成测验一、合成测验(一)选择与审定试题一)选择与审定试题v1 1、选择试题形式、选择试题形式v2 2、审定题目、审定题目选择题目形式选
16、择题目形式v测验的目的和材料的性质测验的目的和材料的性质v接受测验的团体的特点接受测验的团体的特点v各种实际因素各种实际因素2.2.审定题目审定题目v题目的题目的范围范围应与测验计划所列的双向细目应与测验计划所列的双向细目表相一致表相一致v题目的题目的数量数量要比最后所需的多一倍至几倍要比最后所需的多一倍至几倍v题目的题目的难度难度必须符合测验目的的需要必须符合测验目的的需要v题目的题目的说明说明必须清楚明白必须清楚明白(二)测题的编排一般原则(二)测题的编排一般原则v测验题的测验题的难度难度排列宜逐步上升排列宜逐步上升v尽可能将尽可能将同类型同类型的测量组合在一起的测量组合在一起v注意根据各
17、种类型注意根据各种类型测题本身的特点测题本身的特点排排列题目。列题目。两种常见的测验项目的排列方式两种常见的测验项目的排列方式v (1)(1)并列直进式并列直进式:此种方式是将整个测验按此种方式是将整个测验按测验项目材料的性质归为若干分测验,对于测验项目材料的性质归为若干分测验,对于同一分测验的测验项目,则依其难度由易到同一分测验的测验项目,则依其难度由易到难排列。难排列。v (2)(2)混合螺旋式混合螺旋式:此种方式是先将各类测验:此种方式是先将各类测验项目依难度分成若干不同的层次,再将不同项目依难度分成若干不同的层次,再将不同性质的测验项目予以组合,作交叉式的排列,性质的测验项目予以组合,
18、作交叉式的排列,其难度则渐次升进。其难度则渐次升进。20062006年年1111月考题(月考题(20092009年年5 5月三级)月三级)v多选:多选:103103、测题常见的排列方式有(、测题常见的排列方式有()。)。v (A A)并列直进式)并列直进式 (B B)公共汽车式)公共汽车式 (C C)混合螺旋式)混合螺旋式 (D D)专列式)专列式二、预测和项目分析二、预测和项目分析v(一)预测(一)预测v(二)项目分析(二)项目分析预测应注意问题预测应注意问题v(1)(1)预测预测对象对象应取自将来正式测验时准备施应取自将来正式测验时准备施用的群体,虽然人数不必太多,但要具有代用的群体,虽然
19、人数不必太多,但要具有代表性。表性。v (2)(2)预测的预测的情境情境应力求同正式测验的情境一应力求同正式测验的情境一致。致。v (3)(3)预测的预测的时限时限可以适当延长,以便每一受可以适当延长,以便每一受测者都能将题目做完。测者都能将题目做完。v (4)(4)施测者应对受测者的施测者应对受测者的反应加以记录反应加以记录。三、信度和效度考察三、信度和效度考察v信度信度指的是测验的可靠性,即用同一测验指的是测验的可靠性,即用同一测验多次测量同一团体,所得测验结果之间具多次测量同一团体,所得测验结果之间具有一致性。有一致性。v效度效度指的是测验的有效性,即一个测验在指的是测验的有效性,即一个
20、测验在多大程度上能够测得它所要测得的东西。多大程度上能够测得它所要测得的东西。四、常模制订四、常模制订v将标准化样本的测验分数与相应的某一将标准化样本的测验分数与相应的某一或几个测验量表分数一起用表格的形式或几个测验量表分数一起用表格的形式呈现出来,就是该测验的常模表。呈现出来,就是该测验的常模表。v v常用的心理测验常模有常用的心理测验常模有百分位常模百分位常模,标标准分常模准分常模,发展常模发展常模及及商数商数等。等。例:例:16PF16PF成人的男常模成人的男常模 编制测验说明书编制测验说明书 v测验的目的与功用测验的目的与功用v测验的理论依据测验的理论依据v测验实施方法测验实施方法v测
21、验的标准答案和计分方法测验的标准答案和计分方法v常模资料常模资料v测验的基本特征(信度、效度等测验的基本特征(信度、效度等)瑞文标准推理测验(目的与功用)瑞文标准推理测验(目的与功用)v(Ravens Standard Progressive Matrices(Ravens Standard Progressive Matrices简称简称SPM)SPM)是英国心理学家瑞文是英国心理学家瑞文(J.C.Raven)1938(J.C.Raven)1938年设计年设计的非文字智力测验。的非文字智力测验。v瑞文测验是瑞文测验是测量测量“g g”因素的有效工具因素的有效工具,尤其与测尤其与测量人的问题解
22、决、清晰知觉和思惟、发现和利用自量人的问题解决、清晰知觉和思惟、发现和利用自己所需信息以及有效地适应社会生活的能力有关。己所需信息以及有效地适应社会生活的能力有关。v本测验可用于本测验可用于智能诊断和人才的选拔与培养智能诊断和人才的选拔与培养。用该。用该测验可以进行各类比较性研究,特别有利于作跨文测验可以进行各类比较性研究,特别有利于作跨文化研究,以及正常人、聋哑者和智力迟钝者之间的化研究,以及正常人、聋哑者和智力迟钝者之间的比较研究。比较研究。理论背景例理论背景例v瑞文测验的编制在理论上依据斯皮尔曼瑞文测验的编制在理论上依据斯皮尔曼(C.Spearman)(C.Spearman)的的智力二因
23、素论智力二因素论。该理论认为。该理论认为智力主要由两个因素构成,其一是一般因素,智力主要由两个因素构成,其一是一般因素,又称又称“g g”因素,它可以渗入所有的智力活动因素,它可以渗入所有的智力活动中,每个人都有这种能力,但水平上有差异;中,每个人都有这种能力,但水平上有差异;另一个因素是特殊因素,可用另一个因素是特殊因素,可用“s s”表示,这表示,这类因素种类多,类因素种类多,与特定任务有高相关。与特定任务有高相关。施测说明施测说明v瑞文标准推理测验一共由瑞文标准推理测验一共由6060题组成,分为题组成,分为A A、B B、C C、D D、E E 五五组,每组组,每组1212题。题目难度逐
24、步增加,每组内部的题目也是由题。题目难度逐步增加,每组内部的题目也是由易到难排列。易到难排列。v施测要求:施测要求:1 1、准备足够的测验图册和答卷纸、准备足够的测验图册和答卷纸(测验图册可重复使用测验图册可重复使用),每个被试一支铅笔。每个被试一支铅笔。2 2、主试应是掌握本测验实施方法的专业人员。、主试应是掌握本测验实施方法的专业人员。3 3、测验场所应保持通风透光及安静,确保测验不受干扰。、测验场所应保持通风透光及安静,确保测验不受干扰。4 4、测验一般无时间限制,一般被试可在、测验一般无时间限制,一般被试可在4040分钟左右完成分钟左右完成。计分方法及分数解释样例计分方法及分数解释样例
25、vA A、B B、C C、D D、E E各部分的满分为各部分的满分为1212分,五项分数之和为测验分,五项分数之和为测验总分,满分为总分,满分为6060分。测验总分分。测验总分(即原始分即原始分)经常模表换算后可经常模表换算后可以得到标准分以得到标准分(即百分等级即百分等级),由百分等级便可以对被试的智,由百分等级便可以对被试的智力水平做出评价,评价标准如下:力水平做出评价,评价标准如下:一级:百分等级大于或等于一级:百分等级大于或等于9595,为高水平智力;,为高水平智力;二级:百分等级在二级:百分等级在7575与与9595之间,智力水平良好;之间,智力水平良好;三级:百分等级在三级:百分等级在2525与与7575之间,为中等水平智力;之间,为中等水平智力;四级四级:百分等级在百分等级在5 5与与2525之间,智力水平中下;之间,智力水平中下;五级:百分等级低于五级:百分等级低于5 5,为智力缺陷。,为智力缺陷。v 由于测验分数并非终生不变,并且受时空限制,有时有由于测验分数并非终生不变,并且受时空限制,有时有偶然性,所以,测试结果并不是绝对化的,分数解释可参考偶然性,所以,测试结果并不是绝对化的,分数解释可参考被试表现和其它测试指标。被试表现和其它测试指标。