1、教育心理学 第十二章 学习结果的测量与评价 一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行本章学习目标n定义测量、测评和评价定义测量、测评和评价n指出测验与其他测量工具的区别指出测验与其他测量工具的区别n指出信度和效度的区别指出信度和效度的区别 n定义档案袋定义档案袋n定义真实测验定义真实测验n什么是常模参照测验与标准参照测验什么是常模参照测验与标准参照测验n测验选择的原则测验选择的原则n评定测量信度的方法评定测量信度的方法n效度的类型有哪些效度的类型有哪些n说明客观测验与主观测验说明客观测验与主观测验n对传统测验的革新
2、对传统测验的革新一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行测量和评价n测量测量指收集信息，并用数字表示的过程。指收集信息，并用数字表示的过程。q如表示距离，我们用如表示距离，我们用3米，米，5公里，公里，1光年。表示时间，光年。表示时间，用用15秒，秒，30分钟等。分钟等。n测评测评是包含测量的更大的概念。即它要用数字表是包含测量的更大的概念。即它要用数字表示 ， 还 要 形 成 判 断 和 决 策 。 前 者 是 指 测 量示 ， 还 要 形 成 判 断 和 决 策 。 前 者 是 指 测 量（measuremen
3、t），后者指评价（），后者指评价（evaluation）。）。n测量的结果是测评的依据，测评过程就是依据测测量的结果是测评的依据，测评过程就是依据测量的结果，对学生的反应行为及其原因进行分析量的结果，对学生的反应行为及其原因进行分析和评价。和评价。n测量、测评和测验这三个过程解决了不同的问题：测量、测评和测验这三个过程解决了不同的问题：测量是用量化资料来描述学生的学习情况；测评测量是用量化资料来描述学生的学习情况；测评是根据量化的资料作出判断。是根据量化的资料作出判断。测验测验(test)是指测量是指测量的活动或工具。的活动或工具。 一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗
4、种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行常模参照测验与标准参照测验n常模常模是指有代表性的被试样本在测验上的是指有代表性的被试样本在测验上的分数模式。大多数的测验常模就用平均数分数模式。大多数的测验常模就用平均数和标准差来描述。和标准差来描述。n常模参照性测验（常模参照性测验（ Norm-referenced test ）是将测验分数参照常模加以解释，也就是是将测验分数参照常模加以解释，也就是将每一个人的分数同团体中的其他人进行将每一个人的分数同团体中的其他人进行比较，这是一种相对的比较。比较，这是一种相对的比较。n标准参照性测验（标准参照性测验（ Criterion-re
5、ferenced testing ）是将测验结果同事先规定的标准是将测验结果同事先规定的标准进行比较，对被试个体的分数作出解释。进行比较，对被试个体的分数作出解释。 一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行测验的类型2. 情感测验情感测验 Affective Instruments3. 投射测验投射测验 Projective Instruments1. 认知测验认知测验 Cognitive Instruments一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求
6、和合同的约定执行认知测验n测验学生在学业方面达到的程度。测验学生在学业方面达到的程度。n学业成绩测验学业成绩测验 （achievement tests）n能力测验能力测验 （aptitude tests）一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行测验的选择 2. 需要具体哪种测验需要具体哪种测验1. 需要哪种类型的测验需要哪种类型的测验 3. 对测验分析、比较对测验分析、比较 4. 选择最好的测验选择最好的测验 一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和
7、合同的约定执行测验选择的原则2. 要有最好的效度要有最好的效度 1. 要有最好的信度要有最好的信度3. 施测、计分、解释分数方便施测、计分、解释分数方便4. 被测者没有做过该测验被测者没有做过该测验一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行测验的施测 2. 确保良好的测验环境确保良好的测验环境 1. 事先做好安排事先做好安排 3. 准备所有可能的费用准备所有可能的费用一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行一个好的测验的两个特性n1. 效
8、度效度：指能否测出所要测量内容的程度。指能否测出所要测量内容的程度。 the degree to which the instrument measures what it purports to measure。n2. 信度信度：指测验的一致性程度。指测验的一致性程度。 the degree to which the instrument consistently measures what it purports to measure。一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行评定测量信度的方法n重测信度重测信度
9、Test-retest reliabilityn等值复本信度等值复本信度Equivalent forms reliabilityn内部一致信度内部一致信度Internal reliabilityn折半信度折半信度/分半信度分半信度Split-half methodn评分者信度（评分者信度（inter-scorer ）Inter-rater reliability一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行重测信度/再测信度（test-retest reliability）n用同一种测验，对同一组受试者，前后施测两用同一
10、种测验，对同一组受试者，前后施测两次，再根据受试者两次测验分数计算其相关系次，再根据受试者两次测验分数计算其相关系数，即得数，即得再测信度再测信度。n两次测验分数的误差变异主要来自测验条件和两次测验分数的误差变异主要来自测验条件和受试者身心状况的改变。再测信度高，说明分受试者身心状况的改变。再测信度高，说明分数受被试状况和测验情境变化的影响小。数受被试状况和测验情境变化的影响小。n初测与再测的间隔最好不超过初测与再测的间隔最好不超过 6 个月。个月。一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行等值复本信度(equiva
11、lent forms reliability)n任何测验只是所有可能题目中的一份取样，所任何测验只是所有可能题目中的一份取样，所以编制许多平行的等值测验，叫做复本。以编制许多平行的等值测验，叫做复本。n等值：题目内容，数量，形式，难度，区分度，等值：题目内容，数量，形式，难度，区分度，指导语，时限，所用的例题、公式，测验的其指导语，时限，所用的例题、公式，测验的其他方面都应该相同或相似。他方面都应该相同或相似。n一种测验有两个以上的复本，根据一群受试者一种测验有两个以上的复本，根据一群受试者接受两个复本测验的得分计算相关系数，即得接受两个复本测验的得分计算相关系数，即得等值复本信度等值复本信度
12、。n两个等值测验可同时连续施测或相距一段时间两个等值测验可同时连续施测或相距一段时间分两次施测。分两次施测。一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行折半信度/分半信度 (split-half method)n折半信度折半信度是在测试以后对测验项目按奇项、偶是在测试以后对测验项目按奇项、偶项或其他标准分成两半，分别记分，以两半分项或其他标准分成两半，分别记分，以两半分数之间的相关系数作为信度系数。数之间的相关系数作为信度系数。n折半信度折半信度split-half reliability n斯皮尔曼斯皮尔曼布朗公式布
13、朗公式Spearman-Brown correction formula 。一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行内部一致信度(internal consistent reliability)n构成测验的各测题间的相互关系，即测验内部一致性。构成测验的各测题间的相互关系，即测验内部一致性。n不是题目内容或形式的一致，是指分数的一致。不是题目内容或形式的一致，是指分数的一致。n测验的各个题目得分有较高的正相关，不论题目内容和形测验的各个题目得分有较高的正相关，不论题目内容和形式如何，测验的内部一致性高。式如何，测验
14、的内部一致性高。n测验题目看来好象一致，但相关为零或复值，测验的内部测验题目看来好象一致，但相关为零或复值，测验的内部一致性低。一致性低。n内部一致性的测量：内部一致性的测量：q库德库德理查森（理查森（ Kuder-Richardson ）公式）公式20 q克劳伯克（克劳伯克（ Cronbacks Alpha ） 系数系数一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行评分者信度(inter-scorer /inter-rater reliability)n心理测验一般都有一套标准化的评分程序，采用客心理测验一般都有一套标
15、准化的评分程序，采用客观性题目，由评分引起的误差变异是可以忽略的。观性题目，由评分引起的误差变异是可以忽略的。n对一些无法完全客观记分的测验来说，评分者之间对一些无法完全客观记分的测验来说，评分者之间的变异会带来误差。的变异会带来误差。q如创造性思维测验，人格测量投射测验。如创造性思维测验，人格测量投射测验。n方法：随机抽取相当份数的试卷，由两位评分者按方法：随机抽取相当份数的试卷，由两位评分者按记分规则分别给分。然后根据每份试卷的两个分数记分规则分别给分。然后根据每份试卷的两个分数计算其相关系数，即得评分者信度。计算其相关系数，即得评分者信度。n评分者之间平均一致性达到评分者之间平均一致性达
16、到 .90以上，才认为评分以上，才认为评分是客观的。是客观的。一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行效度类型 2. 效标关联效度效标关联效度Criterion-related validity 3. 构思效度构思效度 Construct validity1. 内容效度内容效度Content validity一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行内容效度内容效度：内容效度一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招
17、标中中标，我单位将严格按照招标方案的要求和合同的约定执行例：n“电电”这个单元包括的主题有：这个单元包括的主题有：q导体（导体（10%），电阻（），电阻（5%），电流（），电流（20%）、）、电极（电极（10%），电磁（），电磁（5%）、电解质（）、电解质（20%），），绝缘材料（绝缘材料（15%）发电方法（）发电方法（15%）。）。q编制这部分学业成就测验，就要按比例编制测编制这部分学业成就测验，就要按比例编制测验项目。如果能按比例编制，你所编项目是所验项目。如果能按比例编制，你所编项目是所覆盖内容的样本，那么具有覆盖内容的样本，那么具有内容效度内容效度。 一旦我单位在贵局承办的“海峡两岸渔
18、业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行预测效度预测效度（predictive validity）指测验分数）指测验分数对于未来的行为或作业测量能够预测得多么对于未来的行为或作业测量能够预测得多么好。如用学习能力测验预测大学生的平均成好。如用学习能力测验预测大学生的平均成绩。这种预测的准确性的指标就是测验的效绩。这种预测的准确性的指标就是测验的效度。度。与预测效度有关的最重要方面是标准，因而与预测效度有关的最重要方面是标准，因而又称为又称为效标关联效度效标关联效度。效标关联效度一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标
19、，我单位将严格按照招标方案的要求和合同的约定执行构思效度构思效度:涉及的是一个测验所测量的心理特质涉及的是一个测验所测量的心理特质或属性。或属性。构思效度就是要检验是不是测量了人们提出的理构思效度就是要检验是不是测量了人们提出的理论构思。论构思。 如智力测验的编制。理论认为：智力随年龄而增如智力测验的编制。理论认为：智力随年龄而增长；与学业成绩密切相关；智商相对稳定；受遗长；与学业成绩密切相关；智商相对稳定；受遗传影响。如果测验的分数随年龄而增加；智力与传影响。如果测验的分数随年龄而增加；智力与学业成绩有正相关，智商在一定时间保持相对稳学业成绩有正相关，智商在一定时间保持相对稳定，同卵双生子的
20、智力的相关高于一般兄弟姐妹定，同卵双生子的智力的相关高于一般兄弟姐妹，这些材料成为肯定测验构思效度的证据。，这些材料成为肯定测验构思效度的证据。构思效度一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行客观测验与主观测验n多项选择题，匹配题，判断题，简答题和填空多项选择题，匹配题，判断题，简答题和填空题都属于题都属于客观测验客观测验（ Objective Testing ） ，其特点是答案确定，评分不需要解释。其特点是答案确定，评分不需要解释。n论述题属于论述题属于主观测验主观测验（Subjective Testing）,其
21、特点是要求学生创造性地写出自己的答案。其特点是要求学生创造性地写出自己的答案。一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行客观测验项目的编制n题干要明确、简洁题干要明确、简洁n题干中的问题用肯定表述题干中的问题用肯定表述n不要写明显错误的选项不要写明显错误的选项n避免使用一些具有绝对意义的词避免使用一些具有绝对意义的词n避免出现两个相同意义的干扰项避免出现两个相同意义的干扰项n避免按原样使用课本中的表达词避免按原样使用课本中的表达词一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按
22、照招标方案的要求和合同的约定执行主观测验的编制n适合对复杂学习成果的评估适合对复杂学习成果的评估n测验要有足够的答题时间测验要有足够的答题时间n主观题和客观题相结合主观题和客观题相结合一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行对传统测验的革新n真实测验（真实测验（Authentic tests）n档案袋（档案袋（Portfolios）一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行真实测验（Authentic test）n真实测验真实测验是指是指
23、 测试学生在实际生活中的技巧和能力的一种评估方测试学生在实际生活中的技巧和能力的一种评估方法。法。n真实测验的一些特点：真实测验的一些特点：n1.1.更开放更开放n2.2.不受时间限制不受时间限制n3.3.提供已知的问题提供已知的问题n4.4.更象一系列作业更象一系列作业n5.5.需要与他人的一些合作需要与他人的一些合作n6.6.评分体系是多维的评分体系是多维的n7.7.给学生的学习风格、学习态度和学习兴趣留下空间给学生的学习风格、学习态度和学习兴趣留下空间一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行档案袋（Portf
24、olio） n档案袋档案袋是指体现学生某些方面的成长、自我反思是指体现学生某些方面的成长、自我反思和成绩的作业集。和成绩的作业集。n例：例：q“今天看了作文本里从今天看了作文本里从9 9月份以来自己写的所有月份以来自己写的所有故事，觉得有所提高。现在对它们做了修订，故事，觉得有所提高。现在对它们做了修订，加了句号和引号。过去有的故事写得比较长，加了句号和引号。过去有的故事写得比较长，有错别字，现在我查字典和问朋友。能写出激有错别字，现在我查字典和问朋友。能写出激动人心的、让人害怕的故事，故事的结尾也写动人心的、让人害怕的故事，故事的结尾也写得不错了。得不错了。”一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行档案袋的创建原则n1.学生参与学生参与n2.包含反思和自我批评包含反思和自我批评n3.反映学习活动反映学习活动n4.在不同的阶段，起不同作用在不同的阶段，起不同作用n5.体现学生的成长体现学生的成长n6.教会学生如何建立和使用教会学生如何建立和使用一旦我单位在贵局承办的“海峡两岸渔业资源增殖放流活动”放流苗种招标中中标，我单位将严格按照招标方案的要求和合同的约定执行Chapter12End
