1、教学测验信息管理的动因与技术教师专业化的一个基本要求教师专业化的一个基本要求上海中教信息技术有限公司关于升学率的困惑 1、一个地区的升学率与这个地区政府给出的升学指标有直接的关系,学校无法控制。2、关于“正常升学率”的假设。3、学校需要摆脱“片面追求升学率”的歧途。学校人数500490499480489470479460469450459430449420429升学率升学率A2562575156100B25052018045 82C250015135655015 60D400051151001106010 30E90009152026155 10传统的教学测验信息管理与评价存在着弊端和误区(一
2、)教学测验中的原始分数不具备可比性和可加性。王同学数学测验成绩原始分第三周是90分第四周是88分第六周是82分问:他的学习成绩是在进步,还是退步?(二)班级平均分数代表性质疑测验1897879测验2768079测验3557779测验496857990-100180-891270-791240-601平均797979平均数与群体代表性研究平均数与群体代表性研究1610010010079平均数平均数是一个集中量数,是一个集中量数,它的代表性能是受到数它的代表性能是受到数据离散程度的制约的据离散程度的制约的!0标准差=(xi-x)2N 1-3 -2 -0 2 3 -3 -2 -0 2 3 个体在群体
3、中的位置个体在群体中的位置标准分标准分ZI=(XI X0)/(三)“名次”真实性也有问题学号520103211原始分标准分等级原始分标准分等级原始分标准分等级语文831.60A740.29C821.45B数学600.79E740.27C41-2.23F外语810.33C72-0.80E70-1.05E政治871.31B68-1.44E81.044C物理76-1.07E860.19C941.19B化学70-1.16E830.15C890.90B总分457-0.08D457-1.35D4570.70C名次161139161177161105三个学生学习地位比较以学生各科测验原始分数总和所排的“名次
4、”在许多场合下未必表示了学生个体在群体中学习水平或学习能力的真实位置(四)针对测验分数,领导、老师、家长对学生说:“用心一点,再用心一点”,“努力一点,再努力一点”。怎么用心,怎样努力;在那里用心,作何种努力。传统的教学在信息管理上以开环控制为多,教学信息容易流于表面而使有效信息流失,在实际上得不到控制,评估缺乏客观性与针对性。三个基本事实:由于“名次”的非真实性与“平均成绩”的非代表性(掩盖性),引起了对教学测验分数的误读与误解。教师对学生进行鼓励性评价的语言与技术比较贫乏。针对传统的方式需要作一个变革。针对传统的方式需要作一个变革。传统方法中缺损了对于群体或者个体学习水平的结构性分析新分析
5、方法试图揭示学习水平的结构问题测验的分数是什么?测验分数不仅是对教与学评定的依据,更是作为被反馈的教学信息意义建构教学系统化思想教学系统化思想教学系统化的目的是使教学效率化教学效率化。系统化的两大特点:(实现效率化的前提条件(实现效率化的前提条件)结构的最优化结构的最优化目标的明细化目标的明细化目标的明细化 教学目标表述的是作为学习结果的行为,同时包含了测量学习效果的方法。书写教学目标时必须使用可观察的行为动词。表明达成目标的最低水准。对目标行为作要素分析,这是目标明细化的前提。强调教学目标的明细化和教学结构的最优化。强调教学过程信息流有效的反馈与监控。强调主体(教师与学生)的自主性发展,即自
6、我意识、自我评价、自我监控、自我调节、自主发展成功心理的核心与基础。教学工艺学的观点在教学信息处理与评估层在教学信息处理与评估层面需要达到的目标面需要达到的目标通过“目标导向性评价”,实施“教”与“学”最佳匹配与偶合。教学教学测验测验信息管理信息管理的的模块设计模块设计 与与技术技术 这个模块主要解决对于教学过程中教学内容(知识点与学习行为目标(测试水平)两个维度上的达成度问题。它建立在每一次测验或考试蓝图设计的基础上。考试蓝图由以下三部分组成,并构成一个整体:(1)知识要点和测量水平二维明细表;(2)在二维细目下形成对试卷分数分配表;(3)与上述要求匹配的试题分配表。三个表合一表,称它为 “
7、教学内容和行为目标教学内容和行为目标 命题双向细目表命题双向细目表”。布鲁姆的教育目标分类学 认知领域(知识、领会、应用、分析、综合、评价)情感领域(接受、反应、估价、组织、价值观念及性格化)技能领域(表一)教教学学内内容容和和行行为为目目标标命命题题双双向向细细目目表表识记理解应用分析综合评价 水平内容 A B C D E F总得分得分率%*1题号*分值*得分-满分*得分-2 3 4 5 6 7 8 910总得分满分*得分-得分率%通过知识点达成度与认知水平达成度两个维度综合分析的评价技术群体(班级)的目标达成度的反馈与分析群体(班级)的目标达成度的反馈与分析8080%知识点认知水平1234
8、5ABC100100 *班班级级数数学学测测验验教教学学目目标标达达成成分分析析表表序号1234567内容集合二次函数函数图象奇偶性单调性不等式解法反函数 90 96 97 87 85 82 76 65 58 58 55 知识点 认知水平 1 2 3 4 5 6 7 A B C D高一新生的数学语言能力集合语言图像语言综合应用能力 五五位位学学生生教教学学目目标标达达成成度度一一览览表表 知 识 点 得 分 率 认知水平得分率学号 总分 1 2 3 4 5 6 7 8 9 10 A B C D517 98100100100100100100100100100 85100 100 100 965
9、42 82100100100 5510075100100100 55100 100 83 74502 77100 73100 7310050100100100 0 50 61 90 52508 51 78100100 9 050 0 0100 0100 71 57 6511 30 56 45 0 14 050 0 0100 0 0 64 31 0 上表所列信息可以使我们了解到什么?个体的个体的的目标达成度的反馈与分析的目标达成度的反馈与分析517:高位达标中的能力缺损倾向;542:中等达标努力型倾向;508:低水平达标努力型倾向;502:凭小聪明欠努力型或其他;511:不能达标,不宜下结论,需
10、要针对实际进一步分析。把教学测验的原始分数转化为标准分采用等级分布的方法,确定学生个体在相应群体中相对位置的分析技术-1.5-0.500.51.57%24%38%24%7%正态曲线与概率分布E D C B AZ7%24%38%24%7%个体在群体中的地位分析个体在群体中的地位分析ABCEF1505-05-15(7%)(31%)-025(60)%困难渗透层渗透层不稳定层不稳定层稳定层 对对策策 一一对对一一 个个别别帮帮助助 群群体体指指导导 个个别别矫矫正正 外外力力督督促促自自我我调调整整 自自我我调调整整 指指导导提提高高 通过年级名次段频数分布表进行班级学习水平结构分析的技术一班二班三班
11、四班五班六班频数累计频数累计频数累计频数累计频数累计频数累计 1-10441100111133 11-5071145887856811 51-10081911168168141117516101-15042311271026721926925151-170124330829526228631171-200731232835531533637201-25012431042114213441043643一、班级学习水平结构分析(年级名次段频数分布表)平均分603 594 605 590 597 612名次3 5 2 6 4 1通过标准分划分学习等级频数等级频数 的分布的分布进行班级学习水平结构分析
12、的技术 各 等 级 频 数 理论值:1861 966118人数平均分标准差ABCDEF年级年级252718133156657336714一班 48819 99 82111 6 2 0二班 37699171 3 9 4 710 4三班 38657149 2 510 213 6四班 40708101 01112 412 1五班 38718105 21013 6 6 1六班 37681104 0 8 5 616 2二、年级学习等级频数分布实例二、年级学习等级频数分布实例 A B C D E82117200811162A B C D E一班一班六班六班A B C D E2101961五班五班成功心理系
13、统的探索动力系统动力系统需要需要意志意志成就成就维持系统维持系统评价系统评价系统自我内差异评价在学生自主发展中的位置%808070696060545650503025知识点认知水平12345678910ABC序号12345678910内容语音根据音标拼写单词词义配对词性转换词类转换.选择句形转换动词填空阅读理解完形填空评价前%10010010010010010080756670716166501234567891011ABC1234567891011序号听力语音根据音标拼写单词词义配对词性转换词类转换选择动词填空改写句子阅读理解完形填空内容评价后学号520435227语文ACB数学ECF英语C
14、EE政治BEC物理ECB化学EDB520435227强势学科语文A政治B_语文B物理B化学B中档学科英语C语文C数学C物理C化学D政治C薄弱学科数学E物理E化学E英语E政治E数学F英语E发展的显著性评估与自我内差异评价技术 这个模块主要是:(1)计算学生个体某一段时间内某学科多次测验所得到的标准分平均值,作出个体关于学科学习平均水平基准线;(2)将该学生在该时段该学科测验所得的标准分在基准线上下两侧分布,(3)依“二项分布”概率理论进行显著性检验(符号检验),(4)通过检验,获得对学生个体学习发展趋势显著性判别。Z1。Z2出现的点数出现的点数概率概率1点或点或12点点001%显著显著2点或点或
15、11点点095%显著显著3点或点或10点点35%显著显著4点或点或 9点点87%5点或点或 8点点157%以以13个点为例个点为例。进步显著不显著相对于个体进步显著性判断叙述自己进退过程的故事 这个模块和分析技术依赖于一个教学要求达成度评价图式(1)H表示群体高分组(按测验总分排序后群体前27%的成员)得分率,L表示群体低分组(按测验总分排序后群体后27%的成员)得分率,H-L是区分度或鉴别度,OA为低分段零线。(2)每个小题(也可以是每一个知识点、认知水平等)代号以坐标(H-L,H)方式标入左图平面。(3)代号三维趋向:趋向H则整体水平高,趋向O则整体水平低,趋向A则群体内部两极分化显著。(
16、4)根据小题(知识点、认知水平)的代号所占据区域进行教学有效性确认与解释。4080100HH-L0一二三四五(1)高高 分分 组组 和和 低低 分分 组组 平平 均均 得得 分分 率率 统统 计计 表表题 号题1 题2题3题4题5题6题7题8题9HLH-L关于教学有效性测试一、数据准备H100804040H-LOA一二三四五H高分组得分率L低分组得分率H-L区分度,鉴别力一区:高标准达标二区:高标准有区分达标三区:低标准达标四区:低标准有区分达标五区:教学无效区二、区域定位解解释释 视视角角教教学学要要求求达达成成 控控制制区区域域 学学生生群群体体达达标标 效效果果区区域域 教教与与学学 有
17、有效效性性区区域域 一区教学基本要求正常区群体高标准达标区最佳区域二区教学一般要求正常区群体高标准有区分达标区有效区域三区教学较高要求正常区群体低标准达标区中等水平达标区域四区教学高要求正常区群体低标准有区分达标区集体补差补缺区域五区教学无效区群体达标无效区学习无效区域三、有效性解释教学期望与要求教学客观效果教与学的操作性导向视角 六六、试题品质、试题品质检测检测与与分析模分析模块块 教学测验分数段教学测验分数段频数分布与解释频数分布与解释1 1 正态分布正态分布试题适当试题适当学生成绩正常学生成绩正常2 2 偏态分布偏态分布试题难度过大试题难度过大学生基础较差学生基础较差试题较容易试题较容易
18、学生基础较好学生基础较好3 3 陡峭形陡峭形4 4 平坦形平坦形难度中等的试题难度中等的试题占的比例太大占的比例太大学生基础相差小学生基础相差小难度中等的试题难度中等的试题占的比例小占的比例小学生基础相差大学生基础相差大试题品质分析技术难度区分度诱答有效性 试试题题区区分分度度评评鉴鉴区分度指数区分程度类以上显著良好微弱以下几乎不区分区分度D=PH-PL(高分组的平均得分低分组的平均得分 试题品质和诱答性分析表试题品质和诱答性分析表 分支答案选择人数题号组别答 对人数得 分率ABCD空难度区分度H2710027 0 0 01L2593025 1 1 09707H 6226 3 2 11 52L
19、 9339 5 3 6 42711H13484 3 713 03L 2078 5 7 2 52841H24892 024 1 04L12447 312 5 06645 为正确答案选择支。试试题题品品质质评评鉴鉴和和说说明明 干扰性题号 难度区分度HL 试题评鉴和说明1小不明显弱达标程度较好,教学有效。2大0强强达标程度差,高分组低于低分组的原因要作过细分析,尤其是选择支的诱答力强与教学过程有何关系3大很显著强强题目较难,选择支的干扰大,对高分组和低分组要着重研究选择支,对低分组要研究选择支对正确答案的干扰点。4中很明显弱强中等达标,难度适中,重点研究 选择支对低分组的干扰点。八个小故事某某学学
20、生生在在某某次次测测验验中中教教学学目目标标达达成成分分析析100100100100100100808068563531158知 识 点 认 知 水 平123456789A BCDE几经努力,几经努力,只获只获61分,分,我该怎么办?我该怎么办?AE学学 生生 在在 某某 次次 测测 验验 中中 教教 学学 目目 标标 达达 成成 分分 析析%100100100100100100100100100%1008894948060123456789101112知 识 点 识 记 理 解 应 用(其 中1.听 力7.选 择12.阅 读 理 解,三 部 分 均 是 能 力 部 分)影响听力的主要因素影响
21、听力的主要因素很可能是理解能力很可能是理解能力B表一 A 学学生生英英语语测测试试教教学学目目标标达达成成分分析析图图 测测试试内内容容(知知识识点点、块块)1 12 23 34 45 56 67 78 89 9序序号号单词辨音看 音 标写单词词 义配对单 词拼写词 性转换选择动词填空句型转换阅读完 形填空内内容容 认认知知水水平平认知水平识记理解应用代号A AB BC C 统计:知 识 点 得 分 率认知水平得分率学号 总分 1 2 3 4 5 6 7 8 9 A B C102 77 1010070 80 9080100 909363 75 94%80 知识点 认知水平 1 2 3 4 5
22、6 7 8 9 A B C 为什么老是为什么老是7070几分?几分?C生物学习成绩生物学习成绩上不去的原因上不去的原因认知水平认知水平%识记识记 理解理解 应用应用 不不用功?用功?强化练习强化练习不重视?不重视?家长会家长会 主观上的价值取向主观上的价值取向客观上的教师导向客观上的教师导向?D两两位位学学生生教教学学目目标标达达成成认认知知水水平平结结构构比比较较图图%10010010010010070808050ABCDEABCDE (学 生)(学 生)谁能进入重点大学?谁能进入重点大学?改变一个不良习惯比攻克一道数学难题还要难。E校长管理的改进校长管理的改进谁不到位?谁不到位?备课笔记还
23、查不查?备课笔记还查不查?校长不到位?!校长不到位?!校长听课的针对性、校长听课的针对性、参与性和有效性探讨。参与性和有效性探讨。FG从从教学目标达成度管理教学目标达成度管理 部分学科走班制,部分学科走班制,实施实施“学生自由选择,教师学生自由选择,教师 因学定教因学定教”“拓展教育时拓展教育时 空空”的实践研究的实践研究H教学测验信息管理模块教学测验信息管理模块是一种 在实际运行的过程中还蕴涵了以下功能:1、教学目标的导向功能;2、教学管理的标准化与教学服务功能;3、教学结构、资源与力量调控功能;4、教学结果的诊断与矫正功能;5、学习动机的维持与激发的功能;6、经验判断与量化决策的功能;7、自我评价、自我监控、自适性发展的功能。区域性教学质量监控的组织与实施区域性教学质量监控的组织与实施教学目标达成度监控教学目标达成度监控学习水平位置性监控学习水平位置性监控学习水平结构性监控学习水平结构性监控教学有效性监控教学有效性监控区域教育行政领导区域教育行政领导区域教学研究室区域教学研究室学校校长学校校长教导主任教导主任年级组长、教研组长年级组长、教研组长班主任班主任家长家长监控平台监控平台各级责任人各级责任人监控主体监控主体学生学生 (自我监控)(自我监控)小结 教学测验信息管理的重要性,教学测验信息管理的科学性,教学测验信息管理的可操作性,教学测验信息管理的可探究性。