1、职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 职业院校学生职业能力测评赵志群职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 学业成果质量监测学业成果质量监测学校内部的教学质量学校内部的教学质量评估评估达不到大规模质量监控的信度达不到大规模质量监控的信度和效度要求，无法藉此进行校际间和区域间比较和效度要求，无法藉此进行校际间和区域间比较；我们我们既既要要获得大量深入和有效的数据获得大量深入和有效的数据，又，又不不能能引发过多引发过多的的经费和时间经费和时间投入投入；如果开展如果开展大规模大规模的的技能技能测试测试，无法解决
2、无法解决成本成本高高、评分者、评分者间信度间信度低和低和试题效度试题效度低的低的技术技术难题；难题；必须必须建立建立一个一个解释模型解释模型，对评估，对评估结果结果和和人才培养模式人才培养模式之之间间的的关系关系进行科学的进行科学的分析分析；关键是：关键是：评估工具的开发评估工具的开发。职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 科学的职业能力测评科学的职业能力测评，可以评估，可以评估诊断学生诊断学生的的职业能力职业能力和和职业认同感的发展水平，职业认同感的发展水平，从而从而对不同地区、不同院校对不同地区、不同院校、不同班级不同班级间的教学质量进行比较间
3、的教学质量进行比较；可以获得人才培养质量的准确信息和重要参数，为各级可以获得人才培养质量的准确信息和重要参数，为各级政府制定政策提供依据政府制定政策提供依据；可以可以提高职业教育体系设计和教育质量控制水平，为提高职业教育体系设计和教育质量控制水平，为“建立能够迅速提醒决策者及时纠正任何不利趋势建立能够迅速提醒决策者及时纠正任何不利趋势”（PISAPISA定义）的质量保障机制奠定技术基础定义）的质量保障机制奠定技术基础；关键是关键是职业能力测评模型、测评实施方案职业能力测评模型、测评实施方案开发开发以及测评以及测评结果分析结果分析。为什么要开展职业能力测评？为什么要开展职业能力测评？职业与成人教
4、育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 参照系：普通教育的能力测评（参照系：普通教育的能力测评（PISAPISA）p 由OECD（世界经济合作组织）组织的“国际学生评价项目”（Programme for International Student Assessment, PISA）；p 以纸笔测验测试15岁学生的阅读能力、数学能力和科学能力；p 每三年举行一次，每次测试的重点不同；p PISA的口号：评价学生现实生活和终身学习(职业工作和生涯发展)所必须的知识和技能 ；p 不是测试学生掌握了多少学科知识，而是测量学生能否在实际生活（工作）的情境中创造性地运用知识
5、和技能解决问题的能力。职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 职业能力测评的困难职业能力测评的困难国家、地区之间的差异太大国家、地区之间的差异太大职业教育的职业（专业）太多职业教育的职业（专业）太多技术更新太快技术更新太快职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 已经开展的工作已经开展的工作 建立了职业能力测评（建立了职业能力测评（large-scale diagnosticslarge-scale diagnostics）的理论模型和测评模型，并按照教育测量学要求经的理论模型和测评模型，并按照教育测量学要求
6、经过了测评技术的验证；过了测评技术的验证； 在不同层面（省级、地方、行业等）进行了汽车维在不同层面（省级、地方、行业等）进行了汽车维修、电气技术、护理、数控技术、土木建筑类专业修、电气技术、护理、数控技术、土木建筑类专业的测评；的测评； 得到了职业院校的广泛认可；得到了职业院校的广泛认可； 与德国、瑞士、挪威、南非等国开展了国际合作测与德国、瑞士、挪威、南非等国开展了国际合作测评研究和实践，具有一定国际影响。评研究和实践，具有一定国际影响。职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 小知识：技能小知识：技能与能力的区别与能力的区别 技能是从事一项工作所必
7、需的客观条件，人是技能的载技能是从事一项工作所必需的客观条件，人是技能的载体并通过接受学习培训获得技能；体并通过接受学习培训获得技能； 能力是特定领域的能力是特定领域的“心理认知特征和发展潜力心理认知特征和发展潜力”，能力，能力获得是人格发展的组成部分，能力的应用是开放的获得是人格发展的组成部分，能力的应用是开放的; 职业能力是职业能力是个体当前就业和终身发展所需的能力个体当前就业和终身发展所需的能力, 是理是理解、反思、评估和完成职业任务以及在承担社会、经济解、反思、评估和完成职业任务以及在承担社会、经济和生态责任的前提下，共同参与设计技术和社会发展的和生态责任的前提下，共同参与设计技术和社
8、会发展的能力。能力。职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 职业能力模型与测评模型职业教育的培养目标（指导思想）测试题目与评量分析方式综 合 职 业 能 力专业能力专业之外的能力专业之外的能力方法能力社会能力关键能力关键能力职业能力测评方案的研发职业能力测评方案的研发能力内容维度（学习范围）行动维度（完整的行动过程）能力要求维度（能力水平）设计能力初学者任务高级初学者任务提高者任务能手的任务 控 制 实 施 决 策计 划获取信息 评 价 过程性能力功能性能力名义能力 KOMET项目职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) A
9、E) 赵志群 职业能力测评的理论基础职业能力测评的理论基础对职业能力对职业能力的认识的认识职业承诺职业承诺与与职业认同感职业认同感职业能力职业能力发展理论与发展理论与学习理论学习理论 职业教育的职业教育的 能力模型能力模型 职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 相关的职业教育理论相关的职业教育理论 设计导向的职业教育指导思想设计导向的职业教育指导思想 (德德RAUNER 1995; HEIDEGGER/ADOLPH/LASKE 1997)； 行动导向教学行动导向教学 (原苏联，德原苏联，德BADER 1989; CZYCHOLL/EBNER 199
10、5)； 发展性任务理论发展性任务理论 (美美HAVIGHURST 1972)； 职业教育的发展性结构课程职业教育的发展性结构课程 (美美BENNER 1997)； 从初学者到专家（从初学者到专家（from novice to expert)的范式的范式 (美美DREYFUS/DREYFUS 1986) ； 工作过程知识工作过程知识(德，英德，英 BOREHAM/SAMORCAY/FISCHER 2002; FISCHER/ RAUNER 2002; KRUSE 1985)； 我国的职业教育课程与教学实践。我国的职业教育课程与教学实践。职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +
11、AE) AE) 赵志群 三维职业能力模型三维职业能力模型能力内容维度（学习范围）行动维度（完整的工作过程）能力要求维度（能力水平）设计能力设计能力新手新手生手生手熟手熟手能手能手 控控 制制 实实 施施 决决 策策计计 划划获取信息获取信息 评评 价价 过程性能力过程性能力功能性能力功能性能力名义能力名义能力 KOMET项目专家专家定向任务定向任务程序任务程序任务问题任务问题任务未知任务未知任务职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 定向和概括性知识关联性知识具体与功能性知识学科系统化深入 知识职业定向性任务程序性任务无法预测结果的任务在外部指导下的
12、活动基于规律的系统化行动知识指导下的行动理论与经验共同导出的行动蕴含问题的特殊任务职业能力发展的基本规律：从初学者到专家职业能力发展的基本规律：从初学者到专家（R.J. Havighhurst, H.Dreyfus/S.E.Dreyfus, F. Rauner）初学者初学者/ /新手新手生手生手能手能手熟手熟手专家专家/ /高手高手 学习范围学习范围 典型工作任务典型工作任务 活动特点活动特点职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 综合职业能力测评的维度综合职业能力测评的维度( (评价指标评价指标) ) 功能性能力过程性能力设计能力名义能力直观性/展
13、示功能性经济性使用价值导向企业流程/经营过程和工作过程导向环保性创新性社会接受度/社会责任感风险人群要求维度：要求维度：能力水平能力水平 KOMET 2009职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 能力指标能力指标含含 义义直观性直观性/展示展示要求学生通过语言或文字描述，利用图纸、草图等工具，形象直观地、条理清楚、结构合理地展示任务解决方案，使委托方知晓任务完成后的结果。功能性功能性要求学生提出的解决方案能满足任务要求，实现应有的功能。为此，需要学生具备工具性的专业能力、与具体情境无关的学科知识以及专业技能。使用价值导向使用价值导向要求学生完成工作
14、任务的行动过程始终以顾客为导向，除了满足用户的直接使用要求和减少使用中的故障外，还要考虑后期保养和维修的便利性，以及解决方案的持久性和扩展性。经济性经济性要求学生能够将解决方案放到整个工作环境中去考察它的经济性，权衡支出与收益之间的关系，并考虑未来可能产生的后续成本；此外，需要关注国民经济发展宏观态势，具有经济责任感。企业生产流程和企业生产流程和工作过程导向工作过程导向要求学生提出的解决方案能考虑与上下游过程之间的衔接，还考虑跨越每个人的工作领域的部门间的合作。社会接受度社会接受度要求学生进行人性化的工作设计，考虑那些超越工作本身的社会因素，如考虑劳动安全、事故防范以及解决方案对社会环境造成的
15、影响等。环保性环保性要求学生在解决方案中遵守环保对生产过程和生产结果的特定要求，考虑解决方案在多大程度上使用了对环境无害的材料，以及完成工作的计划多大程度上符合环保要求；此外，在解决方案中应考虑节约能源和废物回收与再利用。创创新新性性要求学生对问题情境有足够的敏感性，在完成任务目标的前提下表现独特的设计空间。综合职业能力指标的含义综合职业能力指标的含义职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 成功职业学习的条件：成功职业学习的条件：完整的工作过程完整的工作过程明确任务明确任务/获取信息获取信息制定计划制定计划做出决策做出决策实施计划实施计划检查控制检查
16、控制评定反馈评定反馈 德国联邦职业教育研究所职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 职业认同感、职业承诺与工作道德职业认同感职业认同感Vocational Identity职业承诺职业承诺Occupational Commitment组织承诺组织承诺Organisational Commitment工作道德工作道德 Work Ethics F. Rauner 职业承诺是指由于个体对职业的认同和情感依赖、对职业的投入和对社会规范的内化导致的不愿变更职业的程度职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 汽车维修专业
17、测试题目汽车维修专业测试题目 冬季检查冬季检查情境描述情境描述 一顾客想在冬季从北京开车到五台山，他要去的地方在海拔1800米，当地温度最低可至零下28度，按当地规定，轮胎必须加装防滑链。 顾客的车辆是一部丰田花冠轿车，使用了将近3年，行驶里程已达38000公里，但从未进行过长途行驶。该车必须在完成此次旅行后，进行一次全面检查。 顾客希望自己的轿车在旅途中万无一失。因此，顾客想先为车辆做一次冬季检查，您负责检查此车。 任务任务 请制定一份详实的与顾客沟通和完成此次检查任务的解决方案，并全面而细致的说明采取此方案的理由。 职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE)
18、 赵志群 职业能力测试题目的特点职业能力测试题目的特点 来源于职业及企业工作实践的现实问题； 是职业的典型工作任务，反映相关培养目标； 有不同深度和广度的答案，为被测学生留出较大的回旋余地； 答案范围涉及广泛，除掌握专业能力之外，还涉及广泛的职业素养，如需要考虑经济性、使用价值、社会责任感和环境保护等因素； 采用纸笔方式制定解决专业问题的规划和方案； 被试者用本职业的专业方式解答问题，记录解题过程和结果，并说明理由； 考察的重点是：实践性知识。职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 与情境相关 的，实践为导向的，明确的工作过程知识 知识与情境无关与情
19、境无关的，学科系的，学科系统化的，为统化的，为实践辩护的实践辩护的客观的与情境相关与情境相关的，不明确的，不明确的的, 指导和指导和反思实践反思实践的的 主观的实践性知识理论知识从经验到知识从经验到知识从知识到能力从知识到能力 参见F. Rauner，经允许后有改动 知识的组成知识的组成 工作过程课程的工业心理学基础工作过程课程的工业心理学基础职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 工作过程知识的层次工作过程知识的层次工作过程与工作过程与 生产流程生产流程功能性功能性 外形外形(展示展示/直观性直观性)经济性经济性(效益效益)持续性持续性(使用价值使
20、用价值) 环保性环保性 社会社会 接受度接受度 创造性创造性 Felix Rauner职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 能力测评评分表能力测评评分表版本 10.08.2008任务: 编码:评分人姓名:日期:(1) 直观性直观性/展示展示对委托方来说，解决方案的表述是否容易理解？对专业人员来说，是否恰当地描述了解决方案？是否直观形象地说明了任务的解决方案？（如：用图表/用图画）？解决方案的层次结构是否分明? 描述解决方案的条理是否清晰？解决方案是否与专业规范或技术标准相符合？（从理论、实践、制图、数学和语言）(2) 功能性功能性解决方案是否满足功
21、能性要求？是否达到“技术先进水平”？解决方案是否可以实施？是否（从职业活动的角度）说明了理由？表述的解决方案是否正确？(3) 使用价值导向使用价值导向解决方案是否提供方便的保养和维修？解决方案是否考虑到功能扩展的可能性？解决方案中是否考虑到如何避免干扰并且说明了理由？对于使用者来说，解决方案是否方便、易于使用？对于委托方（客户）来说，解决方案（如：设备）是否具有使用价值？(4) 经济性经济性实施解决方案的成本是否较低？时间与人员配置是否满足实施方案的要求？是否考虑到企业投入与收益之间的关系并说明理由？是否考虑到后续成本并说明理由？ KOMET项目职业与成人教育研究所职业与成人教育研究所 (IV
22、(IV+ +AE) AE) 赵志群 被测学生得到的结果案例被测学生得到的结果案例职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 综合类高职院校汽车维修专业测评结果汽车维修专业测评结果广州技师学院交通部所属高职院校 KF = 功能性能力，KP=过程性能力，KG=整体体设计能力K1=直观性和展示性，K2=功能性，K3=使用价值导向，K4=经济性，K5=经营过程/生产流程与工作过程导向，K6=社会接受度/社会相容性，K7=环保性， K8=创造性职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 重庆市中职学校校际间的比较（汽车维修专
23、业重庆市中职学校校际间的比较（汽车维修专业) )60.8%60.0%53.3%45.5%26.5%20.0%8.6%0.0%55.8%57.7%51.7%12.8%59.5%13.0%64.1%9.0%40.3%24.4%30.0%55.6%33.6%23.3%12.7%12.5%11.8%39.2%40.0%46.7%54.5%73.5%80.0%91.4%100.0%42.5%40.4%45.8%84.6%36.7%82.6%30.8%85.9%53.8%69.2%63.3%36.1%57.3%64.2%74.6%67.5%64.7%0.0%0.0%0.0%0.0%0.0%0.0%0.0%
24、0.0%1.8%1.9%2.5%2.6%3.8%4.3%5.1%5.1%5.9%6.4%6.7%8.3%9.1%12.5%12.7%20.0%23.5%0%10%20%30%40%50%60%70%80%90%100%学校7,n=74学校19,n=30学校20,n=15学校17,n=11学校15,n=34学校11,n=40学校14,n=35学校24,n=13学校3,n=113学校13,n=52学校6,n=120学校25,n=39学校2,n=79学校22,n=23学校10,n=39学校23,n=78学校12,n=119学校21,n=78学校18,n=30学校8,n=36学校16,n=110学校5
25、,n=120学校1,n=118学校4,n=40学校9,n=51名义性能力功能性能力过程性能力职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 25尺正明信尺正明信瑞士（瑞士（20132013和和10141014年）、西班年）、西班牙、德国、挪威、牙、德国、挪威、波兰和瑞士波兰和瑞士20132013年的测评数据年的测评数据对对比（多为高职）比（多为高职）。职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 职业能力预测效度检验（护士执业资格考试） 职业能力测评成绩与护士执业资格考试总成绩以及专业实务科目成绩显著相关预测效度检验 护
26、士执业资格考试总成绩专业实务科目的成绩职业能力测评总分相关性0.223*0.269*显著性0.0210.005*在0.01水平（双侧）上显著相关。*在0.05水平（双侧）上显著相关。 护士职业能力测评成绩护士执业资格考试总成绩专业实务科目的成绩职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 下一步需要开展的工作下一步需要开展的工作 开发新专业的测试题目和解题空间；开发新专业的测试题目和解题空间； 进行相应的预测试、评分和题目修正；进行相应的预测试、评分和题目修正； 澄清测评工
27、作的组织方式和流程；澄清测评工作的组织方式和流程； 建立相关的技术平台和支持系统；建立相关的技术平台和支持系统； 开展相关的培训；开展相关的培训； 职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 职业与成人教育研究所职业与成人教育研究所 (IV(IV+ +AE) AE) 赵志群 阅读材料阅读材料劳耐尔,赵志群,吉利. 职业能力与职业能力测评，清华大学出版社, 2010； 庄榕霞,赵志群等. 职业院校学生职业能力测评的实证研究. 清华大学出版社, 2012； 赵志群, Rauner, F. (eds.). Areas of Vocational Educati
28、on Research. Heidelberg, New York et al.: Springer, 2014.赵志群. 职业教育工学结合一体化课程开发指南，清华大学出版社, 2009；Martin Fischer, Felix Rauner, 赵志群. Kompetenzdiagnostik in der Beruflichen Bildung: COMET auf dem Prfstand. Mnster: LIT. 2015赵志群,何兴国,沈军,张志新.产出导向的职业教育质量监控职业院校的职业能力测评案例. 中国职业技术教育, 2015年第9期: 5-13张志新, 赵志群. 职业教育教
29、师职业能力测评研究现状与展望. 中国职业技术教育, 2015年第12期: 63-67.赵志群. KOMET-China: Die Schritte auf dem Weg zu einem nationalen Schlsselprojekt der Qualittssicherung. ZBW.110 Band, Heft 3(2014): 442-448赵志群，林来寿，张志新. 高等职业教育课程改革学习效果评价：一项实证研究. 国家教育行政学院学报, 2014/7: 74-79赵志群. 职业能力研究的新进展.职业技术教育.职业技术教育.2013(10):5-11；赵志群，庄榕霞. Mess
30、en beruflicher Kompetenz von Auszubildenden und Studierenden berufsbildender (Hoch)Schulen in China. ZBW.109 Band, Heft 1(2013): 132-140.Rauner, F.; Heinemann, L.; Maurer, A.; Haasler, B. (2012): Competence development and assessment in TVET (COMET): Theoretical Framework and Empirical Results. Berlin: Springer， 2012.
