1、英语考试命题的原则和方法英语考试命题的原则和方法12019-2-24主要内容主要内容 1. 如何评价一套试题如何评价一套试题 2. 如何命制试题如何命制试题 3. 试题各部分设计要领试题各部分设计要领 4. 试卷分析与质量报告的撰写提试卷分析与质量报告的撰写提纲纲2如何评价一套试题如何评价一套试题 VRIP(Cambridge ESOL) 英国剑桥大学外语考试部质量控制指标英国剑桥大学外语考试部质量控制指标“VRIP”: 效度效度 Validity 信度信度 reliability 后效后效 impact 实用性实用性 practicality3 Ensure the reliability
2、of a test (Hughes 2000) Take enough samples of behavior收集收集样本样本 Do not allow candidates too much freedom 不不让受试者有太多的让受试者有太多的自由发挥自由发挥 Write unambiguous items 不不要出现要出现歧义歧义 Provide clear and explicit instruction指指引清晰简洁引清晰简洁4Ensure the reliability of a test Ensure that the test are well laid out and perf
3、ectly legible 命题清晰命题清晰 Candidate should be familiar with format and testing techniques 受试者对格式和测试手段清受试者对格式和测试手段清晰晰 Provide uniform and un-distracting conditions of administration确保不受干扰确保不受干扰 Use items that permit scoring which is as objective as possible评分标准清晰,保证评分评分标准清晰,保证评分客观客观 Make comparisons bet
4、ween candidates as direct as possible确保受试者竞争的公平性确保受试者竞争的公平性5How to ensure the vadility 严格按照严格按照义务教育英语课程标准义务教育英语课程标准(2011版)的要求版)的要求67听听1能根据语调和重音理解说话者的意图;能根据语调和重音理解说话者的意图;2能听懂有关熟悉话题的谈话,并能从中能听懂有关熟悉话题的谈话,并能从中提取信息和观点;提取信息和观点;3能借助语境克服生词障碍、理解大意;能借助语境克服生词障碍、理解大意;4能听懂接近正常语速的故事和叙述,理能听懂接近正常语速的故事和叙述,理解故事的因果关系;解
5、故事的因果关系;5能在听的过程中用适当方式做出反应;能在听的过程中用适当方式做出反应;6能针对所听语段的内容记录简单信息。能针对所听语段的内容记录简单信息。8说说1能就简单的话题提供信息,表达简单的观点能就简单的话题提供信息,表达简单的观点和意见,参与讨论;和意见,参与讨论;2能与他人沟通信息,合作完成任务能与他人沟通信息,合作完成任务3能在口头表达中进行适当的自我修能在口头表达中进行适当的自我修4能有效地询问信息和请求帮助;能有效地询问信息和请求帮助;5能根据话题进行情景对话;能根据话题进行情景对话;6能用英语表演短剧;能用英语表演短剧;7能在以上口语活动中做到语音、语调自然,能在以上口语活
6、动中做到语音、语调自然,语气恰当。语气恰当。9读读 1能根据上下文和构词法推断、理解生词能根据上下文和构词法推断、理解生词的含义;的含义; 2能理解段落中各句子之间的逻辑关系;能理解段落中各句子之间的逻辑关系;3能找出文章中的主题,理解故事的情节,能找出文章中的主题,理解故事的情节,预测故事情节的发展和可能的结局;预测故事情节的发展和可能的结局;4能能读懂常见体裁的阅读材料;读懂常见体裁的阅读材料; 5能根据不同的阅读目的运用简单的阅读能根据不同的阅读目的运用简单的阅读策略获取信息;策略获取信息; 6能利用字典等工具书进行学习;能利用字典等工具书进行学习; 7课外阅读量应累计达到课外阅读量应累
7、计达到15万词以上。万词以上。10写写 1能根据写作要求,收集、准备素材;能根据写作要求,收集、准备素材; 2能独立起草短文、短信等,并在教师的能独立起草短文、短信等,并在教师的指导下进行修改;指导下进行修改; 3能使用常见的连接词表示顺序和逻辑关能使用常见的连接词表示顺序和逻辑关系;系; 4能简单描述人物或事件;能简单描述人物或事件; 5能根据所给图示或表格写出简单的段落能根据所给图示或表格写出简单的段落或操作说明。或操作说明。 11命制试题的步骤命制试题的步骤 编写试题说明编写试题说明 制定考试双向细目表制定考试双向细目表12试题说明试题说明 考查的目的考查的目的 考查的范围考查的范围 受
8、试者受试者 考查内容考查内容 考查方法考查方法 考查的任务和题型考查的任务和题型 考查的组织机构考查的组织机构 考查实施考查实施 考查能力发展表格考查能力发展表格1314考试试题各部分的设计要领考试试题各部分的设计要领 听读任务的设计要领听读任务的设计要领 说写任务的设计要领说写任务的设计要领 情感态度,学习策略,文化意识任务的设情感态度,学习策略,文化意识任务的设计要领计要领15听读任务的设计要领听读任务的设计要领1.语言输入:文章体裁,内容话题和语言难度语言输入:文章体裁,内容话题和语言难度(阅读文段阅读文段不一定适用于听力)不一定适用于听力)2.试卷整体设计:权重与任务类型试卷整体设计:
9、权重与任务类型3.任务类型:任务类型: 选择性反应选择性反应评价任务:是非题,单选题,匹配题,排评价任务:是非题,单选题,匹配题,排序题序题 构建性反应构建性反应评价任务:根据文章内容填空,根据文章评价任务:根据文章内容填空,根据文章内容转换信息填写表格,问答题,翻译题。阅读测试内容转换信息填写表格,问答题,翻译题。阅读测试中还经常使用完形填空题型。中还经常使用完形填空题型。4.考点设置:与听力和阅读材料的考点设置:与听力和阅读材料的关键信息关键信息密切相关,密切相关,主要选取与主要选取与what,who, when, where,how等引等引导的问题相关的信息。导的问题相关的信息。5. 试
10、题的编写:单选题,完形填空题,干扰项,表格题试题的编写:单选题,完形填空题,干扰项,表格题161.语言输入语言输入话题:话题:课标课标中的话题,有教育意义的,适合中的话题,有教育意义的,适合 中学生的语言特征,思维水平和心理特征的。中学生的语言特征,思维水平和心理特征的。体裁:阅读理解的文体选择范围较广,体裁较体裁:阅读理解的文体选择范围较广,体裁较 多,但多,但完形填空完形填空和和语法选择语法选择较常用较常用夹叙夹叙 夹议夹议的文章。说明文和议论文较少使用。的文章。说明文和议论文较少使用。难度:难度:词语词语的复杂性(的复杂性(低频单词低频单词的占比,的占比,新单新单 词词不超过不超过3%)
11、 句子句子的复杂性(的复杂性(从句从句的数量和复杂程度)的数量和复杂程度) 篇章篇章的长度的长度 narrative 可上可上400词词 议论性的不能超过议论性的不能超过350词词17案例分析 单选第六小题 A tired B forgot C remember D tried hard but was unable18说写任务的设计要领说写任务的设计要领 1.确定考试类型:直接,半直接,间接确定考试类型:直接,半直接,间接 2.确定确定口试口试任务类型:根据考试答题时的人数任务类型:根据考试答题时的人数可分为单向型,双向型和多向型。可分为单向型,双向型和多向型。 3.确定确定写作写作任务类型
12、:自由写作,控制性写作任务类型:自由写作,控制性写作和指导性写作和指导性写作 4.写作任务的编写:写作任务由写作任务的编写:写作任务由情景描述情景描述,写写作提示作提示(prompts)和和写作要求写作要求组成组成19第三节第三节 书面表达书面表达为弘扬广府文化,你校在上周六举行了一次为弘扬广府文化,你校在上周六举行了一次“Guangzhou Culture Festival”的活动,请根的活动,请根据以下提示写一篇英语短文,介绍活动的情况并据以下提示写一篇英语短文,介绍活动的情况并提出你对下一年文化节的建议。提出你对下一年文化节的建议。情景描述情景描述20Guangzhou Culture
13、Festival活动名称活动名称活动情况活动情况粤剧歌唱比赛粤剧歌唱比赛Cantonese Opera Competition学生感兴趣,积极参与;学生感兴趣,积极参与;音乐动听,服饰美丽音乐动听,服饰美丽图片展图片展picture show展示了广州的变化展示了广州的变化从中了解广州的历史和从中了解广州的历史和文化文化美食展美食展(请你补充)(请你补充)你对下一年文化节的建议(你对下一年文化节的建议(1-2点)点)写作提示写作提示21 注意:注意:1.词数词数80左右(文章开头已给出,左右(文章开头已给出,不计入字数)不计入字数) 2.不得透露学校,姓名等任何个人信息,否不得透露学校,姓名等
14、任何个人信息,否则不予评分。则不予评分。写作要求写作要求222014佛山题俗话说俗话说”入乡随俗入乡随俗“从以上报道可见,去另一个从以上报道可见,去另一个国家前,先了解其习俗和历史是很有必要的。请国家前,先了解其习俗和历史是很有必要的。请你根据初中阶段所学的关于英国的习俗和历史,你根据初中阶段所学的关于英国的习俗和历史,写出一篇文章,投稿到某英文版的旅游文化刊物。写出一篇文章,投稿到某英文版的旅游文化刊物。情景描述情景描述23礼仪礼仪第一次见面通常握手第一次见面通常握手跟年长的人说话要用跟年长的人说话要用Mr或或Mrs饮食饮食在茶会(在茶会(tea party)只能喝茶,不喝咖啡只能喝茶,不喝
15、咖啡或果汁或果汁城市城市伦敦(伦敦(London)约两千年历史)约两千年历史利物浦(利物浦(Liverpool),在),在18世纪以工业世纪以工业闻名闻名注意事项注意事项 在公共场合不要大声说话在公共场合不要大声说话.(请在列举(请在列举1-2点)点)写作提示写作提示24 词数词数90左右左右 短文的开头和结尾已给出,不计入词数。短文的开头和结尾已给出,不计入词数。 文章需包括所有写作要点,但不要逐字翻文章需包括所有写作要点,但不要逐字翻译。可适当加入过渡语句,使短文通顺,译。可适当加入过渡语句,使短文通顺,连贯。连贯。 不要照抄短文,文中不能出现考生真实姓不要照抄短文,文中不能出现考生真实姓
16、名和学校名称。名和学校名称。写作要求写作要求25情感态度,学习策略,文化意识任情感态度,学习策略,文化意识任务设计思考要点务设计思考要点 情感态度可以结合情感态度可以结合听力考试听力考试考查考生对说考查考生对说话人情感、态度的理解来进行。话人情感、态度的理解来进行。 学习策略评价可以结合学习策略评价可以结合阅读理解阅读理解测试进行。测试进行。 文化意识评价可以结合文化意识评价可以结合口语测试口语测试(如对话、(如对话、情景反应),情景反应),阅读理解阅读理解和和写作题写作题进行。进行。26试卷分析与质量报告的撰写提纲试卷分析与质量报告的撰写提纲 一、试题命制情况一、试题命制情况 二、答卷总体情
17、况描述二、答卷总体情况描述 1.成绩分布成绩分布 2.统计量描述统计量描述 3.分布形态判断分布形态判断 4.由样本统计量推断总体参数由样本统计量推断总体参数 三、信效度分析三、信效度分析 四、项目分析(每道题的参数分析)四、项目分析(每道题的参数分析) 五、干扰性评估五、干扰性评估 六、试题分析(考点分析,选择项分析,作文描六、试题分析(考点分析,选择项分析,作文描述性分析和错误分析)述性分析和错误分析) 七、建议(期待的测试反拨作用)七、建议(期待的测试反拨作用)27统计数据分析统计数据分析 1.平均分平均分 2.标准差标准差 3.难度系数难度系数 4.区分度区分度28 50 70 90 40 70 1002930标准差标准差 可以反映分数的可以反映分数的离散离散趋势趋势离差平方和的算术平均数的方根离差平方和的算术平均数的方根31 50 70 90 40 70 100标准差越高,离散程度越大标准差越高,离散程度越大32难度系数难度系数做对的人数除以总人数做对的人数除以总人数难度系数越高,题目越容易难度系数越高,题目越容易33区分度低分组做对人数减高分组做对人低分组做对人数减高分组做对人数除以任意组人数数除以任意组人数34好可以接受要调整要去除35 Thanks for listening!36