1、1張仁家張仁家 國立臺北科技大學技職教育研究所國立臺北科技大學技職教育研究所 教授教授2013年年6月月多元評量的設計與實施多元評量的設計與實施十二年國教的五堂課台北科大技職所張仁家2 2報告大綱報告大綱1.前言-教學與評量的關係2.教學評量的基本原則3.多元評量的設計與實施多元評量的設計與實施 台北科大技職所張仁家3 3壹、前言壹、前言 台北科大技職所張仁家教學系統圖教師教師情境情境目標目標課程課程學生學生方法方法台北科大技職所張仁家國內外教育界流傳的兩句話 測驗測什麼內容學生就得到什麼內容 (what you test is what you get)有什麼樣的測驗就有甚麼樣的教學 （wh
2、at is tested is what gets taught）考試領導教學考試領導教學 5台北科大技職所張仁家台北科大技職所張仁家學生的學習目標 知識理解 原理解釋 計算分析 溝通技巧 動作技能 運動技能 概念應用 情意特質等認知領域情意領域技能領域台北科大技職所張仁家系統化教學設計台北科大技職所張仁家評量在教學中的角色評量在教學中的角色評量的課題賦予課程的成果與生命；只有藉著明確明學生應該做的事，以及他們能做得多麼好，這些學生學習的敘述才有意義。（Danielson&Abrutyn,1997/2000,p.8）在教學上，一個理念再優的教學計畫，如果少有效的評量，就像騎匹千馬，一狂馳，但卻
3、知道方向在哪。（王文中，2000）台北科大技職所張仁家1.1.老師老師教教我容易忘記我容易忘記2.2.老師老師示範示範給我看可能會記得給我看可能會記得3.3.老師老師讓我參與讓我參與我會一輩子記得我會一輩子記得 黑幼龍黑幼龍台北科大技職所張仁家1111貳、教學評量的基本原則貳、教學評量的基本原則 台北科大技職所張仁家Question1.銅管焊接應該使用何種焊條?台北科大技職所張仁家Question2.銅管焊接應該使用何種焊條?(A)銅焊條 (B)鐵焊條 (C)鋁焊條 (D)銀焊條台北科大技職所張仁家Perception1.同的命題可以改變學生的成績2.可以激勵或削減學生的學習動機3.同的誘答選
4、項可看出命題品質4.命題技巧是教學過程的重要能力台北科大技職所張仁家教學評量的本質教學評量的本質如同Linn and Gronlund（2000）的：廣泛的收集學生學習的訊息，以做助於學習程的價值判斷（p.31）。Wiggins（1988）所言：以有系統的方式培育學生自我修正（self-correct）的能力，而是作為學習結束時的稽核工具。台北科大技職所張仁家教學評量之重要意義教學評量之重要意義評量是承接轉合的關鍵部份，而是教學程的終點站，教學評量的主要目的，在於分析教學得失及診斷學習困難，作為實施補救教學和個別輔導的依據。台北科大技職所張仁家你看到甚麼?17台北科大技職所張仁家看到的看到的,
5、一定是真的一定是真的!通過考試的老師通過考試的老師 18台北科大技職所張仁家教學評量之類別教學評量之類別-依依教學程教學程之分之分預備性評量形成性評量總結性評量教 學 前教 學 中教 學 後教學評量模式台北科大技職所張仁家依評量資料之解釋方式分依評量資料之解釋方式分（1/21/2）標準參照評量(criterion-referenced evaluation):標準(或效標)參照評量是指依教師在教學前所訂定的標準來解釋個別評量分數是否達成這項既定標準的一種評量。台北科大技職所張仁家依評量資料之解釋方式分依評量資料之解釋方式分（2/22/2）常模參照評量(norm-referenced evalu
6、ation):常模參照評量是指依團體分數之平均數（即常模）來解釋個別評量分數在團體中所處的相對位置的一種評量。台北科大技職所張仁家標準參照測驗與常模參照測驗之比較標準參照測驗與常模參照測驗之比較測驗名稱測驗名稱標準參照測驗標準參照測驗常模參照測驗常模參照測驗主要目的特定精熟性的考驗學習成就的互相比較量尺定準點兩端，事前決定中間，事後決定參照點性質理想的、絕對的實際的、相對的評量功能檢定功能，找出超乎某一特定的能力水準以上者鑑別功能，比較團體成員間之差異情形，尋找出最具潛能者結果表示法及格或及格百分等級或標準分數記分方法傳統百分制常態等第制台北科大技職所張仁家教學評量基本概念教學評量基本概念 在
7、古典測驗理論（CTT，又稱古典信度測驗）中最重要的基本假設：t+e:實得分數,t:真實分數,e:誤差分數台北科大技職所張仁家教學評量的用途教學評量的用途（一）達成教學 瞭解學生的起點行為 做為改進教學的參考 確保教學目標的達成（二）診斷學習 診斷學生的學習 改進命題的技巧 評定學生的學習成果-努力、進步、長處努力、進步、長處（三）幫助學習 激勵學生的學習動機 幫助學生的記憶和學習遷移 促進學生的自我評量台北科大技職所張仁家是非題的命題原則1.避免使用一般的用語，如：通常、一般、時常及有時。2.避免過於瑣碎的描敘。3.避免使用負面的描敘，尤其是雙負語。4.避免過長，複雜的句子。5.避免使用兩個概
8、念的描敘，除非具有因果關係。6.避免使用無資料來源的八卦命題。7.避免描敘的長度同。8.避免使用適當的題數分配。台北科大技職所張仁家選擇題選擇題的命題原則-11.應能夠測量到重要的學習結果2.每道試題的選項數目應一致3.題幹的敘述應清楚表達,避免過短/過長4.題幹宜保持完整,勿被選項切割成兩段5.選項的敘述如有相同應放在題幹中6.錯誤的選項應發揮應有的誘答功能7.除非特別強調,否則儘量使用肯定句敘述台北科大技職所張仁家選擇題選擇題的命題原則-28.試題必須只有一個正確或是較佳的選項9.選項的文法必須與題幹一致10.避免有暗示答案的線索出現11.儘量避免使用以上皆是或以上皆非12.均勻分布答案的
9、次數與位置13.保持同意測驗的每道試題各自獨立14.使用經濟有效的格式15.試題宜過多以免成為速度測驗台北科大技職所張仁家簡答題簡答題(填充題)的命題原則1.試題用字必須簡明扼要。2.勿直接截取課本的敘述成為題目。3.如果答案是用單位與數字來表示，那就需註明單位。4.每個空格均應放在問題右側且長度一致。5.使用完整的題幹，勿使用太多的空格。台北科大技職所張仁家Question 我國的鐵都是 我國的煤都是台北科大技職所張仁家論文題論文題(申論題)的命題原則1.較複雜或較高層次的學習評量才使用2.問題儘量與所要測量的學習結果有關3.明確敘述問題,使學生解問題所在4.儘量避免學生可以選擇部分題目作答
10、5.給予充足的作答時間並告知6.避免命題過於窄化台北科大技職所張仁家 貳、傳統教學評量之省貳、傳統教學評量之省思思 1/2一、評量目標：1.較少顧及教學目標。2.忽略技能和情境評量。二、評量方式：1.大多均採紙筆測驗。2.忽略其他評量方式。三、評量時機：1.多數以總結性評量為主。2.形成性評量大多採坊間測驗。3.忽略診斷性、安置性評量。台北科大技職所張仁家 四、結果解釋：(2/2)1.過份強調個別間競爭。2.過份重視各班成績的比較。3.公布成績常損及學生尊嚴。五、命題觀念：1.忽略較高層次思考的評量。2.命題未編製細目表。六、命題技術：1.題目形式當。2.忽略命題原則。3.忽略教科書重要內容。
11、七、家長觀念：1.斤斤計較卻忽略人格發展。2.過度期盼或放任管。台北科大技職所張仁家活動一活動一:分組自我介紹分組自我介紹 6mins6mins1.請同一群或同一科的教師在同一組,每組最好不超過四人2.推選小組長3.每個成員都編出1-4號4.自我介紹1-1.5分鐘5.6分鐘之後,介紹對方33台北科大技職所張仁家活動二活動二:分組討論分組討論 10mins10mins各組請舉1-2例可以有效提升學生學業成就的方法?(以案例描述)台北科大技職所張仁家3535參、多元評量的設計與實施參、多元評量的設計與實施 台北科大技職所張仁家 一、多元評量的意義一、多元評量的意義 多元評量係以教師教學與評量專業為
12、基礎，依據教學目標研擬適切的評量方式、評量內涵、評量人員、及評量時機與過程，並呈現多元的學習結果，以提供更適性化的教學來增進學生成長。台北科大技職所張仁家 二、多元評量的迷思二、多元評量的迷思 (一)多元評量並非廢除紙筆測驗。(二)多元評量並非一種評量。(三)多元評量莫為多元而多元。(四)多元評量並非目的。(五)多元評量並非學習終點。(六)多元評量並非主觀評量。(七)多元評量並非萬靈丹。台北科大技職所張仁家“多元多元”是否又是語文評量是否又是語文評量?評量時，學生將教學中習得的解題方式應用於許多類似題型之上，中下程度的學生，如果理解力足、記憶力夠強就難以在評量中獲得好成績，習也就於記憶；從學習
13、單、平時測驗、到期中評量，等於再製的迷思。學生只要聽到習或複習，沮喪又無力。如此刻板的數學科評量相形於語文評量設計的縝密與生動，顯得貧乏且僵化，對於這樣的差。台北科大技職所張仁家 三、多元評量的多元特質三、多元評量的多元特質(李坤崇李坤崇,2005),2005)(一)專業多元(二)內涵多元(三)過程多元(四)時機多元(五)情境多元(六)方式多元(七)人員多元(八)計分多元(九)結果多元：能力與努力(十)呈現多元：質與量台北科大技職所張仁家 一、專業多元(一)掌握教學目標。(二)專業判斷知能。(三)兼顧技能與情意的評量。(四)剖析教材內容。(五)設計雙向細目表。(六)規畫評量方式或慎選題目類型。
14、(七)善用命題技術。(八)適切解釋評量結果。台北科大技職所張仁家 二、內涵多元(一)兼顧認知、情意、技能等內涵。(二)兼顧學生的學習程、生活世界與社會行為。(三)Gardner多元智慧(八項半智慧)：語文、邏輯數學、肢體動覺、音樂、空間、自然觀察者、人際、內省，及半項智慧-存在。台北科大技職所張仁家三、過程多元(一)安置性評量(二)形成性評量(三)診斷性評量(四)總結性評量台北科大技職所張仁家四、時機多元(一)定期評量：兩至三次的定期評量。(二)平時評量：充分考量學校願景、教師素養、學生特質、家長需求等因素。台北科大技職所張仁家五、情境多元(一)評量情境包括教室、教室外情境(二)隨著評量方式的
15、多元化，常跳脫教室情境 台北科大技職所張仁家六、方式多元(一)紙筆測驗(筆試)(二)檔案評量(資料蒐集整理、書面報告)(三)實作評量(表演、實作、作業、鑑賞、實踐、軼事記錄)(四)口語評量(口試、口頭報告、晤談)(五)軼事記錄 台北科大技職所張仁家七、人員多元(一)教師評量(二)同儕評量(三)組長評量(四)自己評量(五)家長評量 台北科大技職所張仁家八、計分多元(一)直接給單一學習總分。(二)經由基本分數與加權分數合計而得 單一學習總分。1.個別學習時，教師為鼓勵學生參與學習程，先給予基本分數，再視其學習程與結果給予加權分數，兩者合為個別學習的分數。2.小組合作學習時，基本分數常為小組的分數，
16、而加權分數則為組內個人的表現分數或組內人員互評所得的分數。台北科大技職所張仁家九、結果多元：能力與努力 台北科大技職所張仁家十、呈現多元：質與量(一)量化：分數、圖示、等級(優、甲、乙、丙、丁)。(二)質化：文字敘述、具體建議。台北科大技職所張仁家肆、各類教學評量的種類與實例肆、各類教學評量的種類與實例一、檔案評量檔案評量乃教師依據教學目標與計畫，請學生持續一段時間主動收集、組織與省思學習成果的檔案，以評定其努力、進步、成長情形。予以彙整後即成為一份完整的學習檔案，而用檔案評量來評量學習檔案乃最佳之策略。台北科大技職所張仁家二、實作評量實作評量乃具相當評量專業素養的教師，編擬與學習結果應用情境
17、頗類似的模擬測驗情境，讓學生表現所知、所能的學習結果。實作評量評量旨在評量知識、理解化為行動的能力，常見者為行為或態度評量表、行為檢核表。台北科大技職所張仁家行為或態度評量表係指一組用來作為判斷依據的行為或特質，及能指出學生在每種屬性中同程度的量表，可用以評量學生學習態度、策略與興趣，或人格、情意發展狀況。行為檢核表係依據教學或評量目標先將學生應有、可觀察的具體特質、行為或技能，依照先後發生順序或其他邏輯規則逐一詳細分項，並以簡短、明確的行為或技能描述語句來條列出行為或技能標準，後請檢核者(包括教師、家長或學生)就學生的實際狀況依序勾選，以逐一評定學生行為或技能是否符合標準。台北科大技職所張仁
18、家三、口語評量常用口語評量乃口試、問問題。口試較常用於總結性評量，如用演講、辯論、口頭報告、經驗分享故事接龍來評量，或採放聲思考，日常應用心得分享、口頭報告、表演等方式來評量。台北科大技職所張仁家四、遊戲化評量(系列實作評量)採取較活潑生動的教學、將知識轉化為能力，將學習與生活結合。隨著教學生動化、活潑化，評量亦必須納入遊戲化評量(系列實作評量)。讓學生在遊戲中學習、由習中評量。台北科大技職所張仁家五、高層次認知測驗評量本學習領域宜審慎運用紙筆測驗，應揚棄低層次認知之記憶、理解評量，然亦應排斥高層次認知之評量。因此，仍需以高層次認知測驗內涵之紙筆測驗，作為進一步改善之依據。台北科大技職所張仁家
19、六、軼事記錄軼事記錄乃教師觀察學生日常生活表現，詳細寫下重要而有意義的偶發個人事件和行為的紀錄。軼事記錄通常做為評量佐證資料，而非評量的唯一依據，因學生日常生活的點點滴滴難以在教師設計的評定量表、檢核表、檔案資料、或紙筆測驗中完全呈現，若能以教師在班級情境的直接觀察作為佐證資料，當能提高評量結果的效度。台北科大技職所張仁家實例(實習課程的觀察)台北科大技職所張仁家五、評等或計分方式：(一)本學習領域以呈現分數為原則，教師可依教學目標、工作負擔、學生或 家長需要，採取評定等級、文字 敘述的方式。(二)教師評定等級後，宜視需要於分享 欄，輔以文字深入明，並予學生適切 增強。(三)若必須採取核算等級
20、計分方式，可依 下列評量表中，六項評量項目逐一計分。台北科大技職所張仁家五、評等或計分方式：(四)每個評量項目之能力向度計分，如下表：(五)努力向度：出現一次加1分，-出現一次減1分。(六)若檔案未交則以0分計算，補交則 給基本分，補交時間由教師規定。評量評量項目項目很好很好(AA)不錯不錯(A)加油加油(B)改進改進(C)補做補做(D)基本基本分分610962040台北科大技職所張仁家伍、評量在教學中之運用伍、評量在教學中之運用1.教學決定需要評量的訊息2.評量與教學的關係台北科大技職所張仁家1.1.教學決定需要評量的訊息教學決定需要評量的訊息評量乃超越資料搜集技巧，是一個有系統的過程，始於
21、確認教學目標，終於判斷這些目標達到的程度（Linn&Gronlund,2000,p.29）。非正式的教室觀察指引著許多教學上的決定，例如口頭問答可以帶領學生對教材做一統整回顧；教室討論可以發現學生某些迷思概念（Linn&Gronlund,2000,p.29）。雖然觀察是一個非正式的評量，在有效教學中扮演著可或缺的角色。它提供更多非正式的方法讓教師獲得學生學習的訊息。台北科大技職所張仁家2.2.評量活化學習的程評量活化學習的程無論教學或評量，教師所給予的鷹架支持是容忽視的，尤其面對一個具有挑戰性的任務時，學生需要斷的去試驗、蒐集資料、建立假設、並且評估自己的工作進度（Linn&Gronlund,
22、2000）才容易促進表現品質。評量任務完成的同時，教學也告一段，評量與教學同時發生，評量本身所促進的，是老師的教學能力，也是孩子的學習過程。台北科大技職所張仁家決定測驗之目的發展雙向細目表準備測驗題目組合測驗題目施測評價測驗題目測驗結果3教學評量設計與實施教學評量設計與實施台北科大技職所張仁家1.決定測驗之目的常模參照效標參照形成性評量總結性評量台北科大技職所張仁家2.發展雙向細目表步驟：確定教學目標分配各教材所佔的比重編製細目表台北科大技職所張仁家一、雙向細目表(two-way specification table)是較常評量內容效度的工具,也是教師命題的工具之一。二、雙向細目表之定義-包
23、含一份測驗所 應包含的內容與所應測量到的能力。三、功能-協助教師命題協助教師命題,內容效度的判斷內容效度的判斷。雙向細目表雙向細目表台北科大技職所張仁家冷凍原理測驗認知領域教育目標之能力層次知識（記憶）理解得分內容壓縮機（30）1.能出各種型式的壓縮（40）2.能出壓縮機的功用（20）1.能理解各種壓縮機的動作原理 （30）2.能解釋冷凍油的功用（10）30冷凍循環（70）1.能出冷凍循環程（30）2.能出莫利爾線圖構造（40）1.能理解冷凍循環在莫利爾線圖上的意義（20）2.能理解過熱壓縮的功用（10）70得分6733100雙向細目表台北科大技職所張仁家3.分配各教材內容之比重平均分配依據重
24、要性分配加權比重台北科大技職所張仁家活動三活動三:撰寫雙向細目表撰寫雙向細目表 30mins30mins1.每組一張空白A1海報紙 及10張A4的白紙2.每組兩支麥克筆(一藍一黑)3.每組僅有20分鐘的時間討論與命題,有10分鐘的時間繪製海報,共30分鐘4.命題的題型不限5.命題範圍可任選一個科目3-4個章節(大約一次月考的範圍)69台北科大技職所張仁家70測驗名稱:_XX領域教育目標之能力層次得分單元內容（）1.（）2.（）1.（）2.（）（）1.（）2.(）1.（）2.（）得分台北科大技職所張仁家認知教學評量客觀式測驗選擇、是非題配合題論文式測驗命題作文問答、填充題 台北科大技職所張仁家情
25、意教學評量情意教學評量自我報告工具調查表考核表態度量表行為觀察 台北科大技職所張仁家技能評量的因素 操作者體能因素工作物的品質因素手眼協調性功能完整性 體力全身平衡感完成時間控制精確力 美觀反應靈敏度成本創造力台北科大技職所張仁家技能教學評量台北科大技職所張仁家調查表1.1.您對冷凍原理課程內容瞭解程度為何？您對冷凍原理課程內容瞭解程度為何？完全瞭解完全瞭解 瞭解瞭解 普通普通 瞭解瞭解 完全瞭解完全瞭解 原因：原因：2.2.您對冷凍原理課程較懂的章節為何？您對冷凍原理課程較懂的章節為何？第一章第一章 第二章第二章 第三章第三章 第四章第四章 第五章第五章 原因：原因：3.3.您覺得老師的教法
26、是否讓您較易接受？您覺得老師的教法是否讓您較易接受？非常好非常好 好好 普通普通 好好 非常好非常好 原因：原因：4.4.建議事項：建議事項：台北科大技職所張仁家考核表評量內容評量內容評量結果評量結果優優尚可尚可待加強待加強能瞭解節約能源的重要性能瞭解節約能源的重要性能主動閱讀有關冷凍原理的能主動閱讀有關冷凍原理的資訊資訊上課時認真聽講、勤做筆記上課時認真聽講、勤做筆記積極參與小組討論積極參與小組討論姓名：姓名：台北科大技職所張仁家考核表評量項目評量項目評量者評量者完全完全做到做到經常經常做到做到偶爾偶爾做到做到沒有沒有做到做到我會按時寫作業我會按時寫作業學生學生家長、教師家長、教師我見到師長
27、會問好我見到師長會問好學生學生家長、教師家長、教師我有養成隨手關燈的習慣我有養成隨手關燈的習慣學生學生家長、教師家長、教師學生行為自我表現考核表 年 月 日學生：學生：台北科大技職所張仁家態度量表1.上課有認真聽講：贊成 贊成2.節約能源人人有責：贊成 贊成3.看見教師和同學要問好：贊成 贊成4.可隨意破壞學校的實習設備：贊成 贊成5.冷媒可隨意釋放至空氣中：贊成 贊成6.未經教師允許可送電測試:贊成 贊成台北科大技職所張仁家行為觀察記錄表 評分項目評分項目評分評分發言頻率下課後與同學討論頻率學習態度完成作業頻率姓名：年 月 日台北科大技職所張仁家 誘答率誘答率-每一個選項的作答人數佔總人數的
28、百分比值。例如某試題正確選項(A)作答率為0.893，(D)作答率為0.107，顯示該選項具有誘答力，有約10.7的學生有此錯誤概念；選項(B)及選項(C)沒有人選,則誘答率為0。難難易易度度-試題的容易程度,P（PH+PL）/2 鑑別度鑑別度-指試題能區別受試者能力高低的程度,D（PHPL）試題分析試題分析台北科大技職所張仁家測驗結果的分佈-常態分配13.5934.132.140.14台北科大技職所張仁家正偏態的分配正偏態的分配台北科大技職所張仁家負偏態的分配台北科大技職所張仁家要如何打分數？要如何打分數？5045403530252015105001520253035404550556065
29、707585909580中間2/3較低1/6較高1/6-分數常態分配圖分數常態分配圖次數（人）原始成績分數（分）此圖假設平均分數為此圖假設平均分數為55分分台北科大技職所張仁家要如何打分數？要如何打分數？-負偏態負偏態此圖假設平均分數為此圖假設平均分數為75分分5045403530252015105001520253035404550556065707585909580次數（人）原始成績分數（分）台北科大技職所張仁家要如何打分數？要如何打分數？5045403530252015105001520253035404550556065707585909580-負偏態負偏態次數（人）原始成績分數（分）此圖假設平均分數為此圖假設平均分數為85分分台北科大技職所張仁家討論討論請舉例分享你最難忘的一位教師，why?台北科大技職所張仁家88
