學生學習評量與命題技術 王保進 台北市立教育大學 教育行政與評鑑所.

Presentation on theme: "學生學習評量與命題技術 王保進 台北市立教育大學 教育行政與評鑑所."— Presentation transcript:

1 學生學習評量與命題技術 王保進 台北市立教育大學 教育行政與評鑑所

2 TIMSS架構 數學 二種測量向度 溝通數學之想法與過程 內容領域(content domain)
認知領域(cognitive domain) 溝通數學之想法與過程 描述與解釋 使用數學術語與符號 說明簡化、評鑑獲解決等式之程序 以模型(mode)表徵個人數學想法

3 TIMSS架構 科學 二種測量向度 展現科學探究(inquiry)能力 內容領域(content domain)
認知領域(cognitive domain 展現科學探究(inquiry)能力 形成問題與假設 設計調查 蒐集與表徵資料 分析與解釋資料 摘取結論與提出解釋

4 數學內容領域測什麼？--數學知識 數 代數 測量 幾何 資料 整數、分數、小數、比率、與百分比 型態、等式與公式、關係
屬性與單位、工具、技巧、公式 幾何 直線與角、二與三度空間、全等與相似、位置與空間關係、對稱與轉換 資料 資料蒐集與組織、資料表徵、資料解釋

5 數學認知領域測什麼？--數學技能與表現 瞭解事實與程序 使用概念 解決日常問題 推理 記憶、確認、計算、使用工具
瞭解(know)、分類、陳述、設計公式、識別 解決日常問題 篩選、模式化、解釋、應用、證明或檢查 推理 假設或預測、分析、評鑑、類化、關連、分析統整、解決非日常問題、證明

6 科學內容領域測什麼？--學科知識 生命科學 化學 物理學 生物型態、特徵、及分類 有機體結構、功能、及生命過程 有機體之發展與生命循環
物種多樣性、適應、及自然篩選 生態系統 人類健康 化學 物質分類與組成 水之特性與使用 化學變化 物理學 物質之物理狀態與變化 能源之形式、來源、及轉換 熱與溫度 光 電與磁 力與運動

7 科學內容領域測什麼？--學科知識 地球科學 環境科學 地球結構與物理特性 地球運轉、循環、與歷史 地球與太陽系、宇宙 自然資源之使用與保護
環境變化

8 科學認知領域測什麼？--科學技能與表現 事實知識 概念的瞭解 推理與分析 記憶、確認、描述、使用工具與程序
舉例、比較/對照、陳述/模式化、相關、淬取與應用資訊、發現解答、解釋 推理與分析 分析/解釋/解決問題、分析統整、假設/預測、設計、蒐集/分析/解釋資料、摘取結論、類化、評鑑、判斷

9 TIMSS怎麼測？ 選擇題 計算題 應用題 簡答題 申論題 試題相關資訊請參閱

10 PISA架構 閱讀能力(reading literacy)
對書寫文本之瞭解、使用、及反省能力，以能達成個人目標、發展個人知識、並參與社會生活 三種測量向度 閱讀不同類型文本 表現不同閱讀工作能力 在實際情境中之文件閱讀

11 PISA架構 數學能力(reading literacy)
確認、瞭解、與使用數學，並能對數學在個人當前與未來生活中，扮演一個具建設性、關注與反省性之公民之需求，做出具有充分依據之判斷 三種測量向度 數學內容：同TIMSS之內容領域 數學能力：同TIMSS之認知領域 在實際情境中之數學應用

12 PISA架構 科學能力 能藉由具科學證據之結論與發展假設，以結合各種科學知識，進而能對自然世界有所瞭解並做出相關決策，同時透過人類的活動促進變革 三種測量向度 科學概念：包括物理、化學、及生物學等領域 過程技能：同TIMSS之認知領域 在實際情境中之科學應用

13 PISA怎麼測？ 選擇題 計算題 應用題 簡答題 申論題 試題相關資訊請參閱

14 R112：貧乏的品味 來自阿諾˙亞哥 你知道我們1996 年花在巧克力的費用，相當於我們政府花費在海外救助協 助窮人的經費嗎？ 我們的優先次序是不是有問題？ 你對此打算做什麼呢？ 是的，就是你！ 阿諾˙亞哥 密杜拉

15 前頁的信件出現在1997 年的澳洲報紙上。請參考這封信回答下列問題。
問題1：貧乏的品味 R112Q01 阿諾˙亞哥信裡的目的在於引起： A 內疚 B 趣味 C 恐懼 D 滿足 貧乏的品味 問題1 計分 題旨：省思文本形式:：確認作者的意圖

16 問題3：貧乏的品味 R112Q 你認為阿諾˙亞哥希望他的信引起何種回應或作為？ 貧乏的品味 問題3 計分 題旨：省思本文內容

17 M143：硬幣 你被要求設計出一套新的硬幣。所有硬幣都是圓形，且顏色都是銀色，但 是有不同的直徑。 研究者發現了一個理想的硬幣系統，其符合以下要求： • 硬幣直徑不可小於15 毫米，且不可大於 45 毫米 • 每個硬幣的下一個硬幣的直徑必須比它大至少30%。 • 鑄造的機械只能生產出直徑為整數的硬幣(如：可以製造17 毫米，但無法製造 17.3 毫米)。 ____________________________________________________ 問題 1：硬幣 M134Q 請你設計出一套符合上面條件的新硬幣系統。 從一枚15 毫米的硬幣開始，而且在你這套系統裡盡可能包含所有的硬幣大小， 則這套系統裡的硬幣直徑分別為多少？ 硬幣 問題1 計分 題旨：理解與運用複雜訊息做計算

18 問題 1：地震 M509Q01 有一個節目報導關於地震和其發生頻率，同時也討論地震的可預測性。 一個地質學家提到：「未來的20 年內，在Zed 這個城市發生地震的機會是三分之 二」 以下哪一個敘述最能夠反映出這個地質學家的意思？ A 因為 2/3*20=13.3 ，所以在Zed 這個城市從現在經過13～14 年將會發生一次地震。 B 因為2/3大於1/2，所以我們可以確定在未來20 年內將會發生一次地震。 C 未來20 年內，在Zed 這個城市發生地震比沒有發生地震的可能性大。 D 我們不能判斷未來會發生什麼事，因為沒有人可以確定何時會有地震發生。

19 學習評量的規劃 學習評量的基本原則 教學前的學習評量 教學中的學習評量 評量與教學目標的連結 評量與教學階段的連結 評量方式與教學成果的結合
建立課堂測驗的明細

20 學習評量的基本原則 事先告知評量內容與範圍 兼顧歷程與結果 依據教學目標 力求評量的客觀與精確 兼顧多重目的 採用多元方法 尊重學生隱私權
進行多次評量 尋求合作並改進評量技術 兼顧歷程與結果 力求評量的客觀與精確 尊重學生隱私權 提供師生立即回饋 善用評量結果

21 教學前的學習評量 以區別學生能力的高低為目的 通常由學科或測驗專家主導 實施過程強調公平及效率 重視測驗結果的預測效度

22 教學中的學習評量 以改進學生的學習行為為目的 由授課教師主導 與學科性質及班級文化密切配合 提供豐富回饋，兼重教學相長

23 學習評量與教學目標的連結 成功的學習評量指標 成功的評量情境設計要素 可測得學生瞭解的表現 可測得學生發現問題與解決問題的表現
可測得學生學習思考與態度 成功的評量情境設計要素 清楚傳達成功表現的指標 針對個別差異設計評量方式 針對課程內容與特性設計評量方式 評量媒體與資源的使用 注重教學回饋的訊息

24 學習評量與教學階段的連結 起點行為 教學目標 教學活動 教學評量 安置決策 診斷決策 監控決測 成就決策 補救決策
決定學生應以何種教學順序的那個層次為起點來學習 教學目標 診斷決策 決定那些目標是學生習得且可能導致學生學習障礙的因素 教學活動 監控決測 決定學生是否全心學習，指定的學習活動是否有效，及是否需要增刪學習活動 教學評量 成就決策 決定學生是否達成教學目標 補救決策 決定那些目標是學生學習無法成功，需進一步強化之學習

25 學習評量之種類 紙筆測驗 變通性評量(alternative assessment) 真實評量(authentic assessment)
教學即評量，評量即教學 實做評量(performance assessment) 實際表現技能之評量 動態評量(dynamic assessment) 檢視教學對認知改變之評量，以瞭解學生最大潛能 個人檔案(portfolio)

26 學習評量方式與學習結果的結合 學習成果的分類 評量方式 知識 推理與問題解決 技能 情意 產品
選擇反應(selected response)評量: 如選擇、是非、配合等 建構反應(constructed response)評量: 如計算、證明、填充、簡答、申論、解釋等 實作(performance)評量: 如活動過程或產品 人際溝通(interpersonal communication)評量: 如晤談、觀察、紀錄追蹤資料等 學習成果的分類 知識 推理與問題解決 技能 情意 產品

27 教學中的學習評量規劃 平時評量 依單元規劃 依時程規劃 定期評量 形成性評量 總結性評量 展現評量內涵 的全貌

28 平時評量依單元規劃實例 單元名稱 評量方式 評量規則與使用工具 占分比重 … 紙筆測驗 測驗卷A 5% 實作評量

29 期中考命題單元劃分 教育測驗的分類與運用 教學評量與教學目標 認知領域的評量 技能領域的評量 情意領與的評量 紙筆測驗編製原則與程序
紙筆測驗的實施與計分 測驗分析 實作評量 卷宗評量 分數的處理與運用 評量結果的報告 多元評量 動態評量

30 教學評量的重要理念 從Measurement  Evaluation  Assessment 只有多元評量才能真正判斷學生之學習表現
學生錯誤答案也有它的價值 天下沒有永遠的第一名，學生也需有學習挫折容忍之機會 成就的達成需要「學術網路」，而人格陶冶需要「人際網路」 外在生存能力內在生活態度

31 教師教學評量之專業準則 根據教學所要之決策，選擇適當之評量技巧 根據教學所要之決策，設計與發展適當之評量方法
具備使用、計分、與解釋各種評量結果之技巧 使用評量結果以做出有關學生學習、教學設計、課程發展之技巧 具備向學生解釋評量結果之溝通技巧 嚴守對評量結果之保密原則

32 紙筆測驗之編製 決定測驗之目的 發展雙向細目表 選擇適當之考題型式 編製與組合測驗題目 施測與評鑑測驗題目 使用與解釋測驗結果

33 決定測驗之目的 常模參照效標參照 成就表現 認知技能 形成性總結性

34 發展雙向細目表 確定測驗所要評量之教學目標 列舉教材內容 決定每一細格之相對比重 平均比重 專業經驗法則 根據目標與教材，選擇與分配考題

35 雙向細目表設計原則 依據教學目標、教材內容重點、課程內容難易與重要性，決定表中的試題數目與比重
視情況增減表中教學目標與教材內容、及試題數目與比重 未教學過的教材範圍，不應有試題出現 試題比重盡量避免為零(表示無適當試題代表) 針對教師自己的命題及評分習慣，選定表中測驗題型，增減試題數目

36 理想之雙向細目表—配分 知識 理解 應用 分析 綜合 評鑑 總計 4 6 10 34 2 32 12 16 14 30 100 單元一
單元二 2 32 單元三 12 16 14 30 100

37 實際之雙向細目表—題目分佈 知識 理解 應用 分析 綜合 評鑑 總計 A1 38 A2 31 A3 15 13 14 30 100 單元一
T2 C1 T3 S1 C2 S3 C3 S2 T4 T5 S6 A1 38 單元二 C5 T1 T7 C7 S4 S5 T8 C4 S7 A2 31 單元三 T6 C9 S8 T9 S9 C8 S10 T10 C10 A3 15 13 14 30 100

38 雙向細目表之專家效度 知識 理解 應用 分析 綜合 評鑑 總計 A1 38 A2 31 A3 15 13 14 30 100 單元一 T2
C1 T3 S1 C2 S3 C3 S2 T4 T5 S6 A1 38 單元二 C5 T1 T7 C7 S4 S5 T8 C4 S7 A2 31 單元三 T6 C9 S8 T9 S9 C8 S10 T10 C10 A3 15 13 14 30 100

39 CREATE                                                                                        

40 Bloom之認知目標 有意義的學習 認知 如何思考 知識向度(knowledge dimension)
教師應能區分教什麼 如何思考 認知歷程(cognitive process) 促進學生學習保留與遷移

41 知識向度 有關what的知識 有關how的知識 後設認知知識 事實性知識 概念性知識 程序性知識 策略、脈絡情境、自我認知
術語、特定細節與元素 概念性知識 分類、原理和通則、理論和模式 有關how的知識 程序性知識 技能和演算、技術和方法、運用規準 後設認知知識 策略、脈絡情境、自我認知

42 認知歷程向度 記憶 瞭解 應用 分析 評鑑 創造 長期記憶中提取相關知識 從教學訊息中創造意義，建立新、舊知識之連結
使用程序執行作業或解決問題 分析 分解材料成局部，並指出局部與整體間之關係 評鑑 運用標準或規準做判斷 創造 將各元素組裝成一具有意義、功能的整體

43

44 命題技術篇

45 命題人員的基本認識 一、充分瞭解教學目標和教材 二、充分瞭解學生 三、文字表達的技巧 四、充分瞭解各種題型 五、有創意 六、蒐集資料

46 一般的命題原則 (1/2) 1.試題符合教學目標和教材 試題取材須均勻分佈，且應是有代表性的內容
2.試題的文字須力求簡明扼要，但題意要清楚明確 3.試題須有公認的正確答案，避免有爭論的答案存在 eg. 吳敬梓是清朝的（ ） 4.試題須以概念為中心命題避免直接抄課文或原來材料 5.試題之中應避免含有暗示答案的線索 eg.有一個角為鈍角的三角形稱為（ ）

47 一般的命題原則 (2/2) 7.試題須是測量重要概念，而非零碎片斷的知識 8.試題宜注重概念或原理的應用，避免純粹記憶
6.每個試題的做答必須獨立，不宜相互牽涉或提供線索 7.試題須是測量重要概念，而非零碎片斷的知識 8.試題宜注重概念或原理的應用，避免純粹記憶 9.如果為運算題，宜注重原理的應用，避免繁雜計算 10.整合前後相關教材命題

48 題型分類 選擇反應題（selected response items） 是非題、選擇題、配合題
建構反應題（constructed response items） 填充題、簡答題、論文題（又分限制反應題和擴展反應題）

49 是非題的種類 1.對錯題型－最常見，判斷題目敘述是否正確。 2.叢集題型 例如：是非題－－ （ ）計分客觀 （ ）俱診斷的功能
（ ）計分客觀 （ ）俱診斷的功能 （ ）最易受猜測因素影響 3.改正題型 例如：最容易受猜測因素影響的是選擇題 4.因果關係題型 例如： 鯨魚是屬於魚類，因為牠生活在海中

50 是非題的命題原則 (1/2) 2.避免使用否定的敘述，特別是雙重否定 3.同一題避免同時包含兩個以上的概念於一題中出現（特別是一對一錯）
1.敘述力求簡要，避免冗長複雜 2.避免使用否定的敘述，特別是雙重否定 3.同一題避免同時包含兩個以上的概念於一題中出現（特別是一對一錯） 4.避免使用一些含有暗示作用的特殊詞 例如：「通常」「總是」「從未」「有時」「只有」 5.對的題目和錯的題目在敘序的長度應保持相近

51 是非題的命題原則 (2/2) 6.「對」與「錯」的題數宜大致相等，且隨機排列之
7.在因果關係的題型中，結果的敘述必須是對的，而原因的敘述可對可錯 8.避免含糊不明確的數量用語 9.意見性的敘述必須指出參考資料的來源或根據

52 這些題目是否合乎命題技術？ 1.是非題最易受猜測因素影響，而選擇題最容易編製 2.巴黎不是美國的首都 3.只有讀高中，才有機會上大學
4.所有的細菌都會引起疾病 5.臺灣的南部氣溫很高 6.五權分立的政府比三權分立的政府要好 7.師大的學生很優秀

53 選擇題的種類 (1/2) 單一正確題型 最佳答案題型 多重答案題型 類推題型 色筆：繪圖 == Ａ.房舍：居住 Ｂ.雞蛋：孵化
　　Ａ.房舍：居住 　　Ｂ.雞蛋：孵化 　　Ｃ.照片：回首 　　Ｄ.食物：香味

54 選擇題的種類 (2/2) 組合反應題型 影響…的因素有(甲)、(乙)、(丙)、(丁)、(戊) …。 (A) 甲、乙、戊 (B) 乙、丁、戊
(C) 甲、丁 (D) 乙、丙。

55 選擇題的結構 題幹(Stem) 直接問句(Direct Question) 不完全敘述句(Incomplete Statement)
1.下列何種題型作答最容易受到猜測因素影響？ 2.作答最容易受到猜測因素影響的題型是： （1）選擇題 （2）是非題 （3）配合題 （4）填充題 選項(Option, Alternatives) 答案(Answer) 誘答項目(Distracters) 【不正確的選項】

56 選擇題的命題原則 (1/3) 1.每題的選項宜求一致，至少三個或不過五個 2.題幹的敘述須清楚顯示題意
新式題目題幹通常不短，本身就是評量閱讀理解能力 3.題幹宜力求完整，避免被選項分成兩部分 一個人能夠知道自己的恥辱，就是： (1)懦弱 (2) 勇敢 (3) 驕傲 (4) 怕羞 的人。 4.題意清晰，必要的敘述或相同的字詞宜放置在題幹中 西藏地方高度在： (1)5000公尺 (2)6000公尺 (3)3000公尺 (4)4000公尺 以上的地區，通稱寒漠。

57 選擇題的命題原則 (2/3) 5.所有的誘答選項應具有似真性 6.選項的敘述長度力求接近，避免暗示正確的答案 7.選項之間應避有重疊的現象
7 X 8 的得數： (1)小於 (2)小於 50 (3)小於 (4)小於 70 8.儘量少用「以上皆是」和「以上皆非」為選項

58 選擇題的命題原則 (3/3) 9.題幹儘量少用否定的敘述，如果必須使用否定句敘述時，宜特別強調否定的字眼或字詞
10.題目必須確定只有一個清楚的正確的答案或最佳的答案 11.正確答案出現在各選項的次數宜接近相同，且須隨機排列之 12.題幹和選項的敘述應避免暗示正確答案的線索出現

59 配合題的題類型 傳統型式： 基本結構由兩個部分組成，一欄是問題項目或稱前述項目（premise），另一欄是反應項目（response），學生根據兩者的關係，從後者選出與前者有關聯的反應項目，將其代號填入前述項目的空格中即可。 配合圖型（地圖、器官構造圖等）填入名稱代號等

60 配合題的命題原則(1/2) 1.在同一組配合題中，各個項目的性質應力求相同 (1)美國的第一任總統 (A)紐約
(2)美國的第一大城市 (B)華盛頓 (3)美國的第一大河 (C)1776年 (4)美國獨立戰爭發生的年代 (D)密西西比河 2.題幹項目與反應項目的敘述應力求簡要，題幹項目宜列左邊，反應項目宜列右邊

61 配合題的命題原則(2/2) 3.題幹項目與反應項目的數量不宜相，且不宜限制每個反應項目被選的次數 4.做答方式應明確說明
做答說明： 左邊一欄包括六項客觀式測驗題的特徵，右邊一欄則為四種客觀式測驗題。從右邊的反應項目中選出一個最適當者，填到左邊每個題目前的空格裡。每個反應項目可選擇一次以上。 5.同一組配合題的題幹項目與反應項目宜列印在同一頁上 6.反應項目應有按邏輯順序地排列

62 各種選擇反應題型的優點和限制 是非題的優點 1.容易命題，適合各種教材 2.適合年幼學童或閱讀能力有限的學童
3.內容取材範圍大，內容取樣較具代表性。 4.計分客觀迅速 5.適合測量有誤解的概念 6.適合測量辨認因果關係的能力

63 各種選擇反應題型的優點和限制 是非題的限制
1.和其他選擇式反應題型相比，是非題的作答最容易受到猜測因素和反應心向影響，作弊也比較容易；此外，是非題也較容易發生題意不清的情形。 2.和其他選擇式反應題型一樣，是非題很難測量到學生書寫表達、統整、組織和「做」的能力。 3.許多的情況下，題目敘述並非截然明確的對或錯，而是有不同程度的正確性，這使得要出一道好的是非題，變得不容易。

64 各種選擇反應題型的優點和限制 選擇題的優點 1.計分客觀迅速 2.比是非題清楚, 不易猜測, 鑑別度信度高 3.可藉調整選項來調整試題難度
4.具有診斷功能

65 各種選擇反應題型的優點和限制 選擇題的限制
1.編製具有誘答力的誘答選項並非容易的事，若誘答編製不佳，不但喪失誘答功能，甚至成為學生答題的線索。 2.和開放式問題相比，選擇題較無法測量到學生書寫表達、統整和組織的能力；和實作評量相比，選擇題無法測量到「做」（doing）的能 3.和建構式反應題（如填充題和開放式問題）相比，選擇題較容易受猜測因素影響。

66 各種選擇反應題型的優點和限制 配合題的優點 1.計分上客觀、容易，且信度高 2.容易編製 3.單位時間內可以測量較多的題目

67 各種選擇反應題型的優點和限制 配合題的限制 1.題幹和反應必須具有同質性，然而此種的命題材料不容易找。
2.若命題技術欠佳，通常只測量到事實知識的記憶而非關係的連結，甚至製造無關的線索。 3.和其他選擇式反應題一樣，配合題無法測量到學生書寫表達、統整、組織和「做」的能力。

68 建構反應題 建構式測驗題（constructed-response items）的答案由學生產生和提供，需要人工閱卷計分，無法使用電腦閱卷。常見建構式反應題有填充題（completion item）和論文題（essay question），論文題有時也稱作開放式問題（open-ended question）。 填充題通常要求學生提供一明確答案，而論文題允許學生自由建構、組織和呈現想法，根據給予學生組織和表達觀念的自由程度，論文題可分為兩大類：限制反應題（restricted-response question）和擴展反應題（extended-response question），擴展反應題又稱申論題。

69 填充題或簡答題（short answer）
不完全敘述句例題： 1.（ ）是台灣唯一不靠海的縣。 2. 台灣唯一不靠海的縣是（ ）。 直接問句例題： 1. 那一縣是台灣唯一不靠海的縣？（ ）

70 填充題命題技術(1/2) 1.儘量採用「直接問句」來命題，而少用「不完全敘述句」命題 2.填寫的空白必須是重要的概念，而非零碎的知識
國父 孫中山先生出生於( ) 3.空格不宜太多，以免無法把握題意 eg. ( )的計算是以( )除以( ) e.g.維生素＿＿與＿＿的代謝有關，缺乏的話，會產生＿＿＿病。 4.每題待填的空格盡可能放在末端，以利計分

71 填充題命題技術(2/2) 4.每題待填的空格盡可能放在末端，以利計分 5.如果答案是數字，則需指出所要求的精確程度和單位名稱
e.g.長為1.3公尺，寬為50公分的長方形面積為多少？ 6.問題不可直接從教科書或參考書抄下

72 填充題的優點和限制 優點 1.容易編製 2.減少猜測 3.特別適用於計算題 限制 1.評分較選擇式題型費時費力
2.因為要求的答案簡短明確，因此難以測量到複雜思考，組織和表達的能力

73 限制反應題 限制反應題對學生反應的內容和形式加以設限，常在問題中指明討論主題的內容範圍和反應的方式，例如「比較選擇題和論文題的信度和效度。」有時也可能限制作答的篇幅。

74 限制反應題可測量以下各項能力 1.解釋因果關係 2.描述原理原則的應用 3.提出適切的論證 4.陳述可辯護的假設 5.陳述有效的結論
6.說明必要的假定 7.描述資料的限制 8.解釋方法和程序 （Linn & Gronlund, 2000）

75 擴展反應題 （申論題） 擴展反應題給予學生相當大的答題自由，學生可以自由選擇自己認為有關的知識，根據自己最佳的判斷組織答案，整合和評鑑自己認為適當的想法觀念，並將之呈現出來。此種自由度使學生展現其選擇、組織、統整、評鑑和創意表達的能力，這些能力通常是學校教育的重要目標 。

76 擴展反應題可以測量以下各項能力 1.提出、組織和表達想法 2.統整不同領域的學習結果 3.創作新穎獨特的方式（如設計實驗）
4.各種文類的寫作（如敘述、說明和說服性質的文章） （Linn & Gronlund, 2000）

77 論文題的命題原則 1.只有客觀試題無法滿意測量學習的結果時才用論文題 2.明確界定所欲測量的行為 3.題目的敘述須使學生知道所要回答的方向
4.標明每一題的回答時間，並給予充分做答的時間 5.避免使用選題做答的方式 6.使用多題短答的方式較少題長答的方式為佳

78 論文題的評分原則 1.先備妥評分要點 2.評分標準要前後一致 3.使用最適當的評分方法（分析或整體） 4.避免無關因素的影響
5.同時間只評閱一個問題 6.同時間內評完試卷避免中斷 7.採匿名方式評分 8.最好採覆閱

79 論文題的優點與限制 優點： 1.測量較複雜的學習結果 2.容易編製 限制： 1.信度低 2.內容效度低 3.評分費時

80 組合測驗 測驗的題數--考慮 測驗目的、測驗題型、信度、學生特性(年 齡、能力)、測驗時間、題目複雜程度 測驗的難度--考慮測驗的目的
測驗目的、測驗題型、信度、學生特性(年 齡、能力)、測驗時間、題目複雜程度 測驗的難度--考慮測驗的目的 測驗的編排--可根據 難度、題型、教材內容、測量的能力 檢視測驗、撰寫施測說明和做答說明、設計答案紙、準備計分鍵

81 測驗分析(一) 難度與鑒別度 步驟 難度=(Ph+Pl)/2 鑒別度=Ph-Pl 將學生答案輸入熟悉之軟體，如EXCEL、SPSS
請電腦改考題並計分 根據總分區分高中低三組 計算高分組答對各題之百分比（Ph) 計算低分組答對各題之百分比（Pl) 難度=(Ph+Pl)/2 鑒別度=Ph-Pl

82 測驗分析(二) 誘答力分析—選擇題錯誤選項之效度分析 計算高分組在各錯誤選項選擇之百分比 計算低分組在各錯誤選項選擇之百分比 判斷標準
優良選項 高分組百分比低於低分組 不佳選項 高、低分組選擇人數為0或偏低 問題選項 高分組百分比高於低分組

83 個人檔案中之學生反省 選擇作品之原因 完成作品之歷程 如果再有機會，作品如何修正 作品給我的啟示

84 個人檔案中之教師反省