如何出考題 醫學教育部 林季緯醫師
考題類型 考試最為耗時的兩個步驟:一、出考題,二、閱卷。 出考題很容易(如申論題)時,閱卷就很麻煩,反之,出考題很麻煩時(如選擇題),閱卷就很容易。 通常可依據班級大小選擇考試題型,例如大班便採用選擇題;中型的班級使用簡答題;小班就考申論題。 雖然班級的大小是採用哪種考題的重要因素,然而課程本身期望達成的教學目標應該作為第一優先考慮。
考題類型有哪些? 計算題 簡答題 申論題 是非題 選擇題
計算題 數學、科學和其他學科常會考計算題,其用意在於激盪學生腦力,思考運用何種方法或技巧來解決問題。 但有些題目出得過於死板,無助學生思考;有些題目需要冗長的計算過程才能算出答案,因此考試題目不能出太多。 若遇到這種情形,教師可以提供學生一些開始的計算步驟,讓學生繼續完成。亦可以用選擇題選項中列出計算過程,讓學生選擇。 有些計算題有好幾種不同的解題方法,這時評分就要特別強調解題過程,而非注重是否算出答案,這樣可以幫助學生聚焦於過程而非結果。
簡答題 簡答題旨在要求學生作簡潔的描述,不需要回答細節。 多數簡答題只是讓學生回想片段知識而已,但簡答題的功能不僅只於此。舉例來說,若要加強學生分析、判斷能力,考題可以是一個案例或實驗,讓學生思考提出後續問題,教師也可以提供額外的資訊幫助思考分析。 簡答題也可以運用他們之前學過的理論解決問題。以老化心理學為例,簡答題的題目如下:「男女性對步入中年有不同的感受。隨著邁入中年,沮喪的症狀也隨之增加,造成男女性中年沮喪的原因有何不同?」
申論題 申論題可以訓練學生獨立思考、有組織的回答問題、思考各種概念間的關聯性,以及如何應用等。 在大班考申論題時,為了減少閱卷時間與避免學生天馬行空的作答,可以應用一些小技巧。例如:如要學生將所學理論應用到其他情境題,建議可以在答案卷上做如下呈現: 請根據 X 理論,提出解決以上情境的方案。 請提出並解釋你的解決方案與 X 理論中三個觀點的相關性。 這樣結構式的出題形式能引導學生答題,學生回答不會偏離主題太遠,並且訓練有效率、有組織回答申論題的技巧;老師也不需要從一堆文字中找答案,可以加快閱卷速度。
是非題 是非題雖然容易設計,但卻不值得鼓勵。 考完是非題後,學生容易把錯誤的答案記成正確的。若要考是非題,應該讓學生解釋答案為什麼是對,為什麼是錯,這麼一來,如果學生答錯了,也可以讓老師知道學生普遍誤解的地方。
選擇題和配對題 選擇題與配對題性質相似,學生從許多選項中選擇正確的答案,藉以評量學生簡單的概念、分辨能力、運用觀念或原則的能力,但是這類考題較難評估學生較高層次的思維能力,如組織、統整與概念間的關聯性。 選擇題要設計出合理、精確的選項是很費功夫的。以下是設計考題選項的幾點建議: 應該測驗學生到底學到了多少,以及他們對於閱讀內容的了解程度。 選項可以取自學生作業,這樣學生會更注意平常的作業與閱讀,老師也可以了解學生對作業的理解程度。 四或五個選項的差別其實不大,不需花費太多時間設計過多的選項。 要測驗學生是否真的理解,與其讓學生選出一個既有的現象,不如要求他們預測某個情境的結果,難度較高。 可以運用題組出題,以測驗高層次複雜的思考能力
考試該出多少題 考題的數目須依據題型和難易度決定。作答沒有時間限制固然最好,但因教學空間的利用,考試總是有時間的限制。 一般而言: 選擇題為一分鐘一題 簡答題為兩分鐘一題 較簡單的申論題十到十五分鐘一題 較廣泛的申論題,如作答頁數需要一至兩頁,則需要半小時到一小時的時間
今日重點 如何出好選擇題(MCQ)
先來做個練習 扭傷與便祕
扭傷 第一組 下列敘述何者為非 A.扭傷分級:現況分為四級 B.扭傷常引發關節附近的腫脹與瘀血 C.冰敷損傷處通常每三~四小時敷一次每次20分 D.扭傷無法預防,故在活動前應先做暖身運動 第二組 以下何者正確 1.扭傷的症狀會出現疼痛與活動困難 2.創傷發生後前幾天為減輕腫脹及疼痛可給予熱敷 3.為避免扭傷可在活動前做暖身運動 4.扭傷後可多活動降低疼痛情形 5.韌帶完全撕裂是屬於第二級扭傷 A.1、2、4 B.1、2、3C.2、4、5.D1、3、5
便祕 第三組 如何預防便祕,以下何者為非 A.大量飲水 B.攝取新鮮蔬果 C.避免食用五穀類 D.規律運動 第四組 1.以下對於便祕描述何者為非 A.每周排便少於三次 B.常見症狀:糞便硬、乾燥、感覺腹脹 C.治療方式:請醫師開立瀉劑 D.預防便祕方式:大量飲水及規律運動
選擇題的優點與缺點 優點 缺點 容易計算分析成績 題目可依評量不同認知的層級而設計 可掌控試題難易度及鑑別度 命題易趨向於運用記憶型題目 高鑑別度或高層級的題目命題難度高
編寫測驗題的共同原則 測驗日期前完成命題 可多擬一些試題 題目需清晰明確且具體指出所測量的學習結果 題目需顧及受試者的閱讀水準 測驗題目避免提供其他測驗題目的作答線索 正確答案及評分標準經專家審核 測驗需再檢查及校訂
選擇題結構型式與命題原則
題目(Item)結構 題幹(Stem): 問題(Lead-in) 選項(Options): 一位80歲女性因右上腹痛合併發燒,生化檢查顯示:total protein 6.8 g/dL,albumin 3.8 g/dL,ALT 254 U/L,AST 123 U/L,alkaline phosphatase 312 U/L(正常值<100 U/L), γ-glutamyl transpeptidase 379 U/L(正常值<52 U/L),total bilirubin 5.3 mg/dL,direct bilirubin 3.5 mg/dL。 問題(Lead-in) 下列何者為最可能的診斷? 選項(Options): (A)酒精性肝病(誘答Distractor) (B)肝臟囊腫(誘答Distractor) (C)脂肪肝(誘答Distractor) (D)總膽管結石(答案Answer)
良好試題的條件 有內容效度 是重要的 有代表性 有效的誘答 有鑑別度 難度適宜:初學vs. 進階;資格試vs. 淘汰賽 無命題瑕疵
選擇題型式Types of MCQs True/False Items (正確答案題型) Select all of the options that are true C-type (A/B/both/neither) X-type (multiple true/false - mark each option) K-type (multiple true/false: 1-2-3; 1-3; 2-4; 4 only; All) One-Best-Answer Items (最佳答案題型) Select the single best response A-types (3 or more options, single items or sets) B/R-types (Matching/Extended Matching)
正確答案題型例題 第九凝血因子之基因位於下列那一條染色體? A. X Chromosome* B. Y Chromosome C. Chromosome 9 D. Chromosome 18
正確答案題型命題原則 不要用否定方式問題(eg, Not, Except) 不要用否定選項 選項必須完全正確或錯誤,不要有灰色地帶 請同儕不看答案進行審查
最佳答案題型例題 一位8個多月大的男嬰,因左前胸藍色腫瘤來診,病理顯示為類卡波西血管內皮細胞瘤(Kaposiform hemangioendothelioma),白血球數目(WBC count)為 8,700/mm3,血紅素濃度(Hb)為10.5 g/dL,血小板 (platelets)數目為32,000/mm3,其他理學檢查無異常;數天後男嬰身上發現出血點,且血小板(platelets)數目降為12,000/mm3,前凝血酵素時間(prothrombin time)及活化凝血酵素時間(partial thromboplastin time,PTT)皆延長,經檢查無感染或休克情況。病人最可能發生下列那一種情況? A. 免疫性紫斑症(immune thrombocytopenic purpura) B. 類過敏性紫斑症(Henoch-Schönlein purpura or anaphylactoid purpura) C. Kasabach-Merritt症候群* D. 腫瘤骨髓轉移
最佳答案題型命題基本原則(1) 重要的概念 評量知識的應用,而非片段事實的回憶 題幹應提出一個清楚且有焦點問題 肯定敘述,不用否定(為非、錯誤、不是、不會) 避免冗長不必要的資訊 無需看選項就能作答(Cover-the-Options Rule) 資訊應盡量在題幹,讓題幹長選項短 不使用絕對性描述(總是、從不、全部) 不使用模棱兩可描述(經常、有時、相關)
最佳答案題型命題基本原則(2) 選項應該同質(3~5個) 選項的長度應盡量接近 誘答應具似真性 選項應依邏輯、數字大小或英文字母順序排列 不用「以上皆是」、「以上皆非」選項 避免試題有技術性的缺失 有利於有應試技巧者 無關聯的難度:敘述過長或複雜、語意不清 未給答案情況下,請同儕協助檢查題目
國考例題 有關蜘蛛膜下腔出血型中風之敘述,下列何者正確? A.腦血管攝影時,常發現威利氏環之動脈存有典型之動脈瘤型態* B.病人常有糖尿病之病史 C.腦脊髓液呈現清澈 D.腦部掃描發現受損區域對同位素之吸收量增加
國考例題 下列關於癲癇失神型小發作(absence, petit mal)的敘述,何者最正確? A.首次發作通常發生於15歲到20歲之間 B.發作中不會有自動症(automatism) C.發作時腦電圖(EEG)呈現局部性棘波(focal spikes) D.過度換氣(hyperventilation)會引起發作*
Bottom Line on One-Best-Answer Items One-best-answer items are much better than true/false items because of problems with shades of gray In order to qualify as a one-best-answer item, it must satisfy the Cover-the-Options Rule Positively worded items are preferable to negatively worded items
Issues Related to Testwiseness Grammatical cues: one or more distractors don't follow grammatically from the stem Logical cues: a subset of the options is collectively exhaustive Absolute terms: terms such as "always" or "never" are in some options Long correct answer: correct answer is longer, more specific, or more complete than other options Word repeats: a word or phrase is included in the stem and in the correct answer Convergence strategy: the correct answer includes the most elements in common with the other options
Grammatical cues: one or more distractors don't follow grammatically from the stem A 60-year-old man is brought to the emergency department by the police, who found him lying unconscious on the sidewalk. After ascertaining that the airway is open, the first step in management should be intravenous administration of A. examination of cerebrospinal fluid B. glucose with vitamin B1 (thiamine) C. CT scan of the head D. phenytoin E. diazepam
邏輯暗示:選項中邏輯上不並存者,則正確答案很可能是兩者其中之一 橋本氏甲狀腺炎(Hashimoto's disease)最後會導致: A.甲狀腺機能亢進 B.淋巴癌 C.甲狀腺機能低下* D.甲狀腺乳突癌
邏輯暗示:選項中邏輯上不並存者,則正確答案很可能是兩者其中之一 83.當一個研究者結論未能偵測出顯著的效應,下列何者的誤差和研究者的結論有關聯? A.因為樣本數太小,此結論錯誤的可能性很低 B.犯下第二誤差的可能性很小 C.第一誤差的機率大於0.05 D.犯下第二誤差的可能性很大*
避免使用「永遠」「必然」「總是」「全部」「一定」「從不」等武斷的語詞 一般而言,對於mild gallstone pancreatitis患者的治療,下列敘述何者錯誤? A. Fluid and electrolyte repletion非常重要 B. Antibioitics是絕對必要* C. Biliary tract之definitive treatment儘可能同一次住院中施行 D. Nutritional support是必要的
Absolute terms: terms such as “always” or “never” are in some options 81.下列敘述,何者錯誤? A.配戴隱形眼鏡者是罹患棘阿米巴性角膜炎(Acanthamoeba keratitis)的高危險群 B.早期棘阿米巴性角膜炎患者常需進行角膜移植恢復視力,近年來多已可用藥物治癒 C.自營生活的阿米巴(free-living amoebae)所造成的腦部感染均與游泳有關* D.棘阿米巴與巴氏阿米巴(Balamuthia mandrillaris)的患者通常免疫力較差*
選項長短應相近,避免正確的答案特別長 為避免答案有瑕疵,正確選項常特別長 15.有關肝臟移植手術後,長期之飲食照護原則的敘述,下列何者正確? A.應採用適度蛋白、脂肪占總熱量30%以內之飲食,並注意維持理想體重* B.應採用高蛋白、高脂肪飲食 C.應採用高熱量、高蛋白飲食 D.應採用嚴格限制蛋白、限鈉、限水飲食
選項長短應相近,避免正確的答案特別長 為避免答案有瑕疵,正確選項常特別長 某日你發現放射部的技師因為弄錯病人而錯照了一張胸部X光片。病人並不清楚這件事,也沒有在這過程中受到傷害,此時你應該向上報告這個錯誤嗎?為什麼? A.不需通報,因為這是個無傷大雅的錯誤,而且沒有造成任何傷害 B.不需通報,因為這是無法避免的錯誤,也不能帶來什麼制度性的改變 C.應該通報,因為弄錯病人是很嚴重的錯誤,技師應該得到應有的懲罰 D.應該通報,因為表面上單一事件的錯誤,也可能隱藏著系統性的錯誤,不論錯誤的大小輕重,唯有一律通報,才能進行錯誤管理*
國考例題 下列關於威爾遜氏病(Wilson's disease)治療的敘述,何者正確? A.所有的病人都會在開始治療後惡化 B.在整個療程中,飲食可以不必忌諱含銅食物 C.在以D-penicillamine治療初期患者對藥過敏時,可重新減量或合併prednisolone之使用* D.所有的病人都可使用D-penicillamine治療而得改善 選項長短應相近,避免正確的答案特別長 避免使用武斷的語詞
國考例題 李小妹1歲,曾患急性中耳炎並使用抗生素,一個月後中耳炎復發,此時最佳之第一線治療用藥為何? (A)標準劑量Amoxicillin (B)高劑量Amoxicillin (C)高劑量Amoxicillin/clavulanate (D)Sulfamethoxazole/trimethoprim
選項應避免出現集中效應(Convergence) 選項出現最多次者常為正確答案 李小妹1歲,曾患急性中耳炎並使用抗生素,一個月後中耳炎復發,此時最佳之第一線治療用藥為何? (A)標準劑量Amoxicillin (B)高劑量Amoxicillin (C)高劑量Amoxicillin/clavulanate (D)Sulfamethoxazole/trimethoprim
選項應避免出現集中效應(Convergence) 選項出現最多次者常為正確答案 下列何者是經由舌神經(lingual nerve)本身之神經纖維傳遞? A.舌前三分之二部分的一般感覺* B.舌內肌之控制 C.舌前三分之二部分的味覺 D.舌下腺之分泌
Issues Related to Irrelevant Difficulty Stems are tricky or unnecessarily complicated Options are long, complicated, or double Numerical data are not stated consistently Options that are in nonlogical order Terms in the options are vague (eg, “rarely,” “usually”) “None of the above” is used as an option The answer to an item is “hinged” to the answer of a related item
題幹敘述過長、複雜、不必要 劉先生,50歲,身高170公分,體重68公斤,是一家貿易公司的老闆,偶爾會與客戶交際應酬,少量喝酒,一天約抽2包香菸,無特殊疾病,平常也無服用中西藥物,家族中有糖尿病與高血壓的病史。最近在家血壓測量約160/90mmHg,並出現暈眩與左半側痲痹的症狀,經檢查後診斷為短暫性腦缺血發作。以下有關香菸與腦中風的敘述,何者正確? (A)吸煙者比非吸煙者中風發生率高約50% (B)低膽固醇血症對吸菸者發生腦中風具有保護作用* (C)吸煙者有高血壓發生腦中風的危險性約為正常人的20倍 (D)中風的危險性在戒菸5年後降至與不吸菸者相同
選項應依數字大小順序排列 如果白人小孩的平均血漿醛固酮(plasma-aldosterone)為400pmol/L,標準差為200 pmol/L,假設血漿醛固酮為常態分布,有多少百分比的白人小孩其血漿醛固酮≤300 pmol/L? (Pr(Z0.5))=0.3085 A. 30.85* B. 19.15 C. 69.15 D. 38.30
選項應依字母順序排列 下列Beta blockers中,何者為治療心臟衰竭之較佳藥品? A. Carvedilol* B. Propranolol C. Atenolol D. Timolol
試題的資訊應盡量放在題幹中 某些人類白血球抗原(Human Leukocyte Antigens, HLA)基因在某自體免疫疾病患者中的存在有較為增高現象,是為有較高的「相較性的危險值」(relative risk)引起自體免疫致病性。有關這些相關性下列那一項敘述正確? A. B27對於第一型糖尿病(type 1 diabetes mellitus) B. B27對於葛瑞夫氏症(Graves’ disease) C. B27對於尋常天疱瘡(pemphigus vulgaris) D. B27對於僵直性脊椎炎(Ankylosing spondylitis)*
總結(1) 試題應測量重要的學習結果 測驗中每個試題需彼此獨立 謹慎使用多重選擇題 若有其他題型更適合時,別用選擇題 題幹意義完整、清楚呈現一個明確的問題 題幹清晰、簡短,應避免不相關的文字敘述 題幹不應中斷 題幹宜正面肯定敘述,避免否定句 題幹應指向一個最好的或正確答案 在題幹中避免提供答案線索 題幹與答案選項的文法應該要一致 題幹不要應用錯別字,故意誤導學生選答 以改變題幹或選項來調整難易度
總結(2) 所有的選項應該有「似真性」 選項的數據不可重疊 選項宜有邏輯順序排列 選項共同詞宜放入題幹中 選項避免「以上皆是」或「以上皆非」 避免不明確的名詞,例如有時、時常、往往等 選項的長度與語法宜一致或類似 理想的答案選項是「似是而非」的,亦即是正確的敘述,但不是最佳的答案。 避免提供選擇答案或刪除不正確答案的線索 正確答案隨機排列