臨床能力評估測驗:OSCE 方信元Hsin-Yuan FANG MD PhD 中國醫藥大學附設醫院教學部副部主任 胸腔外科、臨床技能中心、外科加護病房主任 中國醫藥大學外科學科副教授
內容 評估之目的 簡介OSCE 考試時間地點 測驗方式 考試流程 考生注意事項 成績計算方式
本測驗之目的 以模擬測驗的方式,藉由實作的過程來評量醫學生的臨床技能、態度與專業素養等紙筆測驗所無法評量的臨床能力。 為我國準醫師素質把關!!! 不是比高下,是為最低標準把關。
醫療專業臨床能力 各項評估工具的角色 Does Shows how Knows how Knows Action Action Performance tests in vivo: Action Action Mini-CEX, DOPs, Portfolios, 360o… Does Performance tests in vitro: Performance OSCEs, Manniquin SP-based test….. Validity is matter of climbing the pyramid. There are more and more countries require skills competency test in medical license exam Shows how Clinical (context based tests) Competence MCQs, essays, oral tests, Short answers... Knows how Factual/comp. tests MCQs, essays, Short answers, …. Knowledge Knowledge Knows Miller GE. The assessment of clinical skills/competence/performance. Academic Medicine (Supplement) 1990; 65: S63-S67.
對學生的評估 態度 技能 知識 Does Shows how Knows how Knows Miller GE, Acad Med 1990. (米勒金字塔) 知識 技能 態度
對學生的評估 態度 技能 知識 學生檔案 病歷紀錄 學習護照 多源回饋 Mini-CEX, DOPS OSCE 病例報告 口試、Case-based discussion 簡答題 選擇題、是非題 態度 技能 Does Shows how Knows how 知識 Knows Miller GE, Acad Med 1990. (米勒金字塔)
教學週期 課程規劃 記取教訓 執行教學 全面檢討 教學評估* 適時回饋 * 評估:學員、教師、課程
OSCE是什麼? Objective structured clinical examination (客觀結構式臨床考試/測驗) 測驗項目
法源依據 醫師法施行細則 第一條之一規定 第二階段國考應考資格 需通過全國聯合OSCE測驗,並領有通過證書 每年辦理2次:4月底-5月初、10月底-11月初 測驗報名費2000元
OSCE考什麼? 評估學生臨床的能力 病史詢問 身體檢查 臨床判斷、處理病人狀況 溝通、衛教 簡易技巧 態度及專業素養
OSCE 規劃五步驟 規劃(Planning) 界定目標、建構試題配題藍圖、決定測試形式 預備(Preparation) 師資與人員訓練、教案研發、設計評分表 標準化病人的招募與訓練、信效度測試 傳遞(Delivery) 考前準備、評分共識、訊息發放 實施(Implementatoin) 檢討(Review) 決定及格標準 分析與檢討
考間動線有效地分隔 標準化病人、考官、考生
考量重點 考試目的 機密性 空間規畫 人員動線 錄影、錄音設備 擴音設備 OSCE 考場規劃 考量重點 考試目的 機密性 空間規畫 人員動線 錄影、錄音設備 擴音設備
什麼是藍圖? 為何要有藍圖?
OSCE配題藍圖 - I 臨床能力 心血管系 呼吸系 神經系 消化系 腎臟 泌尿系 內分泌 新陳代謝 血液 腫瘤系 生殖系 骨骼 肌肉系 病史詢問 身體檢查 操作技術 資料判讀 臨床處置 病患衛教與 溝通技巧 醫學倫理 病歷寫作 …
OSCE配題藍圖 - II 臨床能力 心血管系 呼吸系 神經系 消化系 腎臟 泌尿系 內分泌 新陳代謝 血液 腫瘤系 生殖系 骨骼 肌肉系 病史詢問 1 7 身體檢查 2 8 操作技術 3 9 資料判讀 4 臨床處置 5 病患衛教與 溝通技巧 6 醫學倫理 10 11 病歷寫作 12 …
OSCE配題藍圖 - III 臨床能力 心血管系 呼吸系 神經系 消化系 腎臟 泌尿系 內分泌 新陳代謝 血液 腫瘤系 生殖系 骨骼 肌肉系 病史詢問 胸痛 體重減輕 身體檢查 呼吸 急促 下腹 疼痛 操作技術 頭痛 關節痛 資料判讀 黃膽 臨床處置 解尿困難 病患衛教與 溝通技巧 血糖升高 醫學倫理 同意書 說明 人工流 產議題 病歷寫作 診斷書 開立 …
OSCE怎樣才算structured ? 病史 詢問 理學 檢查 溝通 技巧 操作 技巧 檢查 判讀 衛教 諮詢 內 科 外 科 兒 科 病史 詢問 理學 檢查 溝通 技巧 操作 技巧 檢查 判讀 衛教 諮詢 內 科 外 科 兒 科 婦產科 其 他
2 0 1 3試題開發流程 各校院+TAME辦理+TSPA協辦 評分表 訂定評估目的、評估目標、評估面向 訂定各評估面向之評估分項 2 0 1 3試題開發流程 評分表 訂定評估目的、評估目標、評估面向 訂定各評估面向之評估分項 考官指引(基本病史) 修題 完整病史 劇本、道具、場地人員配置 考生指引 效度測試、修題 TAME辦理+TSPA協辦 考選部指導 Pilot Test + Video製作 OSCE題庫 信度測試--試演、試評、試考 2013 各校院+TAME辦理+TSPA協辦 考選部指導 Pilot Test + Video製作 試題專家委員 考選部指導
學生OSCE臨床技能評估表 評分項目 做到 完全 部分 未做到 關懷 病患 每一個檢查動作均事先告知病人 選擇最不會讓病人痛楚的檢查方式 關懷 病患 每一個檢查動作均事先告知病人 選擇最不會讓病人痛楚的檢查方式 病人抱怨檢查引起不適時會道歉 檢查結束能作出回饋 檢查 技巧 視診:注意腹部起伏、特色 聽診 充分磨熱聽診器 腸音、血管音 敲診 手勢正確 輕敲且適可而止 觸診 充分磨熱雙手 輕觸 請病人先置手於腹表 平放輕按 先檢查不痛之處 深觸 適可而止 背部敲診之檢查 檢查順序(視聽敲觸) 整體表現 優 良 可 稍差 差
History taking 確認身分至少兩種方式(姓名、生日、ID….) item
Physical Exam. PE請將檢查結果向病人說明(一面做一面說) item
Clinical Judgment lab, X-ray, ECG 手術適應症、術前評估、手術後之照護、鎮靜、監控藥物濃度; 超音波、子宮輸卵管攝影、產程評估、產後照護; 發育里程碑、餵食觀念、預防注射、新生兒篩檢、新生兒歸類/輸液/營養給予、住院適應症、兒童藥物劑量換算; 死亡確認、功能狀態評量、疼痛處理 item
Counseling Skills item
簡易技巧 請將模具當真人 確認身分 洗手、戴手套請都做 item
聯合OSCE之評分系統 採用雙系統—提升客觀性 評分項目10-15項 採用評分尺標 0 , 1 , 2。 最後有整體評分 1 ~ 5 分。
Checklist 與 Global Rating 之選擇 Global rating/scale 進階臨床能力:難以分割為細步以採二分法評分者 評分員甚能掌握試題之內容與目標 Non-high-stakes、formative OSCE Checklist 初級臨床能力的評估 評分員並非課程教師,不易掌握試題 由標準化病人評分的部分 High-stake、summative OSCE
聯合OSCE之評分系統 採用雙系統—提升客觀性 縱軸 Analytic rating 橫軸 Global rating 28
OSCE及格標準設定建議 由及格標準制定小組研議,依BGR—Boderline Group Method with Regression,六日合併計算及格標準。 計算方法 Step 1. 令Y:考生的checklist總分 X:考生的global rating總分 Y=aX+b 求出每一站 a, b Step2. 以X=2帶入,得到每一站的及格分數, 並得出不及格站數之考生 Step3. 將各站及格分數加總, 得十二站總分之及格分數 由於六日評分表之總分皆不相同,故六日考生成績之彙整運算前,皆將考生每題得分之總分轉化為百分比後,彙整運算。
BG—Borderline Group Method (取平均數) 以Global Rating該站得分為“待加強”—2分者為Borderline Group 取此一族群的該站checklist分數之平均數,作為該站之及格分數標準 Modified BG—Borderline Group Method(取中位數) 取此一族群的該站checklist分數之中位數,作為該站之及格分數標準 BGR—Borderline Group Method with Regression 令Y:考生的checklist總分,X:考生的global rating得分,Y= aX + b,求出該站的a, b值 以X=2代入,得到該站的及格分數 中位數、平均數
Example from Boursicot(2003) y=ax+b 31 31 31
標準設定的目的與考量 定出每一站的及格分數 系統性的方法 能取信於人 能經得起質疑 證據為依據
2012聯合OSCE 及格標準計算結果 依全體考生得分進行BGR—Boderline Group Method with Regression分析,得分達總分50.86%為及格切點;再以此切點檢驗全體考生成績,不及格人數為1人。 通過站數 人數 百分比 累積百分比 ------------+---------------------------------------------------- 1 | 1 0.09 0.09 2 | 1 0.09 0.17 3 | 2 0.17 0.34 4 | 2 0.17 0.51 5 | 12 1.02 1.53 6 | 31 2.64 4.18 7 | 44 3.75 7.93 8 | 104 8.87 16.79 9 | 176 15.00 31.80 10 | 256 21.82 53.62 11 | 319 27.20 80.82 12 | 225 19.18 100.00 總計 1,173 100.00 及格標準: 1. 總分高於及格分 2. 通過七站及以上 不及格人數 6站不及格:49人 未達總分 :2人 合 計:51人
2012聯合OSCE 及格標準計算結果 本次考試總人數:1,166人 本次考試 及格人數:1115人 不及格人數: 51人 及格率:95.63% 不及格率:4.37% (去年 2.69%)
2012聯合OSCE 考試成績處理 應試及格者,由學會授予及格證書。 臨床技能優異獎:各校應試成績在前10%之優秀考生,學會頒予獎狀與獎品。 及格證書和表現優異獎狀、獎品已於5月底製作完成並寄予各校。
OSCE成為國家考試後 教學與考試 公平與標準 老師與法官 成功與失敗
OSCE模擬考
考試時間地點 (醫學系七年級、中醫系雙主修七年級) 時間:102.01.20 (星期日) 及101.01.27 (星期日) 上午 7:30 至下午 17:10 集合時間及地點 : 上午考生-依公告時間在 第一醫療大樓B1技能訓練教室 報到 下午考生-統一中午12:00~12:30在 第一醫療大樓B1技能訓練教室 報到 考試地點 :第一醫療大樓3F 臨床技能暨評量中心
考生報到地點:附醫A棟地下一樓 臨床技能訓練中心
考試地點 SP、 評分老師 休息室 問卷填寫處 A B 第八站 第七站 第一站 第二站 第三站 第四站 第五站 第六站 第八站 第七站
測驗方式 此次考題共8題 = 8個stations 每站有一位標準化病人or模型及評估教師 每站時間10分鐘 1分鐘:read the question 8分鐘:perform your mission/task 1分鐘:feedback
考試流程 上午考生請依報到時間準時至 第一醫療大樓B1技能訓練教室集合 下午考生統一於中午12:00~12:30至 報到後將由試務人員依時間分批帶同學至考試場地,並分發姓名貼紙、進行考試說明 42
考試流程 Read the question(1 min) Do your task(8 min ) Feedback(1 min) 題目及操作項目張貼於門口,請閱讀完畢再進入診間考試 Do your task(8 min ) 把貼紙交給教師 執行任務 Feedback(1 min) 10分鐘時響鈴換站,無論如何必須離開診間至下一站
考試流程 換站動線 : 3 → 4 → 5 → 6 → 7→ 8→ 1 → 2 依此類推… 1→2 → 3 → 4 → 5 → 6 → 7→ 8 2 → 3 → 4 → 5 → 6→ 7→ 8 → 1 3 → 4 → 5 → 6 → 7→ 8→ 1 → 2 依此類推… 6→ 7→ 8 → 1 → 2 → 3 → 4 → 5 44
考試流程 考完試,請至會議室(一)填寫問卷(不計分) 但未繳交者,視同缺考 工作人員會當場確認繳交後,才算完成考試程序 上午考生須待下午考生中午12:30 (最遲 12:50) 報到後才可離開
考生注意事項 (1) 本次考試,屬學科重要考試 若於規定時間內未到達者,視同缺考,成績以零分計,不得要求遞補考試 請同學於報到時,即繳交手機。試後,會歸還給同學
中國醫藥大學考試規則(94/6/1) 未經請假或請假未予核准而不參加考試者,以曠考論,該科該次考試成績以零分計。 但: 仍需補考 未經請假或請假未予核准而不參加考試者,以曠考論,該科該次考試成績以零分計。 學生於考試前因重大事故(如學生本人或其二等親以內之尊親屬婚喪大事)或因重病不能參加考試者,須檢附有效證明(如死亡證明、公立或本校附設醫院診斷證明書),向教務處請假。經核准者,得補考一次。 考試遲到逾二十分鐘者,不得入場,以缺考論,不得以任何理由申請補考。但若於當節考試前因突發事件而遲到者,若能提出適當證明,得申請事、病假補考。 指:報到時間
中國醫藥大學考試規則(94/6/1) 考試開始四十分鐘內,應試學生不得離場 應試學生除應用文具外,不得攜帶書籍、紙張及具有計算、通訊、記憶等功能或其他有礙試場安寧、考試公平之各類器材、物品入場;計時器之鬧鈴功能須關閉。違者該次考試該科成績以零分計。 上午考生須待下午考生報到後才可離開(最遲中午12:50) 。提前離開成績以零分計。
考生注意事項 (2) 進入station 請記得撕一張姓名貼紙交給評估教師(貼評估表用) 穿著醫師服佩戴名牌,不要穿拖鞋、涼鞋 務必攜帯聽診器 在station (做詢問病史、身體檢查等)可記載所得到的資料。
考生注意事項 (3) 每個測驗站 (Station) 時間只有10分鐘 務必在8分鐘內完成必需的病史詢問、各項身體檢查或完成試卷的考題 (一分鐘閱讀試題 → 八分鐘測驗 → 一分鐘老師回饋) 務必在8分鐘內完成必需的病史詢問、各項身體檢查或完成試卷的考題 等待考試及考試時,不得帯入任何電子傳訊的設備
成績計算方式 OSCE成績將列入期末成績計算 佔臨床學科總成績10% 共考8站,以8站平均計算成績 如有任何請洽詢醫學系辦公室 若公告事項有異動以醫學系網頁所公佈的為準
謝謝聆聽 祝大家考試順利 52
Q & A