教學輔導成效評估 張素貞副教授、李俊湖主任、陳瓊娜校長.

Presentation on theme: "教學輔導成效評估 張素貞副教授、李俊湖主任、陳瓊娜校長."— Presentation transcript:

1 教學輔導成效評估 張素貞副教授、李俊湖主任、陳瓊娜校長

2 成效評估實施方式之現況 （一）定期召開工作小組會議，檢核縣市計畫執行情形，積極加強執行成效。
（二）針對參與研習場次，透過滿意度調查表，瞭解研習參與者滿意度。 （三）研習活動辦理後，檢視承辦學校辦理情形，藉由到校訪談深度了解計畫執行狀況、優缺點及困境建議，以為日後參考。

3 （四）配合輔導團到校訪視機制，瞭解基層教師 參與研習後對提升教室現場教學成效的影響。
（五）透過輔導追蹤工作小組訪視，進行總結性 績效評量，並適時提供諮 詢服務，俾以發現問 題、解決問題，以為日後執行計畫改進的依據。 （六）縣市承辦單位建置計畫管控網站平臺，以 為縣市年度精進教學計畫執行之資訊管理與分析。 透過計畫、經費、執行進度管理及成果資源分享， 以利進行掌控縣市各方案計畫實施-控管經費執 行額度、各方案計畫預定進度與實際執行進度及 研習活動各相關資訊與研發成果公開分享。

4 縣市教師專業成長方案推動 成效評估之問題分析
（一）評估方式偏重實施成果的彙整 （二）評估不易呈現釐清個別方案計畫的實施成效 （三）缺乏驗證計畫實施與實際專業實踐的聯結 （四）計畫承辦人員對成效評估相關概念與作法的 知能不足

5 105年度精進教學計畫之成效評估規劃補充說明 （一）縣市辦理105年度計畫「成效評估」之規劃 本年度精進教學計畫之各項子計畫（含輔導團計畫），如同往例均須實施類似教師專業成長成效評估「反應」層面的基本成效評估（如參與者滿意度調查），自105年度起國教署以漸進方式深化成效評估之作法，請縣市選擇當年度研提精進教學計畫數量的「10%」，規劃採用更深化評估層面進行成效評估（即須擴及至二個以上層面的評估，如參與者學習、參與者行為改變），並具體納入該計畫內容（參考Guskey的五層面教師專業發展評估模式，建議參考全方位精進教學—增能與實踐之第12章，陳瓊娜、何福明撰，縣市推動教師專業成長方案成效評估與案例分析）。 （二）建議各縣市慎選實施成效評估的方案計畫，尤以具中長期規劃且系統性課程的專業成長計畫為更佳，將更有利於彰顯實施成效評估的功能。 （三）關於各學習領域（議題）輔導小組方案計畫內所規劃的成效評估，若能採用更深化評估層面進行成效評估，亦可納入國教署年度規範比例計算。

6 成效定義 成果（output）：指計畫實施後的成果，也就是執行計畫活動的總量。 完成多少事，不能代表成效。
成效（outcome）：指實施計畫後，能提升對象的受益程度，以服務對象的改變為主體。 成效層面有知識、技能、態度、認知、行為、動機等的改變。 6

7 成效評估定義 焦點放在結果上，是否產生預期的效果。計畫完成後應達成的結果，並確認計畫目標達成的程度。
成效評估須依賴清楚和明確的目標，這些目標是基於期望的效果而非設計的活動，焦點在對象的改變上。 例如：行為、知識、技巧、態度或能力方面的改變。 7

8 成效評估定義 運用系統性、質性研究、量化研究等方法來分析資料、蒐集證據，以客觀判斷計畫或方案之成效與影響。
成效評估兼具績效責任(accountability)與改進的功能。 8

9 成效指標舉例 70％學生精熟閱讀和數學，進階級學生增加一倍。 40所表現最低學校，精熟學生增加40% 九年級入學學生至少有75％四年後畢業
學生90％認為喜歡自己學校 提升學生入學率 9

10 成效指標舉例 提升學習學習成效 教師離職率降低 學生畢業比例提升 增加學校團隊協作
引自 Best Practices In Evaluating the Impact of Instructional Coaching on Teaching and Learning F I N A L R E P O RT 10

11 成效指標舉例 學生 整體學習成就 學習成就改變比例 出席率 管教問題比例
引自 Best Practices In Evaluating the Impact of Instructional Coaching on Teaching and Learning F I N A L R E P O RT 11

12 成效指標舉例 教師 計畫目標達成數比例 離職比例 調校比例 每位輔導員成本 平均輔導時間 輔導員與學校數比例 教師與輔導員比例
輔導員成本與學習成就改變 計畫目標達成數比例 每位輔導員成本 輔導員與學校數比例 輔導員專業發展時數 引自 Best Practices In Evaluating the Impact of Instructional Coaching on Teaching and Learning F I N A L R E P O RT 12

13 輔導團成效評估指標 成效評估(質量) 1.運用有效教學策略 2.教學示範 3.教師觀課參與 4.學生參與學習 5.實踐導向活動
成效評估(量) 1.教師總數/輔導團員數 2.參與人數/全市教師數 3.參與人數/辦理場次 4.辦理場次/學校總數 5.參與滿意度 6.解決/反映問題數…… 成效評估(質量) 1.運用有效教學策略 2.教學示範 3.教師觀課參與 4.學生參與學習 5.實踐導向活動 6.學生學習成就…… 可以思考方向

14 成效指標舉例 評量 層面 舉例 知識 了解五種有效教學策略 技能 能熟練運用有效教策略 態度 願意積極鼓勵教師運用有效教學策略 表現
課堂或輔導上能運用教學策略 14

15 成效評估做法 工作項目 產出成果 成效檢討 成效評估： 教師改變、學生學習 進行質量分析 討論對話會議資料 提供解決策略
工作項目 產出成果 成效檢討 成效評估： 教師改變、學生學習 進行質量分析 討論對話會議資料 提供解決策略 服務訪視輔導意見 未來規劃主軸 蒐集彙整問題 15

16 成效評估做法 成果評估（執行量） 成效評估（目標達成度） 滿意度調查（利害關係人意見） 成本效益評估（經費） 品質提升 16

17 成效評估做法 1. 問卷 2. 會議討論 3. 評估指標 4. 自我反省 5. 觀察 6. 上級督導 7. 成果發表會…… 17

18 成效評估做法 目標 計畫 實施 結果 影響 過程評估 結果評估 影響評估

19 過程評估 過程評估與形成性評估概念近似，主要目的透過即時追蹤或檢視執行過程與相關產出，以確保依照先前方案所設定的計畫目標與期望效益完成。 過程評估的量化與質化的方式，包括人數統計、會議記錄、訪談記錄、觀察、工作日誌等。

20 結果評估 結果評估與總結性評估、績效評估的概念接近，通常指計畫執行完畢後，透過量化或質化的方法來了解是否達到原先設定的目標與期望效果。 結果評估的方法包括訪談、自我報告、滿意度、前後測比較、個案研究、行動研究等。

21 影響評估 影響評估是指在計畫完成一段時間之後，再來評估原先計畫的影響程度。例如學生的學習成效是否有具體提升。 評估方法如問卷、測驗、觀察等

22 （一）「評估是發展歷程」 1. 「計畫」階段──確定評估目的與準備
評估首先應進行現況分析、了解條件與資源、設定需求及目標，再決定評估指標及熟悉蒐集資料的工具，選取符合評估目標的工具以獲取合適資料。評估設計宜考量多元觀點與方法，以觀察長期改變事項或採對照組方式進行。

23 2. 「實施」階段──評估實施 實施階段必須蒐集相關證據，可運用觀察、訪談、問卷調查、測驗等工具蒐集資料，以了解符合目標程度，並做為後續修正調整的參考。資料經過質與量的分析，發現關聯，進而詮釋歸納結論，並提出建議。

24 3. 「提出報告」階段──評估結果與運用 本階段必須依據參加對象準備報告資料，提出報告，然後可再了解報告結果運用後的改變情形。

25 （二）「評估是影響層面的探討」 Guskey 依據 Kirkpatrick 的架構定義，進一步擴展模式成為五層面，並運用於教師專業發展上
1. 參與者反應 2. 參與者學習 3. 組織支持 4. 參與者行為 5. 學生學習結果

26 教師專業成長方案成效評估的 執行架構 評估模式是一歷程，現況分析及需求評估是成效評估的開端，藉由成效評估檢視得以回饋，做為後續計畫修正調整的參考，將教師專業成長方案計畫系統連結成為一個有機的循環發展歷程。

27 一、現況分析：針對中央、地方或學校現況各項有關提升教學品質的政策、 環境與資源等因素條件，進行探討分析。
二、需求評估：依據現況分析的結果，進行需求評估，檢視並決定要達到 「提升教學品質」目標所需加強、需調整、需精進的必要知能或作為。 三、設定計畫目標：根據需求評估的分析內容，清楚描述參與者接受專業 成長後行為與態度應產生的轉變，導出專業成長方案計畫的具體目標。

28 四、設定預期成效：依據計畫目標，設定量化與質性的效益評估內涵，將預期達到的成果加以具體化，即將計畫目標轉化為清楚、可檢核的預期成效，以利設定適當有效的評估效標。
五、設計實施課程：依據所設定的計畫目標，規劃設計課程內容與實施方法。教師專業成長課程宜以系統化課程規劃，工作坊或系列實施確實能有助評估成果的效度。

29 五、設計實施課程：依據所設定的計畫目標，規劃設計課程內容與實施方法。教師專業成長課程宜以系統化課程規劃，工作坊或系列實施確實能有助評估成果的效度。
六、規劃評估方式：依據計畫目標與課程規劃，決定評估所需的資料，設定適當的蒐集資料方式（即評估方式）。設計時可考量多元方式、觀察 長期改變事項、及採前後測或對照組等進行。 七、設計評估工具：依據所規劃的評估方式，設計評估指標及發展具體評 估工具（如問卷、調查表、訪談題綱、觀察紀錄等）。

30 八、進行評估實施：在專業成長課程實施後，運用先前建立的評估指標與評估工具，進行了解專業成長的實施成效。精進教學計畫目標，重視教師能運用專業成長所學於課堂教學的專業實踐上。若能運用評估工具，檢核教師返校應用情形，更能顯現精進教學計畫的核心成效。 九、提出報告回饋：蒐集教師專業成長實施成效的評估資料，進行整合分 析，提出報告並提供建議，以為後續計畫擬定或調整的參考。

31 專業支持成效評估 組 織 組織 領導 發展 願景 目標 會議 品質 人力 成員 職能 人員 穩定 成長 時數 進修 內涵 過程 教學 輔導
服務 諮詢 資源 提供 滿意 成效 預算 效益 影響 學生 學習 其他 創新 作為 在地 特色 政策 協作 31

32 Q與A