信度效度分析.

Slides:



Advertisements
Similar presentations
香港安老院舍評審制度先導計劃 香港老年學會 二零零四年六月十四日. 背景 1996 年《安老院條例》全面實施,確保本 港安老院舍達最基本服務水平 1998 年起就政府資助服務 ( 包括資助安老院 舍 ) 推行「服務表現監察制度」 有部份院舍採用其他服務質素評核制度, 例如 ISO 認證或「五常法」
Advertisements

Chapter Five 效度:基本概念.
單元九:單因子變異數分析.
教育評量與心理衡鑑專題研究 試題分析報告.
Lecture 12 因素分析.
Lecture 7 試題分析 試題分析的意義 試題分析的目的 試題分析的步驟 試題難度分析 試題鑑別度分析 難度與鑑別度的關係 選項分析.
SPSS與量表編製的統計方法 高師大師培中心 凃金堂
智力測驗計分與解釋 輔導老師 黃曉樺.
南台科技大學 萬金生教授 九十八年六月十二日
項目分析與信度估計 (Item Analysis and Reliability Estimation )
Unit 8 如何確定研究對象及如何選用或編製研究工具?
Ch.13 資料分析方法介紹 陳碩珮.
輔導與諮商理論與實務 測驗與評量 壹、測驗與心理測驗 一、測驗的意義 所謂測驗係指一種標準化的工具。用來測量
大规模教育考试命题的 基本程序与方法 合肥市教学研究室 张永超
信度的意義 信度的性質 信度的類型與考驗方法 影響信度的因素及補救措施 信度概念在教學評量上的應用
國立彰化師範大學教育研究所 學校行政碩士班 碩士論文
行銷研究 單元二 行銷研究的程序.
第二章 研究设计与评价.
測量 measurement.
量表測量 淡江大學資管系碩士在職專班.
第7章 量表的建立—補充 4.1 基本觀念 4.2 測量程序 4.3 測量尺度 4.4 良好測量工具的特性 4.5 信度測量
多變量分析 Multivariant Analysis
問卷量表設計 信效度分析.
第七章 因素分析 7-1 因素分析 7-2 因素分析的基本統計假設 7-3 因素分析之檢定 7-4 選取因素之數目
測驗的信度 林陳涌 國立台灣師範大學 生物學系.
17 類別資料的分析  學習目的.
社会医学研究方法.
認識倍數(一) 設計者:建功國小 盧建宏.
第十三章 調查研究.
第參章--研究方法與步驟 一、研究架構與研究步驟 二、研究對象(participants ) 三、研究工具(instruments)
第零章 統計學概論 0.1 統計學的定義 0.2 敘述統計學與推論統計學 0.3 測量尺度 0.4 資料、資訊與因果關係 ©2009 陳欣得
第8章 態度的衡量與信度、效度的檢定 本章的學習主題 1.衡量的意義 2.衡量的尺度 3.衡量的指標 4.衡量尺度與統計分析 5.態度的意義 6.態度的衡量尺度 7.信度與效度的意義 8.衡量的誤差來源 9.信度與效度與其他相關因素的關係.
因素分析 10.1 探索性因素分析 10.2 在SPSS中使用探索性因素分析的範例 10.3 分析結果 10.4 因素命名及信度分析
第十三章 量表的發展,信度和效度 13-1 量表的發展 13-2 量表的信度和效度 13-3 量表發展實例
第五章 多變量分析總論與 信度分析 第一節 統計檢定與P值 第二節 多變量分析程序總論 第三節 信度分析與效度分析的原理
第12章 因素分析  本章的學習主題  1. 因素分析的主要概念及目的 2. 主成份分析與一般因素分析之差異 3. 因素分析轉軸的概念 4. 決定因素萃取的個數 5. 如何對因素作命名 6. 因素得點的作用及計算.
第十四章 信度.
第8章 衡量方法及信度與效度的檢定  本章的學習主題  1.衡量的意義 2.衡量的尺度 3.衡量的指標 4.衡量尺度與統計分析
Java 程式設計 講師:FrankLin.
信度與效度 徐 南 麗 教授 元培醫事科技大學 護理系.
指導老師: 蘇明俊 老師 組長:潘翠娥 組員:張惠雅 葉麗華
論文計畫書 國軍人員對廢軍品管理現況之研究─以空軍 後勤單位為例 指導教授:胡子陵博士 研究生:劉俊德.
量表之信度與效度 潛在變數的衡量,通常是以量表或問卷作為測量工具,評估量表優良與否的準則為信度與效度。 11.1 信度 11.2 效度
第一章 直角坐標系 1-3 函數圖形.
數學 近似值 有效數值.
第四單元:實驗設計資料 (2) 授課教師:國立臺灣大學政治學系 洪永泰 教授
報告人: 吳以雯 指導教授:任維廉教授 報告日期:2011/05/25
網頁資料知多少? 事 實 ? 謠言?.
基礎數學概念評量 柯華葳 編製.
小學四年級數學科 8.最大公因數.
信度分析 (11/7~11/13) 1.何謂『信度』 2.信度分析步驟.
CH1 我的第一個App與變數宣告.
The Building Blocks of Social Scientific Research: Measurement
Measurement in Research
報告人: 范誠達 指導老師:任維廉 教授 日期:2010/5/4
第五章 估計與信賴區間 5.1 估計概論 估計量的分配 信賴度、信賴區間與最大容忍誤差16
第十章 證券投資組合.
SPSS信度分析 祝天雄 博士
作者:梁建、樊景立 授課教師:任維廉教授 報告者:黃紹軒
流程控制:Switch-Case 94學年度第一學期‧資訊教育 東海大學物理系.
Development of the Standardized Tests
1-1 隨機的意義– P.1.
Measurement Theory and Method
信度分析.
Chapter 13 測量之信度與效度分析. Chapter 13 測量之信度與效度分析 潛在變數與衡量變數的關係 在理論模型中的變數,通常很難直接衡量,我們稱為潛在變數(latent variables) 我們必須找尋或設計出足以代表這些潛在變數的衡量指標,而這些指標則稱為衡量變數(measurement.
第四組 停車場搜尋系統 第四組 溫允中 陳欣暉 蕭積遠 李雅俐.
針對敦煌書局 之問卷設計流程.
Chapter 4 Multi-Threads (多執行緒).
17.1 相關係數 判定係數:迴歸平方和除以總平方和 相關係數 判定係數:迴歸平方和除以總平方和.
第五章 量表的建構.
Presentation transcript:

信度效度分析

信度 一、信度的意義   所謂信度是衡量沒有誤差的程度,也是測驗結果的一致性(consistency)程度,信度是以衡量的變異理論為基礎。

二、衡量誤差的意義與來源 衡量誤差可分為系統性誤差及隨機性誤差。一般而言,大部份的誤差是系統性的(從偏差而來)。所謂系統性誤差也被視成常數性(constant)誤差。而隨機性誤差(random error)則不是一種常數性誤差,其原因可能來自情境因素,或者被受測者一時的情緒而影響。衡量誤差可能的來源如下: 1.由回應者(respondent)產生的誤差 2.由情境因素產生的誤差 3.由衡量者產生的誤差 4.由衡量工具產生的誤差

三、以數學的觀點來解釋誤差 四、衡量信度的方法  1.再測信度(test-retest method):再測信 度是讓同一組受測者,在前後兩個時 間內測驗兩次,以其兩次測驗的結果 求其相關係數,而此係數稱為再測信 度 (test-retest reliability)。 

 2.折半信度(split-half method):折半信 度是將受測題目分成兩半,然後再以 前半段之題目與後半段之題目做相 關,若相關程度很高就代表折半信度 很高,是考驗衡量的同質性。

 3.複本信度(equivalent-forms method):為了 讓不同程度的受測者能夠明確瞭解問卷題 目的意思,有時候同一個測驗中有甲、乙 卷兩種以上的複本,由一組受試者先用甲 卷進行測試,同組人或另外一個人再用乙 卷進行測試,用這兩種測驗的結果求其相 關係數即為複本信度。

 4.庫李信度(Kuder-Richardson reliability)   目的在於分析問項間的一致性。在估計信度上,最常用的是庫李二十號公式:  其中 K:表示整份測驗的題數    :表整個測驗中每題答對與答錯百分比乘 積之總合    S2:表示測驗總分的變異量

L. J. Cronbach另創係數,其公式如下:  其中,  :為估計的信度 :測驗的總題數 :測驗的總變異數 :題目與另一題目之共變數

利用上述之公式,我們可以求得因素一之α值為: 共變數矩陣(因素一) Sc6 Sc7 Sc8 Sc9 1.047 0.992 1.630 0.667 1.052 1.247 0.643 0.988 0.961 1.218 利用上述之公式,我們可以求得因素一之α值為:

效度 一、效度的意義   所謂效度是指衡量的工具是否能真正衡量到研究者想要衡量的問題。

二、效度的種類  1.內容效度(content validity): 以研究者的專業知識來主觀判斷所選擇的尺度是否能正確的衡量研究所欲衡量的東西。  2.效標關聯效度(criterion-related validity): 所謂效標關聯效度是指使用中的衡量工具和其他的衡量工具來比較兩者是否具有關聯性。

3.建構效度(construct validity):如果研究者要瞭解某種衡量工具真正要衡量的是什麼,那即是關心它的建構效度。 4.學說效度(nomological validity):學說效度有時被稱為“通則化的效度(lawlike validity)”,學說效度是基於對構念和從理論建構的正式假設而來的衡量項目的明確調查。

信度和效度及其影響因素 之關係 一、信度和效度的關係 情況一,彈痕分散於靶內各處,並無一致性可言,以衡量 的術語來說即是無信度無效度。 信度和效度及其影響因素 之關係 一、信度和效度的關係 情況一,彈痕分散於靶內各處,並無一致性可言,以衡量 的術語來說即是無信度無效度。 情況二,雖然彈痕很集中,即具有一致性,但是並沒有在 靶中心,以衡量的觀點來看,則是有信度無效度。 情況三,才是好的衡量,同時具有效度及信度。

信度和效度及其影響因素 之關係 二、影響信度效度之因素

量表之信度與效度 潛在變數的衡量,通常是以量表或問卷做為測量工具,評估量表優良與否的準則為信度與效度。 壹、信度 貳、效度

信度 1/2 信度係指測驗結果(受試者的回答)的穩定性及可靠性(可相信的程度)。信度的衡量有三種類型:穩定性、等值性與內部一致性。 穩定性:用同一種測驗對同一群受試者,前後施測兩次,然後依據兩次測驗分數計算相關係數。 等值性:交替使用一套測驗的多種複本,再根據一群受試者每個人在各種複本測驗之得分,計算相關 係數。 內部一致性:指量表能否測量單一概念,同時反映組成量表題項之內部一致性程度。

信度 2/2 量表信度的考驗方法為 Cronbach α係數,判定α係數之準則如下: 所有問卷題目一起執行計算 Cronbach α係數。 各題目單獨逐題檢查。 每個因素構面針對其所屬問卷題目,執行計算Cronbach α係數。 範例一

範例一 某研究設計一份有關“商店服務屬性”之問卷初稿,為慎重起見,選取30位受測者進行前測(結果如資料檔:服務屬性前測.sav)。請問這些題項在測試結果後,是否具備內部一致性? 1.點選Analyze/scale/reliability analysis 2.程式操作 3.分析結果

範例一 2.程式操作

分析結果 1/2 α係數=0.7984,代表十五道題目測量結果之內部一致性具高可信度。若是想要再提高信度,可由”Corrected Item-Total correlation”及”Cronbach Alpha if item Deleted”兩欄數字來判斷刪除那些題目可提高內部一致性,價格的”Corrected Item-Total correlation”數字 -0.0693 表示「價格」與總分間的相關非常的低,如果將之刪除,則可提高α係數至0.8156。

分析結果 2/2

效度 1/2 量表的效度類型有三種:內容效度、效標關聯效度與建構效度。 內容效度 內容效度是指測量內容的適切性。 效標關聯效度 效標關聯效度是指測量工具的內容具有預測或估計的能力。

效度 2/2 建構效度 建構效度(或稱構念效度)指問卷或量表能測量到理論上的構念或特質之程度。建構效度有兩類:收斂效度與區別效度。而檢測量表是否具備建構效度,最常使用之方法為因素分析法。同一因素構面中,若各題目之因素負荷量(factor loading)愈大(一般以大於0.5為準),則愈具備「收斂效度」。若問卷題目在非所屬因素構面中,其因素負荷量愈小(一般以低於0.5為準),則愈具備「區別效度」。 範例二 範例三

範例二 某研究探討有關大賣場”商店服務屬性”所應包含的內容,該研究藉由文獻回顧及專家學者的刪選,設計十五道題目並以五等量表為衡量尺度的問卷,以衡量”商店服務屬性”。今抽取97位受訪者,請其填寫問卷。請問該測量結果對於”商店服務屬性”的內容,是否具備建構效度? (資料檔:商店服務屬性.sav) 1.點選 Analyze/Data Reduction/Factor 2.程式操作 3.分析結果

範例二 2.程式操作

分析結果-1 KMO=0.806,Bartlett’s test Chi-sq = 426.339 (Sig=0.000<0.05),代表資料適合進行因素分析。 總變異量的解釋,在Principal components的方法及eigenvalue>1的原則萃取下,共萃取出五個因素,累積解釋變異量達65.041%。

分析結果-2 因素一包含6個變數,但「商店印象」問項在因素一中之負荷量小於0.5,不具收斂效度,且其在因素二中之負荷量亦達0.457,也不具備區別效度。至於「品質」問項亦有相同問題,因此必須將此兩變項刪除,重新執行因素分析。

分析結果-3 重新執行結果如下,十三個題項共萃取出四個因素構面,累積解釋變異量為61.814%,雖較先前降低些,但各題項在所屬的因素構面中,其因素負荷量皆大於0.5,同時在其他因素構面中則皆小於0.5,所以此測量結果,在因素分析方法下,將”商店服務屬性”分成四個構面,是具備建構效度的。

範例三 回收的問卷在執行效度分析後,須對每一因素構面進行信度分析,由範例二中已找出各因素構面,現今檢測各構面之信度。 1.點選 Analyze/scale/reliability analysis 2.程式操作 3.分析結果

範例三 2.程式操作

分析結果-1 構面一: 服務態度、整齊乾淨、氣氛服務、內外裝潢、結帳速度、信賴度,得到因素一之α=0.828。 構面二: 購物便利、取得便利、廣告吸引,得到因素二之α=0.588。 構面三: 售後服務、營業時間,得到因素三之α=0.524。 構面四: 價格、種類多寡,得到因素四之α=0.446。

分析結果-2 將因素分析法所萃取之構面及其效度與信度整理如下表: 因素一之α係數為0.828,已達高可信度;因素二與因素三之α係數值皆大於0.5,其信度為尚可接受;因素四之可靠度稍嫌不足,但亦未達拒絕的程度。