信度与效度分析

1信度效度分析2信度一、信度的意義所謂信度是衡量沒有誤差的程度，也是測驗結果的一致性(consistency)程度，信度是以衡量的變異理論為基礎。3二、衡量誤差的意義與來源衡量誤差可分為系統性誤差及隨機性誤差。一般而言，大部份的誤差是系統性的(從偏差而來)。所謂系統性誤差也被視成常數性(constant)誤差。而隨機性誤差(randomerror)則不是一種常數性誤差，其原因可能來自情境因素，或者被受測者一時的情緒而影響。衡量誤差可能的來源如下：1.由回應者(respondent)產生的誤差2.由情境因素產生的誤差3.由衡量者產生的誤差4.由衡量工具產生的誤差4三、以數學的觀點來解釋誤差四、衡量信度的方法1.再測信度(test-retestmethod):再測信度是讓同一組受測者，在前後兩個時間內測驗兩次，以其兩次測驗的結果求其相關係數，而此係數稱為再測信度(test-retestreliability)。52.折半信度(split-halfmethod):折半信度是將受測題目分成兩半，然後再以前半段之題目與後半段之題目做相關，若相關程度很高就代表折半信度很高，是考驗衡量的同質性。63.複本信度(equivalent-formsmethod):為了讓不同程度的受測者能夠明確瞭解問卷題目的意思，有時候同一個測驗中有甲、乙卷兩種以上的複本，由一組受試者先用甲卷進行測試，同組人或另外一個人再用乙卷進行測試，用這兩種測驗的結果求其相關係數即為複本信度。74.庫李信度(Kuder-Richardsonreliability)目的在於分析問項間的一致性。在估計信度上，最常用的是庫李二十號公式：其中K：表示整份測驗的題數：表整個測驗中每題答對與答錯百分比乘積之總合S2：表示測驗總分的變異量)1)(1(220SpqkkrKRpq8L.J.Cronbach另創係數，其公式如下：其中，：為估計的信度：測驗的總題數：測驗的總變異數：題目與另一題目之共變數ijiiSSSkk2122K2iSijS9共變數矩陣（因素一）Sc6Sc7Sc8Sc9Sc61.047Sc70.9921.630Sc80.6671.0521.247Sc90.6430.9880.9611.2188985.0961.0.....992.02218.1........047.1218.1247.1630.1047.11144利用上述之公式，我們可以求得因素一之α值為：10效度一、效度的意義所謂效度是指衡量的工具是否能真正衡量到研究者想要衡量的問題。11二、效度的種類1.內容效度(contentvalidity)：以研究者的專業知識來主觀判斷所選擇的尺度是否能正確的衡量研究所欲衡量的東西。2.效標關聯效度(criterion-relatedvalidity)：所謂效標關聯效度是指使用中的衡量工具和其他的衡量工具來比較兩者是否具有關聯性。123.建構效度(constructvalidity)：如果研究者要瞭解某種衡量工具真正要衡量的是什麼，那即是關心它的建構效度。4.學說效度(nomologicalvalidity):學說效度有時被稱為“通則化的效度(lawlikevalidity)”，學說效度是基於對構念和從理論建構的正式假設而來的衡量項目的明確調查。13一、信度和效度的關係圖8—5信度和效度的關係圖示資料來源：DuaneDavis(2004),“BusinessResearchforDecisionMaking”,sixthedition,p.188.信度和效度及其影響因素之關係情況一，彈痕分散於靶內各處，並無一致性可言，以衡量的術語來說即是無信度無效度。情況二，雖然彈痕很集中，即具有一致性，但是並沒有在靶中心，以衡量的觀點來看，則是有信度無效度。情況三，才是好的衡量，同時具有效度及信度。14二、影響信度效度之因素圖8—6信度效度與其他相關因素的關係資料來源：PaulPeter&GilbertA.Churchill(1986),“JournalofMarketingResearch”,23(February),p.1-10.抽樣特性量測特性量測發展程序信度收斂效度區別效度學說效度(+)(+)(-)(+)(+)(-)(+)(-)(+)註:+表示正相關，-表示負相關抽樣特性包含：1.樣本大小2.回覆率3.樣本的本質4.標的的種類5.蒐集資料的方法6.研究的種類衡量特性包含：1.問項的數目2.問項的困難度3.使用尺度的種類4.使用幾點量表5.使用何種符號衡量發展程序包含：1.對構念範圍的定義2.問項發展程序信度和效度及其影響因素之關係15量表之信度與效度潛在變數的衡量，通常是以量表或問卷做為測量工具，評估量表優良與否的準則為信度與效度。壹、信度貳、效度16信度1/2信度係指測驗結果(受試者的回答)的穩定性及可靠性(可相信的程度)。信度的衡量有三種類型：穩定性、等值性與內部一致性。–穩定性：用同一種測驗對同一群受試者，前後施測兩次，然後依據兩次測驗分數計算相關係數。–等值性：交替使用一套測驗的多種複本，再根據一群受試者每個人在各種複本測驗之得分，計算相關係數。–內部一致性:指量表能否測量單一概念，同時反映組成量表題項之內部一致性程度。17信度2/2量表信度的考驗方法為Cronbachα係數，判定α係數之準則如下：–所有問卷題目一起執行計算Cronbachα係數。–各題目單獨逐題檢查。–每個因素構面針對其所屬問卷題目，執行計算Cronbachα係數。範例一18範例一某研究設計一份有關“商店服務屬性”之問卷初稿，為慎重起見，選取30位受測者進行前測（結果如資料檔:服務屬性前測.sav）。請問這些題項在測試結果後，是否具備內部一致性？–1.點選Analyze/scale/reliabilityanalysis–2.程式操作–3.分析結果19範例一2.程式操作20分析結果1/2α係數=0.7984，代表十五道題目測量結果之內部一致性具高可信度。若是想要再提高信度，可由”CorrectedItem-Totalcorrelation”及”CronbachAlphaifitemDeleted”兩欄數字來判斷刪除那些題目可提高內部一致性，價格的”CorrectedItem-Totalcorrelation”數字-0.0693表示「價格」與總分間的相關非常的低，如果將之刪除，則可提高α係數至0.8156。21分析結果2/222效度1/2量表的效度類型有三種：內容效度、效標關聯效度與建構效度。–內容效度內容效度是指測量內容的適切性。–效標關聯效度效標關聯效度是指測量工具的內容具有預測或估計的能力。23效度2/2建構效度建構效度(或稱構念效度)指問卷或量表能測量到理論上的構念或特質之程度。建構效度有兩類：收斂效度與區別效度。而檢測量表是否具備建構效度，最常使用之方法為因素分析法。同一因素構面中，若各題目之因素負荷量(factorloading)愈大(一般以大於0.5為準)，則愈具備「收斂效度」。若問卷題目在非所屬因素構面中，其因素負荷量愈小(一般以低於0.5為準)，則愈具備「區別效度」。–範例二–範例三24範例二某研究探討有關大賣場”商店服務屬性”所應包含的內容，該研究藉由文獻回顧及專家學者的刪選，設計十五道題目並以五等量表為衡量尺度的問卷，以衡量”商店服務屬性”。今抽取97位受訪者，請其填寫問卷。請問該測量結果對於”商店服務屬性”的內容，是否具備建構效度？(資料檔：商店服務屬性.sav)–1.點選Analyze/DataReduction/Factor–2.程式操作–3.分析結果25範例二2.程式操作26分析結果-1KMO=0.806，Bartlett’stestChi-sq=426.339(Sig=0.0000.05)，代表資料適合進行因素分析。總變異量的解釋，在Principalcomponents的方法及eigenvalue1的原則萃取下，共萃取出五個因素，累積解釋變異量達65.041%。TotalVarianceExplained4.67431.15931.1594.67431.15931.1593.23321.55121.5511.51910.12741.2871.51910.12741.2871.95313.02234.5731.3468.97450.2611.3468.97450.2611.63910.92845.5011.2108.06458.3251.2108.06458.3251.61110.73856.2391.0086.71765.0411.0086.71765.0411.3208.80265.041.9266.17071.211.7304.86776.078.6744.49480.573.6034.02084.593.5403.59888.191.4623.08391.274.3902.59993.872.3342.22696.098.3162.10898.206.2691.794100.000Component123456789101112131415Total%ofVarianceCumulative%Total%ofVarianceCumulative%Total%ofVarianceCumulative%InitialEigenvaluesExtractionSumsofSquaredLoadingsRotationSumsofSquaredLoadingsExtractionMethod:PrincipalComponentAnalysis.KMOandBartlett'sTest.806426.339105.000Kaiser-Meyer-OlkinMeasureofSamplingAdequacy.Approx.Chi-SquaredfSig.Bartlett'sTestofSphericity27分析結果-2因素一包含6個變數，但「商店印象」問項在因素一中之負荷量小於0.5，不具收斂效度，且其在因素二中之負荷量亦達0.457，也不具備區別效度。至於「品質」問項亦有相同問題，因此必須將此兩變項刪除，重新執行因素分析。RotatedComponentMatrixa.814.1694.277E-02-.1274.990E-02.7679.363E-02.245.102.135.742.143.115.372.110.673.1929.826E-023.690E-02.154.493.457.398.120-.208.4602.764E-02-.413.409.1681.585E-02.760-1.223E-02.217.270.368.658-3.563E-02-.101-9.566E-02.493.608.124.235-4.097E-029.755E-02-5.452E-03.824-3.401E-03.202.2074.903E-02.665.1218.058E-02.1283.085E-037.654E-02.774-.214-9.231E-03.1886.579E-02.711.309.252-.136.273.136.710.113.4615.819E-02-.109.646服務態度整齊乾淨氣氛服務內外裝潢商店印象品質售後服務結帳速度信賴度購物便利取得便利價格種類多寡廣告吸引營業時間12345ComponentExtractionMethod:PrincipalComponentAnalysis.RotationMethod:VarimaxwithKaiserNormalization.Rotationconvergedin15iterations.a.28分析結果-3重新執行結果如下，十三個題項共萃取出四個因素構面，累積解釋變異量為61.814%，雖較先前降低些，但各題項在所屬的因素構面中，其因素負荷量皆