1、第六章量表的信度效度檢驗(yàn)我們采用含有多個項(xiàng)目的量表來測量人們的意見、態(tài)度、看法等、這樣得到的結(jié)果是否準(zhǔn)確、可靠，是否有適用性？這就需要評價量表的信度和效度。從理論的觀點(diǎn)來看，一個良好的測量工具（量表）應(yīng)具有足夠的效度和信度。一、信度檢驗(yàn)信度（Reliability）即可靠性，是指采用同一方法對同一對象進(jìn)行調(diào)查時，問卷調(diào)查結(jié)果的穩(wěn)定性和一致性，即測量工具（問卷或量表）能否穩(wěn)定地測量所測的事物或變量。信度指標(biāo)多以相關(guān)系數(shù)表示，具體評價方法大致可分為三類：穩(wěn)定系數(shù)（跨時間的一致性），等值系數(shù)（跨形式的一致性替換形式）和內(nèi)在一致性系數(shù)（跨項(xiàng)目的一致性）。信度表示的方法主要有以下四種：1、穩(wěn)定性系數(shù)穩(wěn)定

2、性系數(shù)是采用同樣的問卷，對同一組訪問對象在盡可能相同的情況下，在不同時間內(nèi)進(jìn)行兩次測量，用兩次測量結(jié)果間的相關(guān)分析來評價量表信度的高低，連皮爾遜積差相關(guān)系數(shù)即是信度系數(shù)，也稱為重測信度，或再測信度。兩次測量，如果間隔時間過長，調(diào)查對象容易受環(huán)境和個人經(jīng)歷的影響而發(fā)生態(tài)度的轉(zhuǎn)變，如果間隔時間過短，則受到上次調(diào)查記憶的影響。適當(dāng)?shù)拈g隔時間是既不能讓調(diào)查對象記住上一次測驗(yàn)的內(nèi)容，也不能讓其被測的主觀特征在兩次測驗(yàn)之間沒有發(fā)生較大的變化。適合的間隔時間要視調(diào)查對象和測量內(nèi)容不同而不同，一般來說，年幼兒童，間隔時間要小，年長者，間隔時間可以延長。并且調(diào)查對象在兩次測量期間沒有發(fā)生于相關(guān)的重大事件。在最后

3、提交調(diào)研報告時，要對間隔時間加以說明，報告間隔的時間。2、等值系數(shù)（復(fù)本信度）用兩個復(fù)本在最短時間內(nèi)對同一組調(diào)查對象進(jìn)行測量所得結(jié)果的一致性程度，復(fù)本信度系數(shù)等于兩個復(fù)本測量所得分?jǐn)?shù)的皮爾遜積差相關(guān)系數(shù)。復(fù)本信度的高低反映了這兩個測驗(yàn)復(fù)本在內(nèi)容上的等值性程度，是等值系數(shù)。復(fù)本類似于考試中得A、B卷，如果一個人在A卷和B卷的得分相同，就說明考題具有信度；如果兩者差異很大，則缺乏信度。復(fù)本信度的使用前提是測量所用的兩個復(fù)本必須是等效的，兩個復(fù)本要滿足以下幾個條件：兩個復(fù)本測量的是同一種特征。兩個復(fù)本具有相同的內(nèi)容和形式。兩個復(fù)本的題目不應(yīng)重復(fù)兩個復(fù)本的題目數(shù)量相等，難度和區(qū)分度相同在現(xiàn)實(shí)工作中，設(shè)

4、計(jì)一份滿意的調(diào)查量表已然不易，設(shè)計(jì)兩份完全等效的量表難度更大，所以很少使用3、內(nèi)在一致性系數(shù)主要反映的是測驗(yàn)內(nèi)部題目之間的關(guān)系，即量表內(nèi)部所有題目的一致性(項(xiàng)目同質(zhì)性)程度，考察量表的項(xiàng)目是否測量了相同的內(nèi)容，又稱為內(nèi)部一致性信度。其評價方法有兩種：分半法和Cronbacha法，兩種方法測得的信度系數(shù)分別稱為分半信度和Cronbach民系數(shù)。(1)折半信度折半信度法是將調(diào)查項(xiàng)目分為兩半，計(jì)算兩半得分的相關(guān)系數(shù)，進(jìn)而估計(jì)整個量表的信度，折半信度測量的是兩半題項(xiàng)得分間的一致性。進(jìn)行折半信度分析時，如果量表中含有負(fù)向標(biāo)度的題項(xiàng)，應(yīng)先將其得分作逆向處理，以保證各題項(xiàng)得分方向的一致性。分半的方法很多，一

5、般是將全部題項(xiàng)按奇偶分成盡可能相等的兩半，而不是按照前后分半，前后分半部是不能使用，但應(yīng)該注意前后順序的影響。計(jì)算前后兩半量表得分的相關(guān)系數(shù)即為半個量表的信度系數(shù)，最后用斯皮爾曼-布朗(Spearman-Brown)公式(2r/1+r)求出整個量表的信度系數(shù)：EEXEYLa(ex)2r-Cronbachsa系數(shù)是Cronbach于1951年創(chuàng)立的，是指測驗(yàn)內(nèi)部的項(xiàng)目在多大程度上考察了同一內(nèi)容，評價的是量表中各題項(xiàng)得分間的一致性。同質(zhì)性信度低時，即使各個測試題看起來似乎是測量同一特質(zhì)，但測驗(yàn)實(shí)際上是異質(zhì)的，即測驗(yàn)測量了不止一種特質(zhì)。a信度系數(shù)法是目前最常用的內(nèi)部信度系數(shù)。實(shí)際上，a系數(shù)是所有可能

6、的分半信度的平均值，a系數(shù)是估計(jì)信度的最低限度，a系數(shù)高時，信度就高，a系數(shù)低時，信度不一定低。低信度：a0.35,中信度：0.35a0.70,高信度：0.70a。一般來說，問卷的a系數(shù)在0.8以上該問卷才具有使用價值，達(dá)0.85以上，表明問卷信度良好。4、評分者信度評分者信度是指不同評分者對同一測量進(jìn)行評定時的一致性。與其他信度從本質(zhì)上是獨(dú)立的，測量信度的高低與評分者信度的高低并沒有必然的聯(lián)系。在評分者的文化背景、生活經(jīng)歷、價值觀等也會制約評分者的評分。例如，語文作文的評分問題等在很大程度上，評分者會受其文化背景、生活經(jīng)歷、價值觀等因素潛在的影響。最簡單的估計(jì)方法就是隨機(jī)抽取若干份答卷，由兩

7、個獨(dú)立的評分者打分，再求每份答卷兩個評判分?jǐn)?shù)的相關(guān)系數(shù)，兩個以上評分者這種相關(guān)系數(shù)的計(jì)算可以用積差相關(guān)方法，也可以采用斯皮爾曼等級相關(guān)方法。(二)影響信度的因素1、樣本特征：樣本異質(zhì)性的影響。調(diào)查對象間差異越大，其分?jǐn)?shù)的分布范圍越大，所測信度系數(shù)越高。2、項(xiàng)目的多少：一般來說，在一個測試中增加同質(zhì)的題目，可以使信度提高。3、量表的層級：在量表項(xiàng)目既定的情況下，量表的層級越多，題目區(qū)分度越高，信度系數(shù)越高，我國有學(xué)者顯示在正態(tài)分布下，條目數(shù)大于25，4級量表的信度損失已然少于2%。(安勝利,陳平雁.應(yīng)答條目的級數(shù)及條目數(shù)對量表內(nèi)部一致性信度影響的研究J,中國衛(wèi)生統(tǒng)計(jì).2002,4(2):8690

8、.)4、時間間隔時間間隔只對重測信度和不同時測量時的復(fù)本信度有影響，對其余的信度來說，不存在時間間隔問題。二、效度及其評價方法效度指測量結(jié)果的有效程度，它是指測量工具或手段能夠準(zhǔn)確測出所需測量的事物的程度，或者說實(shí)測結(jié)果與所要測查的結(jié)果的吻合或一致程度。效度系數(shù)是指描述某種測量結(jié)果，有效性程度的數(shù)量指標(biāo)，常以相關(guān)系數(shù)來表示。效度是一個相對概念，是相對于測量目的而言的。主觀心理測量不可能百分之百的準(zhǔn)確，只能達(dá)到一定的準(zhǔn)確度。效度的種類很多，分類方法也有所不同，內(nèi)容效度、構(gòu)想效度、預(yù)測效度、同時效度、區(qū)別效度、收斂效度、判別效度等。目前被廣泛采用的是弗蘭士(J.W.French)和米希爾(B.Mi

9、chel)提出的分類方法：他們將效度分為內(nèi)容效度、結(jié)構(gòu)效度和效標(biāo)效度。內(nèi)容效度，是指測驗(yàn)的內(nèi)容對欲測范圍內(nèi)內(nèi)容的代表性程度；結(jié)構(gòu)效度(ConstructValidity),測量結(jié)果與測驗(yàn)的理論假設(shè)之間的一致性程度；效標(biāo)效度(Criterion-relatedValidity)，指測量的結(jié)果與某種外在效標(biāo)之間的一致性程度，一般用測驗(yàn)分?jǐn)?shù)與效標(biāo)之間的相關(guān)系數(shù)表示。為了規(guī)范效度問題的研究與解釋，美國心理學(xué)會在1974年將測量的效度分為以上三大類，在以下的論述中，我們將使用這個分類體系。1、內(nèi)容效度是指一個測量實(shí)際測到的內(nèi)容與所要測量的內(nèi)容之間的吻合程度，也稱為表面效度或邏輯效度。對內(nèi)容效度常采用邏輯

10、分析與統(tǒng)計(jì)分析相結(jié)合的方法進(jìn)行評價。(1)邏輯分析的方法邏輯分析方法的思路是由調(diào)研人員或請專家、其他調(diào)研人員對測量項(xiàng)目與原定調(diào)查目的的吻合程度做出判斷，檢驗(yàn)所選擇的項(xiàng)目是否“看起來”符合測量的目的和要求，所設(shè)計(jì)的題項(xiàng)能否代表所要測量的內(nèi)容或主題。主觀性使其不能單獨(dú)地用來衡量表的效度，但可以用來對觀測結(jié)果作大致的評價。為了獲得足夠的內(nèi)容效度，要特別注意設(shè)計(jì)量表時應(yīng)遵循的程序和規(guī)則。(2)統(tǒng)計(jì)分析法統(tǒng)計(jì)分析主要采用單項(xiàng)目與量表總和相關(guān)分析法獲得評價結(jié)果，即計(jì)算每個題項(xiàng)得分與題項(xiàng)總分的相關(guān)系數(shù)，根據(jù)相關(guān)性是否顯著判斷量表是否有效。若量表中有反意題項(xiàng)，應(yīng)將其逆向處理后再計(jì)算總分。2、效標(biāo)效度效標(biāo)效度又

11、稱為準(zhǔn)則效度或預(yù)測效度。效標(biāo)效度是根據(jù)已經(jīng)得到確定的某種理論，選擇一種指標(biāo)或測量工具作為效標(biāo)(準(zhǔn)則)，分析量表得分與準(zhǔn)則(效標(biāo))間的相關(guān)系數(shù)即為準(zhǔn)則效度系數(shù)。在調(diào)查問卷的效度分析中，選擇一個合適的準(zhǔn)則往往十分困難，使這種方法的應(yīng)用受到一定限制。一個好的效標(biāo)需要符合以下幾個條件：(1)有效性：能夠有效測量所要測量的內(nèi)容；(2)客觀性：效標(biāo)測量必須客觀，避免偏見；(3)可靠性：效標(biāo)測量必須穩(wěn)定可靠；(4)實(shí)用性：在保證有效性的前提下，效標(biāo)測量必須盡可能簡單、省時、花費(fèi)少3、結(jié)構(gòu)效度又稱為建構(gòu)效度或構(gòu)建效度，是指測量結(jié)果體現(xiàn)出來的某種結(jié)構(gòu)與測值之間的對應(yīng)程度。結(jié)構(gòu)效度分析所采用的方法是因子分析。最關(guān)心的問題是：量表實(shí)際測量的是哪些特征？在評價建構(gòu)效度時，調(diào)研人員要試圖解釋“量表為什么有效”這一理論問題以及考慮從這一理論問題中能得出什么推論。效度的評價方法有因子分析法和結(jié)構(gòu)方程法。因子分析的主要功能是從量表變量(題項(xiàng))中提取一些公因子，各公因子分別與某一組特定變量高度關(guān)聯(lián)，這些公因子即代表了量表的基本結(jié)構(gòu)。通過因子分析可以考察量表是否能夠測量出研究者設(shè)計(jì)量表時假設(shè)的某種結(jié)構(gòu)。在因子分析的結(jié)果中，用于評價結(jié)構(gòu)效度的主要指標(biāo)有累積貢獻(xiàn)率