調(diào)查問卷的信度效度分析方法
問卷調(diào)查法是教育研究中廣泛采用的一種調(diào)查方法,根據(jù)調(diào)查目的設(shè)計(jì)的調(diào)查問卷是問卷調(diào)查法獲取訊息的工具,其質(zhì)量高低對調(diào)查結(jié)果的真實(shí)性、適用性等具有決定性的作用.為了保證問卷具有較高的可靠性和有效性,在形成正式問卷之前,應(yīng)當(dāng)對問卷進(jìn)行試測,并對試測結(jié)果進(jìn)行信度和效度分析,根據(jù)分析結(jié)果篩選問卷題項(xiàng),調(diào)整問卷架構(gòu),從而提升問卷的信度和效度.信度和效度分析的方法包括邏輯分析和統(tǒng)計(jì)分析,本文主要討論后者.
一、信度分析信度〔Reliability〕即可靠性,它是指采用同樣的方法對同一對象重復(fù)測量時(shí)所得結(jié)果的一致性程度.信度指標(biāo)多以相關(guān)系數(shù)來表示：大致可分為三類：穩(wěn)定系數(shù)〔跨時(shí)間的一致性〕、等值系數(shù)〔跨形式的一致性〕和內(nèi)在一致性系數(shù)〔跨項(xiàng)目的一致性〕.
若以信度系數(shù)來表示信度的大小.信度系數(shù)越大,表示測量的可信程度越大.究竟信度系數(shù)要多少才算有高的信度.學(xué)者DeVellis<1991>認(rèn)為,0.60～0.65〔最好不要〕；0.65～0.70〔最小可接受值〕；0.70～0.80〔相當(dāng)好〕；0.80～0.90〔非常好〕.由此,一份信度系數(shù)好的量表或問卷,最好在0.80以上,0.70至0.80之間還算是可以接受的X圍；分量表最好在0.70以上,0.60至0.70之間可以接受.若分量表的內(nèi)部一致性系數(shù)在0.60以下或者總量表的信度系數(shù)在0.80以下,
應(yīng)考慮重新修訂量表或增刪題項(xiàng).
信度分析的方法主要有以下四種︰
1、重測信度法這一方法是用同樣的問卷對同一組被調(diào)查者間隔一定時(shí)間重復(fù)施測,計(jì)算兩次施測結(jié)果的相關(guān)系數(shù).顯然,重測信度屬于穩(wěn)定系數(shù).重測信度法特別適用于事實(shí)式問卷,如性別、出生年月等在兩次施測中不應(yīng)有任何差異,大多數(shù)被調(diào)查者的興趣、愛好、習(xí)慣等在短時(shí)間內(nèi)也不會(huì)有十分明顯的變化.如果沒有突發(fā)事件導(dǎo)致被調(diào)查者的態(tài)度、意見突變,這種方法也適用于態(tài)度、意見式問卷.由于重測信度法需要對同一樣本試測兩次,被調(diào)查者容易受到各種事件、活動(dòng)和他人的影響,而且間隔時(shí)間長短也有一定限制,因此在實(shí)施中有一定困難.
2、復(fù)本信度法復(fù)本信度法是讓同一組被調(diào)查者一次填答兩份問卷復(fù)本,計(jì)算兩個(gè)復(fù)本的相關(guān)系數(shù).復(fù)本信度屬于等值系數(shù).復(fù)本信度法要求兩個(gè)復(fù)本除表述模式不同外,在內(nèi)容、格式、難度和對應(yīng)題項(xiàng)的提問方向等方面要完全一致,而在實(shí)際調(diào)查中,很難使調(diào)查問卷達(dá)到這種要求,因此采用這種方法者較少.
3、折半信度法折半信度法是將調(diào)查項(xiàng)目分為兩半,計(jì)算兩半得分的相關(guān)系數(shù),進(jìn)而估計(jì)整個(gè)量表的信度.折半信度屬于內(nèi)在一致性系數(shù),測量的是兩半題項(xiàng)得分間的一致性.這種方法一般不適用于事實(shí)式問卷〔如年齡與性別無法相比〕,常用于態(tài)度、意見式問卷的信度分析.在問卷調(diào)查中,態(tài)度測量最常見的形式是5級李克特〔Likert〕量表.進(jìn)行折半信度分析時(shí),如果量表中含有反意題項(xiàng),應(yīng)先將反意題項(xiàng)的得分作逆向處理,以確保各題項(xiàng)得分方向的一致性,然后將全部題項(xiàng)按奇偶或前后分為盡可能相等的兩半,計(jì)算二者的相關(guān)系數(shù)〔rhh,即半個(gè)量表的信度系數(shù)〕,最后用斯皮爾曼-布朗〔Spearman-Brown〕公式︰ru=2rhh/<1+rhh>求出整個(gè)量表的信度系數(shù)〔ru〕.
4、α信度系數(shù)法Cronbachα信度系數(shù)是目前最常用的信度系數(shù),其公式為︰
α=<n/n-1>*<1-<∑Si2>/ST2>
其中,n為量表中題項(xiàng)的總數(shù),Si2為第i題得分的題內(nèi)方差,ST2為全部題項(xiàng)總得分的方差.從公式中可以看出,α系數(shù)評價(jià)的是量表中各題項(xiàng)得分間的一致性,屬于內(nèi)在一致性系數(shù).這種方法適用于態(tài)度、意見式問卷〔量表〕的信度分析.
二、效度分析效度〔Validity〕即有效性,它是指測量工具或手段能夠準(zhǔn)確測出所需測量的事物的程度.效度分為三種類型︰內(nèi)容效度〔Face Validity>、準(zhǔn)則效度<Criterion Validity>和架構(gòu)效度Construct Validity>.效度分析有多種方法,其測量結(jié)果反映效度的不同方面.常用于調(diào)查問卷效度分析的方法主要有以下幾種.
1、單項(xiàng)與總和相關(guān)效度分析這種方法用于測量量表的內(nèi)容效度.內(nèi)容效度又稱表面效度或邏輯效度,它是指所設(shè)計(jì)的題項(xiàng)能否代表所要測量的內(nèi)容或主題.對內(nèi)容效度常采用邏輯分析與統(tǒng)計(jì)分析相結(jié)合的方法進(jìn)行評價(jià).邏輯分析一般由研究者或?qū)＜以u判所選題項(xiàng)是否"看上去〞符合測量的目的和要求.統(tǒng)計(jì)分析主要采用單項(xiàng)與總和相關(guān)分析法獲得評價(jià)結(jié)果,即計(jì)算每個(gè)題項(xiàng)得分與題項(xiàng)總分的相關(guān)系數(shù),根據(jù)相關(guān)是否顯著判斷是否有效.若量表中有反意題項(xiàng),應(yīng)將其逆向處理后再計(jì)算總分.
2、準(zhǔn)則效度分析準(zhǔn)則效度又稱為效標(biāo)效度或預(yù)測效度.準(zhǔn)則效度分析是根據(jù)已經(jīng)得到確定的某種理論,選擇一種指標(biāo)或測量工具作為準(zhǔn)則〔效標(biāo)〕,分析問卷題項(xiàng)與準(zhǔn)則的聯(lián)系,若二者相關(guān)顯著,或者問卷題項(xiàng)對準(zhǔn)則的不同取值、特性表現(xiàn)出顯著差異,則為有效的題項(xiàng).評價(jià)準(zhǔn)則效度的方法是相關(guān)分析或差異顯著性檢驗(yàn).在調(diào)查問卷的效度分析中,選擇一個(gè)合適的準(zhǔn)則往往十分困難,使這種方法的應(yīng)用受到一定限制.
3、結(jié)構(gòu)效度分析結(jié)構(gòu)效度是指測量結(jié)果體現(xiàn)出來的某種結(jié)構(gòu)與測值之間的對應(yīng)程度.架構(gòu)效度分析所采用的方法是因子分析.有的學(xué)者認(rèn)為,效度分析最理想的方法是利用因子分析測量量表或整個(gè)問卷的架構(gòu)效度.因子分析的主要功能是從量表全部變量〔題項(xiàng)〕中提取一些公因子,各公因子分別與某一群特定變量高度關(guān)聯(lián),這些公因子即代表了量表的基本架構(gòu).透過因子分析可以考察問卷是否能夠測量出研究者設(shè)計(jì)問卷時(shí)假設(shè)的某種架構(gòu).在因子分析的結(jié)果中,用于評價(jià)架構(gòu)效度的主要指標(biāo)有累積貢獻(xiàn)率、共同度和因子負(fù)荷.累積貢獻(xiàn)率反映公因子對量表或問卷的累積有效程度,共同度反映由公因子解釋原變量的有效程度,因子負(fù)荷反映原變量與某個(gè)公因子的相關(guān)程度.為了提升調(diào)查問卷的質(zhì)量,進(jìn)而提升整個(gè)研究的價(jià)值,問卷的信度和效度分析絕非贅疣蛇足,而是研究過程中必不可少的重要環(huán)節(jié).
Cronbachα系數(shù)
柯隆巴哈〔Cronbach 1951〕提出計(jì)算一個(gè)測量系統(tǒng)〔問卷或測驗(yàn)〕的信度稱為Cronbachα系數(shù)〔簡稱α系數(shù)〕,是目前社會(huì)科會(huì)研究最常使用的信度.當(dāng)一個(gè)研究主題〔或構(gòu)面〕由很多項(xiàng)目組合,每個(gè)問項(xiàng)都與主題相關(guān),由總分的變異數(shù)與問項(xiàng)的變異數(shù)做為評量信度的指標(biāo)即為α系數(shù).
