如何提高問(wèn)卷調(diào)查的信度和效度？

“為什么導(dǎo)師要求我的畢業(yè)論文，一定要加上問(wèn)卷調(diào)查的信效度檢驗(yàn)？”最近，總有粉絲在微信后臺(tái)給廠長(zhǎng)留言問(wèn)此問(wèn)題。

信度和效度相當(dāng)于是對(duì)于問(wèn)卷質(zhì)量的一個(gè)前置條件，也常常令調(diào)研者頭痛不已。

今天廠長(zhǎng)給大家詳細(xì)講解，在調(diào)查問(wèn)卷中哪些情況下信效度檢驗(yàn)是必要的？如何直觀地理解信效度及兩者的關(guān)系？如何提高問(wèn)卷的信度和效度？

01

信效度檢驗(yàn)主要針對(duì)量表題

如果問(wèn)卷的信度和效度比較好，證明問(wèn)卷的數(shù)據(jù)可靠性比較高，問(wèn)卷數(shù)據(jù)內(nèi)部一致性比較高，所以可以用來(lái)做后續(xù)的建模分析，相反，如果信度和效度不高，可能就需要重新設(shè)計(jì)問(wèn)卷、發(fā)放問(wèn)卷。

需要注意一點(diǎn)，并不是所有的問(wèn)卷都需要進(jìn)行信效度檢驗(yàn)。

非量表題不能進(jìn)行信度分析和效度分析。

如：無(wú)序多分類變量如性別、出生地、文化程度等都不在信效度檢驗(yàn)的范疇；主觀題目如填空題等都不是檢驗(yàn)的內(nèi)容。

問(wèn)卷中會(huì)有多種類型的問(wèn)題，比如單選題、多選題、填空題、問(wèn)答題等，而信效度分析主要針對(duì)量表題。

所謂量表題就是測(cè)試受訪者的態(tài)度或者看法的題目。通常使用李克特量表來(lái)測(cè)度，根據(jù)答項(xiàng)數(shù)量可分為四級(jí)量表，五級(jí)量表，七級(jí)量和九級(jí)量表。

比如五級(jí)量表可以分為：非常不滿意，比較不滿意，中立，滿意和非常滿意五個(gè)選項(xiàng)，通常賦予分值1，2，3，4，5。

02

何謂信效度檢驗(yàn)

01信度檢驗(yàn)：一致性程度

信度檢驗(yàn)是采用同樣的方法對(duì)同一對(duì)象重復(fù)測(cè)量時(shí)所得到結(jié)果的一致性程度的檢驗(yàn)。

信度反映了測(cè)量中的隨機(jī)誤差大小，信度高，那么意味針對(duì)同一事物進(jìn)行多次測(cè)量的結(jié)果可以保持一致，說(shuō)明該測(cè)量工具可靠、穩(wěn)定；缺乏信度，則前后測(cè)量的結(jié)果就會(huì)出現(xiàn)不一致，說(shuō)明該測(cè)量工具有問(wèn)題。

評(píng)判方法：

02效度檢驗(yàn)：真實(shí)性程度

效度檢驗(yàn)就是，指測(cè)量工具或手段能夠準(zhǔn)確測(cè)出所需測(cè)量的事物的程度，即在多大程度上反映了事物的客觀真實(shí)性。

缺乏效度，則說(shuō)明測(cè)量工具沒(méi)有正確地獲取反映真實(shí)特征的數(shù)據(jù)。比如農(nóng)村貧困，代表政府對(duì)貧困進(jìn)行測(cè)量的人對(duì)貧困的理解和農(nóng)民對(duì)貧困的理解是不一樣的，前者根據(jù)的是可量化的指標(biāo)，后者關(guān)心的是自己的實(shí)際生活感受，以及與他人的比較。

如果，問(wèn)卷回答的問(wèn)題與實(shí)際想要測(cè)量的值相差較大。這里可能是問(wèn)卷的設(shè)計(jì)有問(wèn)題，也可能填寫(xiě)問(wèn)卷的人理解有錯(cuò)誤。

效度比較好代表的是問(wèn)卷的數(shù)據(jù)內(nèi)部一致性比較好，也就是說(shuō)每個(gè)維度的所有題目的選擇上基本是一致的，維度劃分比較好。

比如說(shuō)，質(zhì)量維度的三個(gè)題目分別是：飲品的味道、飲品新鮮程度、飲品的品質(zhì)。對(duì)應(yīng)的選項(xiàng)為5級(jí)量表，分別為：1,2,3,4,5代表的是非常不符合、有些不符合、不能確定、有些符合、非常符合。

如果問(wèn)卷填寫(xiě)人認(rèn)真填寫(xiě)，那這些題目的選擇上應(yīng)該不會(huì)存在太大差異，因?yàn)檫@些題目都是換著方法對(duì)同一個(gè)問(wèn)題的問(wèn)法。

03

如何解讀信效度檢驗(yàn)結(jié)果

關(guān)于如何解讀信效度檢驗(yàn)的結(jié)果？廠長(zhǎng)用一個(gè)簡(jiǎn)單、直觀的案例為大家講清楚。小紅測(cè)身高，連續(xù)5次的身高都不一樣，這個(gè)叫沒(méi)信度，即結(jié)果不可靠不能重復(fù)。小紅測(cè)了5次身高，都是70CM，有信度，但是沒(méi)有效度，因?yàn)闆](méi)有測(cè)量到真實(shí)的身高。小紅換一個(gè)身高測(cè)試儀器，每次都顯示165CM，去體檢機(jī)構(gòu)檢測(cè)身高也是165CM，這個(gè)就是有信度也有效度?？傊判Ф葯z驗(yàn)的3種結(jié)果總結(jié)如下：

01信度低，效度不可能高

因?yàn)樾哦鹊鸵馕吨鴨?wèn)卷填寫(xiě)存在著不一致，就不可能反映真實(shí)情況，也不可能做到準(zhǔn)確測(cè)量。

02信度高，效度也未必高

因?yàn)樾哦葍H僅測(cè)量的是一致性問(wèn)題，那么如果問(wèn)卷填寫(xiě)人都對(duì)問(wèn)卷中問(wèn)題理解有偏差，那么可能一致性是滿足的，也就是信度較高，但問(wèn)卷也不能反映實(shí)際情況。

03效度高，信度一定高

也就是說(shuō)，量表本身能反映實(shí)際情況，與實(shí)際都偏差不大，也就不存在不一致的情況了。

04

提高問(wèn)卷信效度的5個(gè)方法

01提高信度的方法

方法1：適當(dāng)增加同質(zhì)的題目來(lái)增加量表的長(zhǎng)度

方法2：?jiǎn)柧眍}目設(shè)置的難度適中

方法3：測(cè)驗(yàn)的時(shí)間夠充分

02提高效度的方法

方法1：確定好量表的假設(shè)結(jié)構(gòu)維度，編好每個(gè)問(wèn)題題目

方法2：保證回收量表的質(zhì)量和數(shù)量，題目數(shù)量與被試樣本數(shù)量之比最好是1:5

方法3：適當(dāng)增加同質(zhì)的題目來(lái)增加量表的長(zhǎng)度

03使用成熟問(wèn)卷

建議使用現(xiàn)成成熟問(wèn)卷，或者稍加改動(dòng)后使用。因?yàn)?，也有少?shù)人覺(jué)得修改一些沒(méi)有問(wèn)題，然后導(dǎo)致問(wèn)卷邏輯有問(wèn)題，最終造成信效度較低甚至不達(dá)標(biāo)，辛苦收集的數(shù)據(jù)白白浪費(fèi)掉。

04小范圍測(cè)試問(wèn)卷

發(fā)放正式問(wèn)卷之前，最好有一次試測(cè)，即便小范圍收集幾十個(gè)樣本，然后跑一下數(shù)據(jù)，看看信效度和其他分析的大致情況。

05剔除無(wú)效樣本

只要真實(shí)收集問(wèn)卷，無(wú)效樣本量會(huì)很小，但嚴(yán)格來(lái)講，并為了保障結(jié)果更好的滿足預(yù)期，需要剔除無(wú)效樣本。

特別聲明：以上內(nèi)容來(lái)源于網(wǎng)絡(luò)，部分轉(zhuǎn)載僅僅是出于傳播信息的需要，并不意味著代表本網(wǎng)站觀點(diǎn)或證實(shí)其內(nèi)容的真實(shí)性；如其他媒體、網(wǎng)站或個(gè)人從本網(wǎng)站轉(zhuǎn)載使用，請(qǐng)注明出處，并保留本網(wǎng)站注明的“來(lái)源”，應(yīng)自負(fù)版權(quán)等法律責(zé)任；作者如果不希望被轉(zhuǎn)載，請(qǐng)與我們接洽。