調(diào)查問卷的設(shè)計(jì)與評(píng)估(完整版)

調(diào)查問卷的設(shè)計(jì)與評(píng)估根據(jù)福勒《調(diào)查問卷的設(shè)計(jì)與評(píng)估》整理什么是好問題？引出了答案，答案提供了設(shè)法描述內(nèi)容的有效信息它引出的答案是對(duì)我們想要描述東西的可靠的、有效的測(cè)量所描述的狀態(tài)一致時(shí)，答案也是一致的；答案與設(shè)法描述和測(cè)量的假想的“真值”盡可能一致。好問題的標(biāo)準(zhǔn)之一：受訪者能夠讀懂問題（問卷）之二：受訪者對(duì)問題的理解是一致的之三：受訪者對(duì)回答問題的方式有一致理解之四：受訪者擁有回答問題的信息之五：受訪者愿意提供問題所需的答案過程標(biāo)準(zhǔn)：信度OR效度問題本身、問題形式、問題措辭、問題設(shè)計(jì)問題的類型客觀問題：收集事實(shí)資料答案有對(duì)錯(cuò)之分主觀問題：收集潛在信息答案沒有對(duì)錯(cuò)之分客觀問題撰寫好問題的五個(gè)挑戰(zhàn)界定目標(biāo)受訪者與研究者理解一致受訪者理解一致知道答案愿意回答界定目標(biāo)收入你現(xiàn)在的工作，每月能賺多少錢？在過去12個(gè)月里，你一共賺了多少錢？在過去12個(gè)月里，你的家庭總收入是多少？更明確的目標(biāo)：社會(huì)地位、獲取資源、就業(yè)質(zhì)量造成問題質(zhì)量差的一個(gè)主要原因是：研究者沒有將問題目標(biāo)轉(zhuǎn)換成問題，僅僅以問題形式簡(jiǎn)單地表述問題目標(biāo)。寄希望受訪者來完成研究者的工作并提供符合問題目標(biāo)的信息。糟糕調(diào)查問題的一個(gè)特征糟糕調(diào)查問題的一個(gè)主要來源是，研究者沒有將問題目標(biāo)轉(zhuǎn)換成問題，僅僅以問題形式簡(jiǎn)單地表述問題目標(biāo)。寄希望受訪者來完成研究者的工作并提供符合問題目標(biāo)的信息，這很少能行得通。調(diào)查內(nèi)容與問題目標(biāo)大綱示例調(diào)查目的：研究使用醫(yī)療保健的相關(guān)因素。落實(shí)步驟分析醫(yī)療保健的影響因素每個(gè)影響因素的測(cè)量目標(biāo)可能的影響因素支付能力需要醫(yī)療保健獲得價(jià)值看法調(diào)查內(nèi)容與問題目標(biāo)大綱示例（2）支付能力去年家庭年收入（所有來源）流動(dòng)資產(chǎn)（存款）健康保險(xiǎn)需要慢性病急性病受傷年齡/性別醫(yī)療保健獲得有無固定保鍵服務(wù)者所感覺的距離服務(wù)者遠(yuǎn)近所感覺的獲得難易程度所感覺的支付壓力價(jià)值看法無病時(shí)（體檢、拍片）慢性病急性病醫(yī)療保健的使用看病、其他醫(yī)療服務(wù)、急診室就診、住院概念和術(shù)語的界定例：在過去一周里，你運(yùn)動(dòng)了幾個(gè)小時(shí)？“一周”什么含義？“運(yùn)動(dòng)”是否包括散步？在過去7天里，包括散步在內(nèi)你運(yùn)動(dòng)了幾小時(shí)？在過去7天里，你運(yùn)動(dòng)了幾個(gè)小時(shí)？你以上回答包括散步嗎？如果不包括你散步幾小時(shí)？在過去7天里，你散步幾小時(shí)？在過去7天里，你跑步幾小時(shí)？在過去7天里，你其他運(yùn)動(dòng)幾小時(shí)？確保受訪者對(duì)語義有一致理解提供完整的定義，消除語義上的含糊不清讓受訪者提供全部所需信息，研究者自己進(jìn)行進(jìn)一步歸類分析例：在過去12個(gè)月里，你遭受過入室盜竊嗎？在過去12個(gè)月里，你遭受過入室搶劫嗎？你的家人看到盜竊者了嗎？盜竊者看到你的家人了嗎？知道答案與記得答案缺乏回答問題所需信息知道信息，但很難回憶起來刺激受訪者回憶答案：長(zhǎng)問題、多重問題記得事件，但不記得確切時(shí)間設(shè)定時(shí)間節(jié)點(diǎn)：大事回憶、多次訪談答案的形式在過去30天里，你爬樓梯：A毫不費(fèi)力，B有點(diǎn)費(fèi)勁，C完全爬不動(dòng)在你飲酒的哪些日子里，你通常喝多少？離你家最近的醫(yī)院有多少里？向受訪者提出一個(gè)他們能夠完成并符合問題真實(shí)答案的回答任務(wù)回答準(zhǔn)確性問題減少社會(huì)期望對(duì)答案的影響受訪者傾向于把自己打扮得“更漂亮”如實(shí)回答可能會(huì)受到威脅缺陷：不是敏感的問題，而是敏感的答案緩解社會(huì)期望影響——資料收集過程私密性強(qiáng)調(diào)準(zhǔn)確的必要性減少訪員的影響緩解社會(huì)期望影響——問題設(shè)計(jì)的選擇問題的適當(dāng)性處理答案的含義例1在去年十一月的總統(tǒng)選舉中，你投票了嗎？由于工作較忙、迫于家庭壓力、不感興趣或者許多其他原因，人們有時(shí)不去投票。請(qǐng)回想去年十一月總統(tǒng)選舉中，你有沒有投票？例2你有借書證嗎？許多人從圖書館借書，其他人則自己買書、訂閱雜志，或用其他方式來獲得閱讀資料。請(qǐng)問你現(xiàn)在有沒有一張借書證？緩解社會(huì)期望影響——問題設(shè)計(jì)的選擇例3你昨天一共喝了幾杯酒？當(dāng)你喝酒時(shí)，通常喝幾杯？你昨天喝酒：比平時(shí)多，比平時(shí)少，不相上下？

請(qǐng)問昨天你一共喝了幾杯？例4：?jiǎn)栴}順序很重要在過去兩周里你是否看過病或與醫(yī)生談?wù)撨^你的健康狀況？在過去一個(gè)月里你是否看過病或與醫(yī)生談?wù)撨^你的健康狀況？緩解社會(huì)期望影響——問題設(shè)計(jì)的選擇例5與你的朋友相比你的酒量：更大、更小、不相上下你最能喝酒的朋友，通常喝幾杯？當(dāng)你喝酒是，通常能喝幾杯？例6：選項(xiàng)的暗示性喝酒時(shí)，你通常喝幾杯？選項(xiàng)：A一杯B兩杯C三杯以上選項(xiàng)：A一二杯B三四杯C五六杯D七杯以上緩解社會(huì)期望影響——減少詳細(xì)的答案例請(qǐng)問您的年薪為幾萬元？請(qǐng)問您的年薪為：A3萬以下B3-6萬C6萬以上例請(qǐng)將你上周吸大麻的天數(shù)與你家現(xiàn)有可用電視機(jī)臺(tái)數(shù)相加，總數(shù)是多少？你家現(xiàn)有可用電視機(jī)臺(tái)數(shù)是多少？例你上個(gè)月吸過大麻嗎？你母親的生日是在6月嗎？調(diào)研答案無關(guān)問題目標(biāo)問題修正比例是20%4%16%32%否80%46%34%68%100%50%50%100%主觀問題醫(yī)生對(duì)你友好程度如何？與其他小區(qū)相比，你覺得本小區(qū)的治安狀況如何？你覺得奧巴馬開明，保守，還是介于兩者之間你時(shí)常快樂嗎？你對(duì)政治事件的興趣有多大？你參與投票的可能性有多大？界定所要評(píng)價(jià)的東西你們學(xué)校的老師對(duì)學(xué)生友善嗎？非常友善、比較友善、一般友善、不友善、非常不友善你認(rèn)為犯罪是嚴(yán)重問題嗎？嚴(yán)重，一般嚴(yán)重，不嚴(yán)重設(shè)計(jì)答案的形式你如何評(píng)價(jià)自己總體的健康狀況？很好，好，一般，不好，很不好0-10打分好，不好比較以下兩個(gè)問題在一個(gè)從0分到10分的量表中，10分代表最正面，0分代表最負(fù)面，你如何評(píng)價(jià)你昨晚看到的電影？在一個(gè)從-5分到+5分的量表中，+5分代表最正面，-5分代表最負(fù)面，你如何評(píng)價(jià)你昨晚看到的電影？量值估計(jì)：如果農(nóng)民工的社會(huì)地位是100分，你如何評(píng)價(jià)小學(xué)教師的社會(huì)地位以下問題設(shè)計(jì)得怎么樣?你對(duì)宿舍條件滿意嗎？很滿意有些滿意滿意不滿意下述形容哪個(gè)能更好地描述你的醫(yī)生？很能干且有條理，很能干且友善，較能干且友善，較能干但不友善同意——不同意形式例：我有時(shí)抑郁有些人有順從傾向測(cè)量對(duì)觀點(diǎn)的看法你是否贊成自主招生？自主招生制度包含很多內(nèi)容學(xué)校類型學(xué)校范圍具體政策招生范圍你是否贊成提高自主招生比例？你是否贊成加大自主招生學(xué)校范圍？不能簡(jiǎn)單詢問對(duì)復(fù)雜問題的看法測(cè)量對(duì)觀點(diǎn)的看法你是否贊成槍支管制法？“槍支管制法”對(duì)不同的人可能具有不同含義什么人才能購(gòu)買槍支購(gòu)買槍支的程序可以買什么樣的槍支你是贊成還是反對(duì)關(guān)于禁止有暴力犯罪前科的人購(gòu)買手槍的法律？思考下面的問題它們的含義相同嗎？是否贊成是否反對(duì)是贊成還是反對(duì)在一個(gè)問題中用不同的形式是否能達(dá)到相似的結(jié)果？強(qiáng)烈同意、同意、不同意、強(qiáng)烈不同意多項(xiàng)目測(cè)量哥特曼量表——體能的維度你能從小房間的一邊走到另一邊嗎？你能爬樓梯嗎？你能走過城市的一個(gè)街區(qū)嗎？你能走半里路嗎？你能連續(xù)不停的跑半里路嗎？理想的情況是：每個(gè)問題都界定了連續(xù)量表上的某個(gè)點(diǎn)。通過詢問一組“是或否”的問題，然后再查看一組答案，人們就可以推斷這個(gè)人落在連續(xù)量表的哪個(gè)位置上。多項(xiàng)目測(cè)量李克特量表測(cè)量共同的潛在變量完全不符合比較不符合一般符合比較符合完全符合1.學(xué)校決策過程公開公正123452.高級(jí)職稱的教師能夠參與課程和教學(xué)討論123453.召開全校教職工大會(huì)很必要123454.在專業(yè)發(fā)展活動(dòng)中，教師能夠自主選擇123455.教師能夠參與學(xué)校重要的決策123456.教師在學(xué)校發(fā)展規(guī)劃制定過程中能夠發(fā)表意見12345有關(guān)主觀狀態(tài)答案的相對(duì)性主觀狀態(tài)問題的答案總是相對(duì)的，從來不是絕對(duì)的。恰當(dāng)?shù)谋硎黾捉M所報(bào)告的感受比乙組更積極學(xué)生報(bào)告的感受比一年前更積極不恰當(dāng)?shù)谋硎鋈藗兘o總統(tǒng)一個(gè)肯定的評(píng)價(jià)學(xué)生對(duì)自己的學(xué)校感到滿意學(xué)生大體上認(rèn)為自己的健康狀況良好有關(guān)主觀狀態(tài)答案的相對(duì)性問題的措辭：墮胎VS以外科手術(shù)的方式終止妊娠答案選項(xiàng)的措辭：禁止VS不許答案的次序：12345VS54321信息收集的模式：訪員VS

自填語境效應(yīng)：你喝酒

VS

你的朋友喝酒你喝酒

大多數(shù)受訪者選擇了某個(gè)選項(xiàng)，而不是“多數(shù)人贊成槍支管制”“多數(shù)人支持總統(tǒng)”“多數(shù)人反對(duì)墮胎”選項(xiàng)的設(shè)置你的健康狀況如何?

A非常好B比較好C一般D比較差E非常差

A非常好B很好C好D尚好E差你的家庭藏書情況

①0～10本②10～25本

③25～50本④50～100本

⑤100～200本

⑥200～500本

⑦500本以上

①0～10本②11～25本

③26～50本④51～100本

⑤101～200本

⑥201～500本

⑦500本以上選項(xiàng)間距的設(shè)置2013年您的工資收入為①1萬以下②1～2萬

③2～3萬④3～4萬⑤4～5萬⑥5～6萬⑦6萬以上①1萬以下②1～5萬

③5～10萬④10～15萬⑤15～20萬⑥20～30萬⑦30萬以上選項(xiàng)的順序我樂于助人為樂A.非常符合B.比較符合C.一般符合D.比較不符合E.完全不符合我不原意幫助別人A.非常符合B.比較符合C.一般符合D.比較不符合E.完全不符合社會(huì)期許度低的選項(xiàng)放前面處理不知道的回答者詢問對(duì)非親身經(jīng)歷的意見或看法詢問親身經(jīng)歷或感受篩選被訪者多項(xiàng)選擇題的設(shè)置你家里是否有以下物品?(多項(xiàng)選擇)1.用于學(xué)習(xí)的書桌2.屬于自己的一個(gè)房間3.安靜的學(xué)習(xí)環(huán)境4.冰箱5.DVD播放機(jī)6.你學(xué)習(xí)使用的計(jì)算機(jī)7.計(jì)算機(jī)網(wǎng)絡(luò)8.輔助學(xué)習(xí)的軟件9.古典名著(如西游記、紅樓夢(mèng))10.學(xué)習(xí)輔導(dǎo)材料11.詩(shī)詞文集（如唐詩(shī)、宋詞、元曲集）12.書畫作品13.客廳是否1.用于學(xué)習(xí)的書桌102.屬于自己的一個(gè)房間103.安靜的學(xué)習(xí)環(huán)境104.冰箱105.DVD播放機(jī)106.你學(xué)習(xí)使用的計(jì)算機(jī)107.計(jì)算機(jī)網(wǎng)絡(luò)108.輔助學(xué)習(xí)的軟件109.古典名著(如西游記、紅樓夢(mèng))1010.學(xué)習(xí)輔導(dǎo)材料1011.詩(shī)詞文集（如唐詩(shī)、宋詞、元曲集）1012.書畫作品1013.客廳10排序問題以下是當(dāng)前人們比較關(guān)心的問題，請(qǐng)你為其重要性排序A治理空氣污染B減少失業(yè)C加強(qiáng)社會(huì)保障D降低個(gè)人所得稅設(shè)想一個(gè)0分到10分的量表，8，9，10代表最重要，0，1，2，代表最不重要，而3~7分介于兩者中間，就每一項(xiàng)的重要性，你會(huì)給出哪個(gè)數(shù)字？以下列舉的品質(zhì)中，哪三項(xiàng)是你最希望孩子具有的？（在A列中只能畫3個(gè)圈）這三項(xiàng)中哪一項(xiàng)是你最希望有的？（在B列中只能畫1個(gè)圈）這三項(xiàng)中哪一項(xiàng)是你第二希望有的？（在C列中只能畫1個(gè)圈）ABC有禮貌123努力獲得成功123誠(chéng)實(shí)123干凈清潔123自我控制能力123正確判斷能力123可以與其他孩子友好相處123有責(zé)任感123為他人著想123有好奇心123聽父母的話123問題的順序過去7天里，老師給你布置的作業(yè)多不多？通常情況下，老師給你布置的作業(yè)多不多？通常情況下，你每周為飲食支出多少元？過去7天里，你為飲食支出多少元？你贊成美國(guó)的士兵加入德國(guó)的軍隊(duì)嗎？你贊成美國(guó)的士兵加入英國(guó)的軍隊(duì)嗎？問題安排順序的一般原則重要問題放在前面非敏感問題放在前面社會(huì)期許度低的問題放在前面客觀問題放在前面反向問題的設(shè)置為什么要設(shè)置反向問題緩解不認(rèn)真的慣性回答反向問題的位置靠前一點(diǎn)就應(yīng)該出現(xiàn)借鑒問卷可能存在的問題背景差異問題順序翻譯困難，如節(jié)點(diǎn)在不同語言之間的差異問卷的評(píng)估小組訪談小組規(guī)模人員組成認(rèn)知實(shí)驗(yàn)：深入的個(gè)人訪談田野預(yù)調(diào)研認(rèn)知實(shí)驗(yàn)讓受訪者自己解釋對(duì)問題的理解讓受訪者來界定術(shù)語詢問受訪者是否有任何困惑詢問受訪者有多大意愿提供真實(shí)的答案詢問受訪者答案是如何做出的練習(xí)：選擇一個(gè)問題進(jìn)行認(rèn)知實(shí)驗(yàn)參考問題過去7天里，你為飲食支出多少元？過去7天里，你的飲食支出是比平時(shí)多，還是比平時(shí)少？田野預(yù)調(diào)研（1）觀察者為訪談過程進(jìn)行行為編碼正確跳答念讀無誤次要錯(cuò)誤主要錯(cuò)誤打斷重復(fù)問題其他追問要求澄清A12221A22518A325511A42231A49116113A521311A5A245田野預(yù)調(diào)研（2）訪員問題評(píng)估表A沒有明顯缺陷B可能有缺陷C肯定有缺陷難念受訪者有理解問題受訪者有作答困難其他問題備注A1AAAA2BAAA3ABAA4AAAA4AABA5CCBA5AAAA好的問題設(shè)計(jì)原則摘要（1）原則1：向人們?cè)儐査麄兊牡谝皇纸?jīng)驗(yàn)：做過什么、現(xiàn)狀、感受和看法原則1a：詢問二手獲得的信息要謹(jǐn)慎原則1b：對(duì)假設(shè)性問題要謹(jǐn)慎原則1c：詢問因果關(guān)系要謹(jǐn)慎原則1d：詢問有關(guān)復(fù)雜問題的解決辦法要謹(jǐn)慎好的問題設(shè)計(jì)原則摘要（2）原則2：一次只問一個(gè)問題原則2a：避免一次問多個(gè)問題原則2b：避免強(qiáng)加不合理假設(shè)的問題原則2c：對(duì)含有隱含情景條件的問題要謹(jǐn)慎好的問題設(shè)計(jì)原則摘要（3）原則3：推敲措辭，讓每一個(gè)受訪者都回答同樣的問題原則3a：所有受訪者理解含義，且有相同的理解原則3b：必須使用某些不易理解的術(shù)語時(shí)，提供概念定義原則3c：時(shí)間期限明確，有關(guān)情感或者行為的問題，必須有時(shí)間期限原則3d：不能概括為一個(gè)問題的復(fù)雜問題，就詢問幾個(gè)問題好的問題設(shè)計(jì)原則摘要（4-6）原則4：對(duì)答案的類型進(jìn)行清楚的說明原則4a：對(duì)于可能有多個(gè)答案的問題，清楚說明答案的數(shù)量原則5：讓訪員和受訪者盡可能輕松地完成閱讀問題、遵循指示、記錄答案等任務(wù)原則6：如果人們?cè)诨卮饐栴}時(shí)，用一致的方式來熟悉問題任務(wù)，就會(huì)有更好地測(cè)量好的問題設(shè)計(jì)原則摘要（7）原則7：選項(xiàng)是完備的，是互斥的，答案是有區(qū)分度的以下問題好不好？（1）你們社區(qū)的犯罪率是多少？你們社區(qū)里學(xué)校的平均質(zhì)量怎么樣？醫(yī)生是如何治療你的疾病的？不同的種族是否在就業(yè)中受到了公平對(duì)待？你預(yù)測(cè)孕婦生產(chǎn)時(shí)麻醉劑會(huì)被普遍使用嗎？如果有一種新型的空間交通工具，你樂于使用嗎？你的日?；顒?dòng)是否因背疼而受限制？你如果不去投票的主要原因是什么？你是因?yàn)榉績(jī)r(jià)高而無家可歸嗎？你認(rèn)為中國(guó)教育的根本問題在哪里？你想致富和出名嗎？以下問題好不好？（2）體能上你能毫不費(fèi)力的跑步和游泳嗎？就目前的經(jīng)濟(jì)狀況而言，你認(rèn)為買股票是好投資方式嗎？你是否同意就目前的犯罪率而言，晚上不單獨(dú)出行有其道理？目標(biāo)：測(cè)量社會(huì)活動(dòng)你上個(gè)月多久參加一次宗教儀式或教會(huì)有關(guān)的活動(dòng)？目標(biāo)：測(cè)量健康問題導(dǎo)致的身體活動(dòng)受限上個(gè)月，你的健康狀況妨礙你從事跑步、游泳或自行車等劇烈運(yùn)動(dòng)嗎？當(dāng)你喝酒時(shí)，你通常喝幾杯？你能一口氣跑上半英里嗎？上周你有幾天鍛煉身體？當(dāng)散步、做家務(wù)、上班干活都算作鍛煉身體的話。七、問卷結(jié)構(gòu)題目卷首語指導(dǎo)語問題與答案編碼致謝問卷的擴(kuò)展式功能卷首語自我介紹調(diào)查支持者調(diào)查內(nèi)容調(diào)查目的問卷回收方式調(diào)查意義獎(jiǎng)勵(lì)措施保密性對(duì)調(diào)查者的希望為什么找到你怎么找到你必須參加嗎結(jié)果將如何匯報(bào)要花費(fèi)多長(zhǎng)時(shí)間落款9、春去春又回，新桃換舊符。在那桃花盛開的地方，在這醉人芬芳的季節(jié)，愿你生活像春天一樣陽光，心情像桃花一樣美麗，日子像桃子一樣甜蜜。12月-2412月-24Sunday,December22,202410、人的志向通常和他們的