調查問卷的設計與評估概述課件

調查問卷的設計與評估根據福勒《調查問卷的設計與評估》整理什么是好問題？引出了答案，答案提供了設法描述內容的有效信息它引出的答案是對我們想要描述東西的可靠的、有效的測量所描述的狀態(tài)一致時，答案也是一致的；答案與設法描述和測量的假想的“真值”盡可能一致。好問題的標準之一：受訪者能夠讀懂問題（問卷）之二：受訪者對問題的理解是一致的之三：受訪者對回答問題的方式有一致理解之四：受訪者擁有回答問題的信息之五：受訪者愿意提供問題所需的答案過程標準：信度OR效度問題本身、問題形式、問題措辭、問題設計問題的類型客觀問題：收集事實資料答案有對錯之分主觀問題：收集潛在信息答案沒有對錯之分客觀問題撰寫好問題的五個挑戰(zhàn)界定目標受訪者與研究者理解一致受訪者理解一致知道答案愿意回答界定目標收入你現在的工作，每月能賺多少錢？在過去12個月里，你一共賺了多少錢？在過去12個月里，你的家庭總收入是多少？更明確的目標：社會地位、獲取資源、就業(yè)質量造成問題質量差的一個主要原因是：研究者沒有將問題目標轉換成問題，僅僅以問題形式簡單地表述問題目標。寄希望受訪者來完成研究者的工作并提供符合問題目標的信息。糟糕調查問題的一個特征糟糕調查問題的一個主要來源是，研究者沒有將問題目標轉換成問題，僅僅以問題形式簡單地表述問題目標。寄希望受訪者來完成研究者的工作并提供符合問題目標的信息，這很少能行得通。調查內容與問題目標大綱示例調查目的：研究使用醫(yī)療保健的相關因素。落實步驟分析醫(yī)療保健的影響因素每個影響因素的測量目標可能的影響因素支付能力需要醫(yī)療保健獲得價值看法調查內容與問題目標大綱示例（2）支付能力去年家庭年收入（所有來源）流動資產（存款）健康保險需要慢性病急性病受傷年齡/性別醫(yī)療保健獲得有無固定保鍵服務者所感覺的距離服務者遠近所感覺的獲得難易程度所感覺的支付壓力價值看法無病時（體檢、拍片）慢性病急性病醫(yī)療保健的使用看病、其他醫(yī)療服務、急診室就診、住院概念和術語的界定例：在過去一周里，你運動了幾個小時？“一周”什么含義？“運動”是否包括散步？在過去7天里，包括散步在內你運動了幾小時？在過去7天里，你運動了幾個小時？你以上回答包括散步嗎？如果不包括你散步幾小時？在過去7天里，你散步幾小時？在過去7天里，你跑步幾小時？在過去7天里，你其他運動幾小時？確保受訪者對語義有一致理解提供完整的定義，消除語義上的含糊不清讓受訪者提供全部所需信息，研究者自己進行進一步歸類分析例：在過去12個月里，你遭受過入室盜竊嗎？在過去12個月里，你遭受過入室搶劫嗎？你的家人看到盜竊者了嗎？盜竊者看到你的家人了嗎？知道答案與記得答案缺乏回答問題所需信息知道信息，但很難回憶起來刺激受訪者回憶答案：長問題、多重問題記得事件，但不記得確切時間設定時間節(jié)點：大事回憶、多次訪談答案的形式在過去30天里，你爬樓梯：A毫不費力，B有點費勁，C完全爬不動在你飲酒的哪些日子里，你通常喝多少？離你家最近的醫(yī)院有多少里？向受訪者提出一個他們能夠完成并符合問題真實答案的回答任務回答準確性問題減少社會期望對答案的影響受訪者傾向于把自己打扮得“更漂亮”如實回答可能會受到威脅缺陷：不是敏感的問題，而是敏感的答案緩解社會期望影響——資料收集過程私密性強調準確的必要性減少訪員的影響緩解社會期望影響——問題設計的選擇問題的適當性處理答案的含義例1在去年十一月的總統(tǒng)選舉中，你投票了嗎？由于工作較忙、迫于家庭壓力、不感興趣或者許多其他原因，人們有時不去投票。請回想去年十一月總統(tǒng)選舉中，你有沒有投票？例2你有借書證嗎？許多人從圖書館借書，其他人則自己買書、訂閱雜志，或用其他方式來獲得閱讀資料。請問你現在有沒有一張借書證？緩解社會期望影響——問題設計的選擇例3你昨天一共喝了幾杯酒？當你喝酒時，通常喝幾杯？你昨天喝酒：比平時多，比平時少，不相上下？

請問昨天你一共喝了幾杯？例4：問題順序很重要在過去兩周里你是否看過病或與醫(yī)生談論過你的健康狀況？在過去一個月里你是否看過病或與醫(yī)生談論過你的健康狀況？緩解社會期望影響——問題設計的選擇例5與你的朋友相比你的酒量：更大、更小、不相上下你最能喝酒的朋友，通常喝幾杯？當你喝酒是，通常能喝幾杯？例6：選項的暗示性喝酒時，你通常喝幾杯？選項：A一杯B兩杯C三杯以上選項：A一二杯B三四杯C五六杯D七杯以上緩解社會期望影響——減少詳細的答案例請問您的年薪為幾萬元？請問您的年薪為：A3萬以下B3-6萬C6萬以上例請將你上周吸大麻的天數與你家現有可用電視機臺數相加，總數是多少？你家現有可用電視機臺數是多少？例你上個月吸過大麻嗎？你母親的生日是在6月嗎？調研答案無關問題目標問題修正比例是20%4%16%32%否80%46%34%68%100%50%50%100%主觀問題醫(yī)生對你友好程度如何？與其他小區(qū)相比，你覺得本小區(qū)的治安狀況如何？你覺得奧巴馬開明，保守，還是介于兩者之間你時常快樂嗎？你對政治事件的興趣有多大？你參與投票的可能性有多大？界定所要評價的東西你們學校的老師對學生友善嗎？非常友善、比較友善、一般友善、不友善、非常不友善你認為犯罪是嚴重問題嗎？嚴重，一般嚴重，不嚴重設計答案的形式你如何評價自己總體的健康狀況？很好，好，一般，不好，很不好0-10打分好，不好比較以下兩個問題在一個從0分到10分的量表中，10分代表最正面，0分代表最負面，你如何評價你昨晚看到的電影？在一個從-5分到+5分的量表中，+5分代表最正面，-5分代表最負面，你如何評價你昨晚看到的電影？量值估計：如果農民工的社會地位是100分，你如何評價小學教師的社會地位以下問題設計得怎么樣?你對宿舍條件滿意嗎？很滿意有些滿意滿意不滿意下述形容哪個能更好地描述你的醫(yī)生？很能干且有條理，很能干且友善，較能干且友善，較能干但不友善同意——不同意形式例：我有時抑郁有些人有順從傾向測量對觀點的看法你是否贊成自主招生？自主招生制度包含很多內容學校類型學校范圍具體政策招生范圍你是否贊成提高自主招生比例？你是否贊成加大自主招生學校范圍？不能簡單詢問對復雜問題的看法測量對觀點的看法你是否贊成槍支管制法？“槍支管制法”對不同的人可能具有不同含義什么人才能購買槍支購買槍支的程序可以買什么樣的槍支你是贊成還是反對關于禁止有暴力犯罪前科的人購買手槍的法律？思考下面的問題它們的含義相同嗎？是否贊成是否反對是贊成還是反對在一個問題中用不同的形式是否能達到相似的結果？強烈同意、同意、不同意、強烈不同意多項目測量哥特曼量表——體能的維度你能從小房間的一邊走到另一邊嗎？你能爬樓梯嗎？你能走過城市的一個街區(qū)嗎？你能走半里路嗎？你能連續(xù)不停的跑半里路嗎？理想的情況是：每個問題都界定了連續(xù)量表上的某個點。通過詢問一組“是或否”的問題，然后再查看一組答案，人們就可以推斷這個人落在連續(xù)量表的哪個位置上。多項目測量李克特量表測量共同的潛在變量完全不符合比較不符合一般符合比較符合完全符合1.學校決策過程公開公正123452.高級職稱的教師能夠參與課程和教學討論123453.召開全校教職工大會很必要123454.在專業(yè)發(fā)展活動中，教師能夠自主選擇123455.教師能夠參與學校重要的決策123456.教師在學校發(fā)展規(guī)劃制定過程中能夠發(fā)表意見12345有關主觀狀態(tài)答案的相對性主觀狀態(tài)問題的答案總是相對的，從來不是絕對的。恰當的表述甲組所報告的感受比乙組更積極學生報告的感受比一年前更積極不恰當的表述人們給總統(tǒng)一個肯定的評價學生對自己的學校感到滿意學生大體上認為自己的健康狀況良好有關主觀狀態(tài)答案的相對性問題的措辭：墮胎VS以外科手術的方式終止妊娠答案選項的措辭：禁止VS不許答案的次序：12345VS54321信息收集的模式：訪員VS

自填語境效應：你喝酒

VS

你的朋友喝酒你喝酒

大多數受訪者選擇了某個選項，而不是“多數人贊成槍支管制”“多數人支持總統(tǒng)”“多數人反對墮胎”選項的設置你的健康狀況如何?

A非常好B比較好C一般D比較差E非常差

A非常好B很好C好D尚好E差你的家庭藏書情況

①0～10本②10～25本

③25～50本④50～100本

⑤100～200本

⑥200～500本

⑦500本以上

①0～10本②11～25本

③26～50本④51～100本

⑤101～200本

⑥201～500本

⑦500本以上選項間距的設置2013年您的工資收入為①1萬以下②1～2萬

③2～3萬④3～4萬⑤4～5萬⑥5～6萬⑦6萬以上①1萬以下②1～5萬

③5～10萬④10～15萬⑤15～20萬⑥20～30萬⑦30萬以上選項的順序我樂于助人為樂A.非常符合B.比較符合C.一般符合D.比較不符合E.完全不符合我不原意幫助別人A.非常符合B.比較符合C.一般符合D.比較不符合E.完全不符合社會期許度低的選項放前面處理不知道的回答者詢問對非親身經歷的意見或看法詢問親身經歷或感受篩選被訪者多項選擇題的設置你家里是否有以下物品?(多項選擇)1.用于學習的書桌2.屬于自己的一個房間3.安靜的學習環(huán)境4.冰箱5.DVD播放機6.你學習使用的計算機7.計算機網絡8.輔助學習的軟件9.古典名著(如西游記、紅樓夢)10.學習輔導材料11.詩詞文集（如唐詩、宋詞、元曲集）12.書畫作品13.客廳是否1.用于學習的書桌102.屬于自己的一個房間103.安靜的學習環(huán)境104.冰箱105.DVD播放機106.你學習使用的計算機107.計算機網絡108.輔助學習的軟件109.古典名著(如西游記、紅樓夢)1010.學習輔導材料1011.詩詞文集（如唐詩、宋詞、元曲集）1012.書畫作品1013.客廳10排序問題以下是當前人們比較關心的問題，請你為其重要性排序A治理空氣污染B減少失業(yè)C加強社會保障D降低個人所得稅設想一個0分到10分的量表，8，9，10代表最重要，0，1，2，代表最不重要，而3~7分介于兩者中間，就每一項的重要性，你會給出哪個數字？以下列舉的品質中，哪三項是你最希望孩子具有的？（在A列中只能畫3個圈）這三項中哪一項是你最希望有的？（在B列中只能畫1個圈）這三項中哪一項是你第二希望有的？（在C列中只能畫1個圈）ABC有禮貌123努力獲得成功123誠實123干凈清潔123自我控制能力123正確判斷能力123可以與其他孩子友好相處123有責任感123為他人著想123有好奇心123聽父母的話123問題的順序過去7天里，老師給你布置的作業(yè)多不多？通常情況下，老師給你布置的作業(yè)多不多？通常情況下，你每周為飲食支出多少元？過去7天里，你為飲食支出多少元？你贊成美國的士兵加入德國的軍隊嗎？你贊成美國的士兵加入英國的軍隊嗎？問題安排順序的一般原則重要問題放在前面非敏感問題放在前面社會期許度低的問題放在前面客觀問題放在前面反向問題的設置為什么要設置反向問題緩解不認真的慣性回答反向問題的位置靠前一點就應該出現借鑒問卷可能存在的問題背景差異問題順序翻譯困難，如節(jié)點在不同語言之間的差異問卷的評估小組訪談小組規(guī)模人員組成認知實驗：深入的個人訪談田野預調研認知實驗讓受訪者自己解釋對問題的理解讓受訪者來界定術語詢問受訪者是否有任何困惑詢問受訪者有多大意愿提供真實的答案詢問受訪者答案是如何做出的練習：選擇一個問題進行認知實驗參考問題過去7天里，你為飲食支出多少元？過去7天里，你的飲食支出是比平時多，還是比平時少？田野預調研（1）觀察者為訪談過程進行行為編碼正確跳答念讀無誤次要錯誤主要錯誤打斷重復問題其他追問要求澄清A12221A22518A325511A42231A49116113A521311A5A245田野預調研（2）訪員問題評估表A沒有明顯缺陷B可能有缺陷C肯定有缺陷難念受訪者有理解問題受訪者有作答困難其他問題備注A1AAAA2BAAA3ABAA4AAAA4AABA5CCBA5AAAA好的問題設計原則摘要（1）原則1：向人們詢問他們的第一手經驗：做過什么、現狀、感受和看法原則1a：詢問二手獲得的信息要謹慎原則1b：對假設性問題要謹慎原則1c：詢問因果關系要謹慎原則1d：詢問有關復雜問題的解決辦法要謹慎好的問題設計原則摘要（2）原則2：一次只問一個問題原則2a：避免一次問多個問題原則2b：避免強加不合理假設的問題原則2c：對含有隱含情景條件的問題要謹慎好的問題設計原則摘要（3）原則3：推敲措辭，讓每一個受訪者都回答同樣的問題原則3a：所有受訪者理解含義，且有相同的理解原則3b：必須使用某些不易理解的術語時，提供概念定義原則3c：時間期限明確，有關情感或者行為的問題，必須有時間期限原則3d：不能概括為一個問題的復雜問題，就詢問幾個問題好的問題設計原則摘要（4-6）原則4：對答案的類型進行清楚的說明原則4a：對于可能有多個答案的問題，清楚說明答案的數量原則5：讓訪員和受訪者盡可能輕松地完成閱讀問題、遵循指示、記錄答案等任務原則6：如果人們在回答問題時，用一致的方式來熟悉問題任務，就會有更好地測量好的問題設計原則摘要（7）原則7：選項是完備的，是互斥的，答案是有區(qū)分度的以下問題好不好？（1）你們社區(qū)的犯罪率是多少？你們社區(qū)里學校的平均質量怎么樣？醫(yī)生是如何治療你的疾病的？不同的種族是否在就業(yè)中受到了公平對待？你預測孕婦生產時麻醉劑會被普遍使用嗎？如果有一種新型的空間交通工具，你樂于使用嗎？你的日?；顒邮欠褚虮程鄱芟拗?？你如果不去投票的主要原因是什么？你是因為房價高而無家可歸嗎？你認為中國教育的根本問題在哪里？你想致富和出名嗎？以下問題好不好？（2）體能上你能毫不費力的跑步和游泳嗎？就目前的經濟狀況而言，你認為買股票是好投資方式嗎？你是否同意就目前的犯罪率而言，晚上不單獨出行有其道理？目標：測量社會活動你上個月多久參加一次宗教儀式或教會有關的活動？目標：測量健康問題導致的身體活動受限上個月，你的健康狀況妨礙你從事跑步、游泳或自行車等劇烈運動嗎？當你喝酒時，你通常喝幾杯？你能一口氣跑上半英里嗎？上周你有幾天鍛煉身體？當散步、做家務、上班干活都算作鍛煉身體的話。七、問卷結構題目卷首語指導語問題與答案編碼致謝問卷的擴展式功能卷首語自我介紹調查支持者調查內容調查目的問卷回收方式調查意義獎勵措施保密性對調查者的希望為什么找到你怎么找到你必須參加嗎結果將如何匯報要花費多長時間落款憂國忘家，捐軀濟難，忠臣之志也。—三國·曹植《求自誠表》。7月-237月-23Sunday,July23,2023墨守成規(guī)，四平八穩(wěn)，優(yōu)柔寡斷，畏首畏尾，不是企業(yè)家的氣質。。12:37:0312:37:0