測量信度與效度

測量measurement1整理課件6.1測量的定義「測量」是針對(duì)某一特定對(duì)象、人、或組織，有關(guān)某種特徵或行為(消費(fèi)、所得、人格特質(zhì)…)，賦予其一個(gè)值，使其數(shù)值能代表(或符合)構(gòu)念中所代表的概念或狀況。它是屬於衡量的問題?！笢y量」就是研究者根據(jù)一定「規(guī)則」將數(shù)值(或其它符號(hào))指派給物體或事物(變數(shù))身上之一種程序。*2整理課件測量的三個(gè)程序(1)選擇可觀察的「個(gè)體或事物」(即「對(duì)象」(2)以數(shù)字或符號(hào)代表事件的特性，即數(shù)值系統(tǒng)(numericalsystem)(3)依據(jù)指派「規(guī)則」賦予觀察對(duì)象一個(gè)符號(hào)或數(shù)字，此種「規(guī)則」就是操作型定義。*3整理課件測量資料尺度分類1.名義尺度：為標(biāo)示目的指定的數(shù)值，主要目的是分類。例如身分證號(hào)碼、性別，不同號(hào)碼沒有大小區(qū)分，不能做加減。2.順序尺度：此尺度資料可表示事物間的等級(jí)或順序，但不能衡量不同等級(jí)間的距離。只有大小沒有距離，例如Likert五點(diǎn)計(jì)分量表所得數(shù)據(jù)，可能是１～５分，亦可能是-2～+2分，且假設(shè)5>4，但5-4≠1。4整理課件數(shù)值系統(tǒng)可分四大類3.等距(區(qū)間)尺度：具有前兩者的資料的特性，可比大小亦可比差距。前後距離相等，但沒有倍數(shù)關(guān)係，所以沒有絕對(duì)的0(有距離，但沒有絕對(duì)的零點(diǎn))。例如5-4=1,但4≠2×2。4.比例尺度：具有前三者的資料特性，且可以做倍數(shù)比較。有距離，有絕對(duì)的零點(diǎn)。例如，4=2×2。比例尺度是最好的衡量尺度，其與等距尺度的區(qū)別在於比例尺度有絕對(duì)的原點(diǎn)

0。5整理課件6.1.2變數(shù)(variable)種類1.自變數(shù)：在實(shí)驗(yàn)法中又稱「因變數(shù)」或?qū)嶒?yàn)變數(shù)，它是經(jīng)由實(shí)驗(yàn)者安排或操弄的變數(shù)。2.依變數(shù)：在實(shí)驗(yàn)法中又稱「果變數(shù)」或反應(yīng)變數(shù)，它是實(shí)驗(yàn)者企圖觀察測量的行為或反應(yīng)。3.外生(extraneous)變數(shù)：指自變數(shù)以外，但凡可能影響結(jié)果(依變數(shù))之因素。6整理課件4.中介變數(shù)：指介於自變數(shù)與依變數(shù)之間，但凡會(huì)對(duì)研究結(jié)果會(huì)產(chǎn)生作用的內(nèi)在歷程。通常是不能直接觀察辨認(rèn)的，只能憑個(gè)體外顯行為的線索來推知。*7整理課件6.2數(shù)值指派的「規(guī)則」數(shù)值指派規(guī)則牽涉到如何將測量結(jié)果(如a)推論到構(gòu)念(以A表示)，推論結(jié)果有四種情況：情況1：有信度，效度低情況2：有信度，有效度情況3：信度低，效度低情況4：無信度，無效度8整理課件三種無效度的推論：情況1：測量結(jié)果a與b有關(guān)，但無法代表構(gòu)念A(yù),B情況2：測量結(jié)果a與b有關(guān)，但構(gòu)念A(yù),B不相關(guān)情況3：測量結(jié)果a與b無關(guān)，但構(gòu)念A(yù),B有關(guān)9整理課件測量誤差指「真正差異」以外任何引起測量分?jǐn)?shù)的差異。測量誤差(誤差分?jǐn)?shù))的來源有二大類：(1)系統(tǒng)性誤差：它會(huì)對(duì)測量結(jié)果產(chǎn)生一致性固定的影響；(2)隨機(jī)性誤差：主要是來自受訪者身心狀況(情緒、性格、動(dòng)機(jī)…)、情境因素(噪音、太太在場、趕飛機(jī)、太熱…)、及測量試題(內(nèi)容太長、太難…)的干擾影響*10整理課件(1)系統(tǒng)性誤差系統(tǒng)性誤差(systematicerrors)只要使用測量工具，它就會(huì)產(chǎn)生。系統(tǒng)性誤差對(duì)個(gè)案間及研究間的影響方式都是「固定」不變的。換言之，對(duì)相同情境受訪者或不同情境受訪者的同一位受訪者，均產(chǎn)生同樣的影響。*11整理課件(2)隨機(jī)性誤差每一次以「不同」方式來影響測量工具的使用。隨機(jī)性誤差(又稱非系統(tǒng)性誤差)之主要來源，可分成以下六種因素，這些因素是施測者無法控制的:*12整理課件隨機(jī)性誤差之主要來源(1)受測者因素:因受測者本身特質(zhì)(如隨和性)不同、當(dāng)時(shí)個(gè)人的情緒好壞，都會(huì)導(dǎo)致測量結(jié)果的不同。例如：

老大「愛問」：「蕃茄為何有紅有綠？鵝為什麼叫聲大？岳母為什麼眼睛紅？」

老二「愛答」：「蕃茄因?yàn)闀竦教?、鵝因?yàn)椴弊娱L、岳母沒睡好」。

老三「愛質(zhì)疑」：「胡蘿蔔也會(huì)曬到變紅、青蛙脖子短但叫聲也很大、母豬每天睡眼睛也會(huì)紅」。13整理課件隨機(jī)性誤差之主要來源(2)情境因素：訪談時(shí)任何外力的影響(3)施測者因素：例如，訪談?wù)叩慕忉?、重述、語氣、態(tài)度、肢體動(dòng)作、草率的資料處理…等。(4)量表使用方式：是由訪問員代填，還是受訪者親自填答。(5)資料的分析處理之影響。14整理課件隨機(jī)性誤差之主要來源(6)測量工具因素：量表的設(shè)計(jì)及形式，包括：(I)測量工具內(nèi)容：混淆(區(qū)別效度不佳)、語意不清(信度不佳)、編排不良(建構(gòu)效度不佳)…等；(II)測量項(xiàng)目缺乏，未能涵蓋所欲測量的特性(即內(nèi)容效度不佳)、項(xiàng)目的篩選(III)有無引導(dǎo)作答的嫌疑…等。*15整理課件測量工具好壞的評(píng)量準(zhǔn)則1.效度：該量表是否真能測量到我們欲衡量的特性(系統(tǒng)誤差小)。2.信度：該測量工具所衡量的結(jié)果是否具有穩(wěn)定性、一致性(隨機(jī)誤差小)。3.敏感度：事物起了變化，該測量工具是否能顯現(xiàn)出差異。4.實(shí)用性：即考量該測量工具的經(jīng)濟(jì)性、便利性、可解釋性。*16整理課件6.4量表(scale)的設(shè)計(jì)所謂「量表化」(scaling)，它是一種測量的程序，旨在將衡量對(duì)象或欲衡量的特性(property)指派某些數(shù)值，以便將測量對(duì)象之特性數(shù)值化。衡量「變數(shù)」可用單一問項(xiàng)來量衡量「構(gòu)念」則要用量表來量。量表是用一個(gè)以上的指標(biāo)(indicant,item,manifested)來測量某個(gè)體/事物的特性。17整理課件6.5「量表」設(shè)計(jì)的技術(shù)1.李克特量表：採評(píng)分加總之計(jì)分方式2.Thurstone量表：又稱共識(shí)量表3.語意差異量表：4.Guttman量表：採累計(jì)量表計(jì)分方式18整理課件李克特量表李克特(Likert)量表是屬「評(píng)分加總式量表」最常用的一種，屬同一「構(gòu)念」的「這些項(xiàng)目」是用「加總」方式來計(jì)分，單獨(dú)或個(gè)別項(xiàng)目是無意義的?！冈u(píng)分加總式量表」是對(duì)某一概念/構(gòu)念所設(shè)計(jì)的數(shù)個(gè)項(xiàng)目，測量每位受訪者對(duì)它們的態(tài)度反應(yīng)(同意程度)。每一個(gè)反應(yīng)都給一個(gè)數(shù)值，以代表受訪者對(duì)該項(xiàng)目的贊同程度，將每位受訪者在這些項(xiàng)目的得分加總，即是受訪者對(duì)該題的態(tài)度。*19整理課件李克特量表加總式量表有二個(gè)假說或特徵：(1)每一個(gè)態(tài)度項(xiàng)目都具有相同量值，但項(xiàng)目之間則沒有差別量值。(2)對(duì)同一項(xiàng)目而言，受訪者的反應(yīng)程度是不同的(具有差別量值)。20整理課件Likert量表設(shè)計(jì)的步驟1.建立大量有關(guān)某一「態(tài)度」構(gòu)念之題庫，每一個(gè)敘述等於一個(gè)項(xiàng)目，並隨機(jī)式排列這些項(xiàng)目。2.邀請(qǐng)一組樣本，請(qǐng)各受訪者對(duì)上述態(tài)度各項(xiàng)目表達(dá)立場(前測、預(yù)測)3.進(jìn)行項(xiàng)目分析:旨在對(duì)量表之題庫做篩選，它是假定每一項(xiàng)目都具有相同的量值。項(xiàng)目的好壞是依據(jù)其是否具有區(qū)別力，以決定項(xiàng)目保存或刪除。21整理課件項(xiàng)目分析之方法1.相關(guān)分析法：計(jì)算每一項(xiàng)目與總分的積差相關(guān)(以符號(hào)Rti表示)，當(dāng)作該題的「區(qū)別指數(shù)，區(qū)別指數(shù)偏低者，即表示該題未能區(qū)分受試者的反應(yīng)程度，沒有區(qū)別效果，可予剔除。2.內(nèi)部一致性效標(biāo)分析法：將所有受試者在預(yù)試量表得分的總和依上下分排序，前25%為高分組，後25%為低分組。爾後以高分組受試者在某一項(xiàng)目(題)得分之平均數(shù)減低分組受試者在同一題得分之平均數(shù)，其差即代表此題的鑑別力。(p136)22整理課件Thurstone量表是由一群「專家」依以下準(zhǔn)則篩選項(xiàng)目：1.與研究主題之關(guān)聯(lián)性2.題意是否模糊3.項(xiàng)目所表達(dá)之態(tài)度層次：Thurstone量表能否編製成功之關(guān)鍵點(diǎn)，是在編製過程。將專家意見(該題去留)不一致者的項(xiàng)目刪除。23整理課件語意差異量表

語意差異(量表瞭解受訪者對(duì)事物的認(rèn)知)是假設(shè)事物的意涵可能有多種層面，而這些特質(zhì)層面之空間，謂之語意空間，例如：好的

1 2 3 4 5 6 7

差的 快的

1 2 3 4 5 6 7

慢的 強(qiáng)的

1 2 3 4 5 6 7

弱的 24整理課件語意差異量表之設(shè)計(jì)步驟1.先建立題庫(一組項(xiàng)目)，並對(duì)「態(tài)度」目標(biāo)物，就受訪者可能的反應(yīng)，選擇其兩極化的形容詞，來橫跨「1至7」之選答區(qū)，以便受訪者填答2.對(duì)受訪者所回收資料進(jìn)行資料分析，計(jì)算出每題(變數(shù))的平均數(shù)。3.依據(jù)項(xiàng)目順序，將每題(變數(shù))平均數(shù)集結(jié)起來，以形成整個(gè)量表之特徵輪廓(p142)25整理課件Guttman量表Guttman量表則可用來檢定具有不同強(qiáng)弱程度之一組項(xiàng)目是否都屬「單一構(gòu)面」(uni-dimension)，所謂「單一構(gòu)面」是指受訪者對(duì)項(xiàng)目所反應(yīng)的態(tài)度，均集中在某一方向上。例如，組織階層、社會(huì)差距、種族歧視、自主性(反權(quán)威、反傳統(tǒng)、開放性)…等等。*26整理課件Guttman量表27整理課件Guttman量表編製步驟1.建立可用以測量某事實(shí)之具體句子或項(xiàng)目。2.選取一組樣本進(jìn)行前測，將被80%受訪者填答「同意」或「不同意」的項(xiàng)目刪除。3.找100人以上受訪者進(jìn)行後測。4.整理後測回收資料，將彙總後的數(shù)據(jù)代入CR公式，以求出「複製係數(shù)」，假設(shè)CR值在0.8以上者，才可以說：「這些強(qiáng)烈程度題確實(shí)屬於同一構(gòu)面」。28整理課件6.6效度信度過低，則沒有效度效度過低，則信度沒有意義。三種效度：內(nèi)容效度、效標(biāo)關(guān)聯(lián)效度、及建構(gòu)效度。*29整理課件6.6.1內(nèi)容效度1.抽樣效度：量表所包含的項(xiàng)目是否能代表母體構(gòu)念的項(xiàng)目。內(nèi)容效度的上下，端賴項(xiàng)目取樣代表性之大小而定。2.外表效度：是指量表項(xiàng)目和形式上，給人的主觀印象，如果該量表從外表來看，似乎確實(shí)可適切地測量其欲測的特質(zhì)或行為，便稱它具有外表效度。30整理課件6.6.2效標(biāo)關(guān)聯(lián)效度又稱實(shí)用效度或?qū)嵲^效度，意指這種效度應(yīng)建立在實(shí)証資料之上。效標(biāo)關(guān)聯(lián)效度並不涉及構(gòu)念的問題。依據(jù)效標(biāo)不同，效標(biāo)關(guān)聯(lián)效度可分為同時(shí)效標(biāo)及預(yù)測效標(biāo)，兩者皆表示測量工具(分?jǐn)?shù))和效標(biāo)之間相關(guān)的程度。31整理課件1.同時(shí)效標(biāo)：是指測量工具與效標(biāo)同時(shí)存在。例如，以「口袋中零用錢」(屬測量工具)衡量受訪者的「所得」(屬效標(biāo))上下，假設(shè)兩者相關(guān)很高，則「同時(shí)效度」高。所謂「效標(biāo)」是用來顯示測量工具所欲測量(或預(yù)測)的特質(zhì)之獨(dú)立量數(shù)，以作為檢定效度的參考標(biāo)準(zhǔn)。32整理課件6.6.2效標(biāo)關(guān)聯(lián)效度2.預(yù)測效標(biāo)：是指測量工具出現(xiàn)在校標(biāo)之前。例如，研究者自編「成就測驗(yàn)」(量表)即可用預(yù)測兩年後研究生英文成績當(dāng)效標(biāo)，假設(shè)兩者相關(guān)很高，則表示該量表「預(yù)測效標(biāo)」高。33整理課件6.6.3建構(gòu)效度指「量表能測量理論上某概念或特質(zhì)的程度」，強(qiáng)調(diào)的是量表所衡量的是否能代表所要衡量的構(gòu)念。建構(gòu)效度有二類：收歛效度及區(qū)別效度34整理課件收歛(convergent)效度收歛效度是指來自相同構(gòu)念的這些項(xiàng)目，彼此之間相關(guān)性高。如假設(shè)要衡量相同的東西(筆試、口試)，則所得分?jǐn)?shù)(結(jié)果)應(yīng)相同(筆試與口試成績之相關(guān)要高)區(qū)別效度：是指來自不同構(gòu)念的項(xiàng)目，彼此之間相關(guān)性低。35整理課件效度之另ㄧ種分類1.測量效度：即測量工具的效度，指量表的有效性2.設(shè)計(jì)效度：分內(nèi)部效度及外部效度，指所測量到的變數(shù)關(guān)係是否有效(不受外生變數(shù)影響)3.分析效度：統(tǒng)計(jì)分析所發(fā)現(xiàn)的結(jié)果。4.推論效度：又稱外部效度，指結(jié)果可推論到母群的程度36整理課件6.6.6影響效度的因素1.樣本性質(zhì)：樣本多樣性、代表性愈高，測量工具效度就愈高。2.測驗(yàn)信度：假設(shè)信度太低，則效度亦低3.干擾變數(shù)：它是指存在於測驗(yàn)所欲測特質(zhì)及其效標(biāo)之外，但卻與兩者間具有某種相關(guān)程度的變數(shù)。例如，年齡層、性別、環(huán)境背景…等。*37整理課件6.信度信度(reliability)是指一個(gè)測量工具包含「變數(shù)誤差」的程度?！缸償?shù)誤差」即在任一次測量中，觀察值之間呈現(xiàn)之不一致、或採用相同測量工具，然而對(duì)特定單位施測，每次所得結(jié)果都不同。信度是指測量資料的可靠性，即一個(gè)測量工具在測量的「一致性」或「穩(wěn)定性」*38整理課件6.7.1信度種類1.等值性信度：又稱「複本法」，專門為檢定同一測驗(yàn)中不同複本上分?jǐn)?shù)的一致。(1)複本信度：不同研究者運(yùn)用同一量表，對(duì)不同一批的樣本施測，結(jié)果的一致性。(2)折半係數(shù)：將同一量表「項(xiàng)目內(nèi)容相似」，分成兩半(單數(shù)題、雙數(shù)題)，計(jì)算各半測驗(yàn)的總分之相關(guān)。39整理課件6.7.1信度種類2.穩(wěn)定性信度：對(duì)同一批樣本，前後二期測兩次，假設(shè)兩者的相關(guān)愈高，則表示該測驗(yàn)的穩(wěn)定係數(shù)愈高。3.一致性信度：旨在檢定某量表在各種不同層面的一致性。例如，量表單獨(dú)項(xiàng)目與總分是否一致性…等等。此種信度又可分成：折半信度、庫李信度、Cronbach’sα信度…等幾類*