信度效度評價

1、2021/3/101 信度效度評價 2021/3/102 信度評價信度評價 問卷的信度是指問卷的穩(wěn)定性和可靠性，主要有三種信度：問卷的信度是指問卷的穩(wěn)定性和可靠性，主要有三種信度： 1 1、重復信度、重復信度(testretest reliability)(testretest reliability)， 2 2、內部信度、內部信度(internal reliability)(internal reliability) 3 3、觀察者之間的信度、觀察者之間的信度(inter-rater reliability)(inter-rater reliability)。 國外用問卷進行的研究，通常對問

2、卷的重復信度和內部信國外用問卷進行的研究，通常對問卷的重復信度和內部信 度分析較多。我們著重說明前兩者。度分析較多。我們著重說明前兩者。 2021/3/103 一、重復信度 1 1、理論知識：、理論知識： 用同一問卷對相同對象進行兩次測量，如果兩次用同一問卷對相同對象進行兩次測量，如果兩次 測量結果的一致性很好。則問卷的重復信度好。測量結果的一致性很好。則問卷的重復信度好。 兩次測量的時間間隔視具體情況而定，一般為兩次測量的時間間隔視具體情況而定，一般為2 2 4 4周，樣本量通常為周，樣本量通常為20203030人。人。 當評估的變量是分類變量用當評估的變量是分類變量用KappaKappa系

3、數(shù)來評估重系數(shù)來評估重 復信度一般來說，復信度一般來說，KappaKappa系數(shù)大于系數(shù)大于0 07575表示重表示重 復信度很好，在復信度很好，在0 04 40 07575表示較好，而低于表示較好，而低于 0 04 4表示較差。表示較差。 如果是連續(xù)變量或等級變量，則用內部相關系數(shù)如果是連續(xù)變量或等級變量，則用內部相關系數(shù) (icc)(icc)來評價，一般來說，來評價，一般來說，ICCICC大于大于0 07575表示極好，表示極好， ICCICC在在0 06 6到到0 07575表示較好。表示較好。 2021/3/104 分析：分析： （1 1）本問卷數(shù)據(jù)為等級數(shù)據(jù)，故選用）本問卷數(shù)據(jù)為等級

4、數(shù)據(jù)，故選用ICCICC內部相關系數(shù)來內部相關系數(shù)來 評價，在評價，在SASSAS中調用中調用proc corrproc corr過程。過程。 （2 2）因為在進行相關分析前，需檢驗數(shù)據(jù)的正態(tài)性，如）因為在進行相關分析前，需檢驗數(shù)據(jù)的正態(tài)性，如 果數(shù)據(jù)滿足正態(tài)性，用果數(shù)據(jù)滿足正態(tài)性，用 Pearson Pearson 積距積距 相相 關關 系系 數(shù)；數(shù)； 否則用否則用 Spearman Spearman 等級相關等級相關 系數(shù)。本問卷數(shù)據(jù)為等級資料，故系數(shù)。本問卷數(shù)據(jù)為等級資料，故 選用選用Spearman Spearman 等級相關等級相關 系數(shù)。系數(shù)。 2021/3/105 2 2、SAS

5、SAS實現(xiàn)實現(xiàn) （1 1）先對數(shù)據(jù)進行處理，保存為）先對數(shù)據(jù)進行處理，保存為csvcsv格式格式 （2 2）data a;data a; infile e:aa.csv dsd firstobs=2; /infile e:aa.csv dsd firstobs=2; /* *從第二行開始導入數(shù)據(jù)從第二行開始導入數(shù)據(jù)* */ / input x1-x50 rx1-rx50; /input x1-x50 rx1-rx50; /* *第一次測量變量與第二次測量變量第一次測量變量與第二次測量變量* */ / proc print;proc print; run;run; %macro %macro c

6、orr1corr1; /; /* *定義一個叫定義一個叫corr1corr1的宏，進行相關分析的宏，進行相關分析* */ / %do i=1 %to 50;%do i=1 %to 50; / /* *開始循環(huán)語句開始循環(huán)語句* */ / ods output spearmancorr=r_sprods output spearmancorr=r_spr run;run; proc corr data=a spearman; /proc corr data=a spearman; /* *使用使用spearmanspearman相關系數(shù)相關系數(shù)* */ / var xvar x run;run;

7、 %end;%end; %mend corr1;%mend corr1; % %corr1corr1; ; 2021/3/106 3、結果解釋 P0.0001，我們有理由認為，我們有理由認為x1與與rx1相關，相關系數(shù)相關，相關系數(shù) 0.451340 0. .8 8表示內部一致性極好，表示內部一致性極好， 在在0 0. .6 6到到0 0. .8 8表示較好表示較好, ,而低于而低于0 0. .6 6表示內部一致性較差表示內部一致性較差。 2021/3/109 分析：在分析：在SASSAS軟件中，軟件中， 系數(shù)調用系數(shù)調用PROC CORRPROC CORR過程計算，只要在選擇項過程計算，只要

8、在選擇項 加上參數(shù)加上參數(shù)alphaalpha即可。即可。 步驟如下：首先計算反映某一分量表所有條目的步驟如下：首先計算反映某一分量表所有條目的 系數(shù)，然后逐一去掉某一條目后再計算系數(shù)，然后逐一去掉某一條目后再計算 系數(shù)，如果系數(shù)，如果 系數(shù)系數(shù) 值因去掉該條目而增大則考慮把該條目從分量表刪除。值因去掉該條目而增大則考慮把該條目從分量表刪除。 2021/3/1010 2 2、SASSAS實現(xiàn)實現(xiàn) （1 1）先對數(shù)據(jù)進行處理，保存為）先對數(shù)據(jù)進行處理，保存為csvcsv格式格式 （2 2）data b;data b; infile e:TCM.csv dsd firstobs=2;infile

9、e:TCM.csv dsd firstobs=2; input A1-A10 B1-B4 C1-C2 D1-D5 E1-E4 F1-F2 G1-G3 input A1-A10 B1-B4 C1-C2 D1-D5 E1-E4 F1-F2 G1-G3 H1-H5 I1 J1-J32 K1-K7 L1-L6 M1-M5H1-H5 I1 J1-J32 K1-K7 L1-L6 M1-M5 N1-N3 O1-O3 P1-P3 Q1-Q3 R1-R3 S1-S5 T1-T5 U1-U5 N1-N3 O1-O3 P1-P3 Q1-Q3 R1-R3 S1-S5 T1-T5 U1-U5 V1-V4 W1-W5 X

10、1-X4 Y1-Y4 ;V1-V4 W1-W5 X1-X4 Y1-Y4 ; proc print;proc print; run;run; proc corr data=b alpha ; /proc corr data=b alpha ; /* *對第一個分量表進行分析對第一個分量表進行分析 * */ / var A1-A10;var A1-A10; run;run; 2021/3/1011 proc corr data=b alpha;proc corr data=b alpha; var B1-B4; /var B1-B4; /* *同上一個分量表的操作同上一個分量表的操作* */ /

11、run;run; proc corr data=b alpha;proc corr data=b alpha; var C1-C2;var C1-C2; run;run; （下面的分量表同理）（下面的分量表同理） 2021/3/1012 生理機能條目中A1，A9，A10應該刪除，即是問卷 中A301，A309，A310應該刪除。 2021/3/1013 生理職能的所有條目都應該保留，即問卷中A401，A402， A403，A404都保留。 2021/3/1014 軀體疼痛的所有條目都應該 保留，即A701，A801應該保 留。 一般健康狀況的條目中D1應 該刪除，即問卷中A101應該 刪除，其

12、余保留。 2021/3/1015 精力的條目中E1應該刪除， 即A901應該刪除，其余保留。 社會功能的所有條目都應該保留 2021/3/1016 情感職能的所有條目應該保留 精神健康的條目中，H5應該刪 除，即A908應該刪除。 2021/3/1017 軀體維度的條目中，J4，J5 和J6應該刪除，即B104， B105和B106應該刪除，其 余保留。 2021/3/1018 心理維度的條目中，K1應該刪 除，即B301應該刪除，其余 保留。 自然維度的條目中，L1應該 刪除，即B401應該刪除，其 余保留。 2021/3/1019 社會維度的所有條目都應該保留。 精氣神的條目中，N3應該刪

13、除， 即B301應該刪除，其余保留。 2021/3/1020 睡眠的條目中，O3應該刪除， 即B105應該刪除，其余保留。 飲食的條目中，P1應該刪除，即 B106應該刪除，其余保留。 2021/3/1021 大便的條目中，Q1應該刪除， 即B109應該刪除，其余保留。 小便的條目中，R3應該刪除，即 B1014應該刪除，其余保留。 2021/3/1022 氣虛的條目中，S1應該刪除， 即B102應該刪除，其余保留。 陽虛的條目中，T1應該刪除， 即B1010應該刪除，其余保 留。 2021/3/1023 陰虛的條目中，U4應該刪除，即 B403應該刪除，其余保留。 濕熱的所有條目都保留 20

14、21/3/1024 痰濕的條目中，W1和W2應該 刪除，即B104和B105應該刪除， 其余保留。 血瘀的條目中，X4應該刪除， 即B201應該刪除，其余保留。 2021/3/1025 氣郁的條目中，Y3應該刪除，即B305應該刪除，其余保留。 2021/3/1026 效度評價效度評價 問卷的效度是指問卷測量的正確性和有效性，主要有表面問卷的效度是指問卷測量的正確性和有效性，主要有表面 效度、內容效度、準則效度和結構效度等效度、內容效度、準則效度和結構效度等 （1 1）表面效度）表面效度 表面效度是指條目書面表達的意思是否為真正要測定的內表面效度是指條目書面表達的意思是否為真正要測定的內 容，

15、這是一個主觀指標，常由專家評閱確定。有時為了避容，這是一個主觀指標，常由專家評閱確定。有時為了避 免應答者回答的免應答者回答的“社會期望偏倚社會期望偏倚”，獲得真正的信息，常，獲得真正的信息，常 需要掩飾條目的真正目的，這時就要犧牲表面效度而提高需要掩飾條目的真正目的，這時就要犧牲表面效度而提高 其他效度。其他效度。 2021/3/1027 （2 2）內容效度）內容效度 內容效度是指組成量表的條目是否包括了想要測量的內容的各個方面，內容效度是指組成量表的條目是否包括了想要測量的內容的各個方面， 如果包括了各個方面，則內容效度較好。與表面效度一樣，內容效度如果包括了各個方面，則內容效度較好。與表

16、面效度一樣，內容效度 也是一個主觀指標。也是一個主觀指標。 （3 3）準則效度）準則效度 準則效度是指問卷測量結果與準則效度是指問卷測量結果與“金標準金標準”測量結果的一致性程度。分測量結果的一致性程度。分 析準則效度的析準則效度的通常做法是對問卷測量結果與通常做法是對問卷測量結果與“金標準金標準”測量結果進行測量結果進行 相關分析相關分析, ,，相關系數(shù)越大證明準則效度越好，一般認為相關系數(shù)在，相關系數(shù)越大證明準則效度越好，一般認為相關系數(shù)在 0.40.80.40.8比較理想。比較理想。 （4 4）結構效度是指問卷是否含有理論上期望的特征，包括以下幾個）結構效度是指問卷是否含有理論上期望的特

17、征，包括以下幾個 方面：問卷測量結果與理論上測量結果的平行程度；問卷評價的方面：問卷測量結果與理論上測量結果的平行程度；問卷評價的 現(xiàn)象與其他現(xiàn)象的獨立性；問卷結果是否符合該問卷要評價現(xiàn)象的現(xiàn)象與其他現(xiàn)象的獨立性；問卷結果是否符合該問卷要評價現(xiàn)象的 有關理論預測。有關理論預測。 評價問卷結構效度常用的方法是因子分析，因子分析的目的是評價問卷結構效度常用的方法是因子分析，因子分析的目的是 想了解屬于某二級量表的條目是否如預測那樣集中在一個因子里。做想了解屬于某二級量表的條目是否如預測那樣集中在一個因子里。做 因子分析時，預測因子的數(shù)目需事先確定，然后再與因子分析的因子因子分析時，預測因子的數(shù)目需

18、事先確定，然后再與因子分析的因子 數(shù)目比較，一般而言，如量表的公因子能解釋數(shù)目比較，一般而言，如量表的公因子能解釋50%50%以上的變異，而且以上的變異，而且 每個條目在相應的因子上有足夠強度的負荷（大于等于每個條目在相應的因子上有足夠強度的負荷（大于等于0.40.4），則認），則認 為該量表具有較好的結構效度。為該量表具有較好的結構效度。 2021/3/1028 結構效度構編程如下： data b; infile e:TCM.csv dsd firstobs=2; input A1-A10 B1-B4 C1-C2 D1-D5 E1-E4 F1-F2 G1-G3 H1-H5 I1 J1-J32

19、 K1-K7 L1-L6 M1-M5 N1-N3 O1-O3 P1-P3 Q1-Q3 R1- R3 S1-S5 T1-T5 U1-U5 V1-V4 W1-W5 X1-X4 Y1-Y4; proc print; run; proc factor M=PRIN PRIORS=ONE R=V SCORE; var A1-A10; run; 2021/3/1029 編程編程proc factor M=PRIN PRIORS=ONE R=V SCOREproc factor M=PRIN PRIORS=ONE R=V SCORE的解釋的解釋 分析：分析： 1 1、提取初始公因子的主要方法：即在選擇項、提

20、取初始公因子的主要方法：即在選擇項METHOD=METHOD=或或M=M=后填后填1 1個選擇項個選擇項 PRINCIPALPRINCIPAL：主成分分析方法：主成分分析方法 PRINITPRINIT：迭代主因子分析：迭代主因子分析 2 2、始各變量的公因子方差、始各變量的公因子方差h2h2賦初值，即在賦初值，即在PRIORS=PRIORS=后填后填1 1個選擇項，中括號內為個選擇項，中括號內為 縮寫形式，通常在用主成分分析方法時，才讓縮寫形式，通常在用主成分分析方法時，才讓PRIORS=ONEPRIORS=ONE。 3 3、規(guī)定因子軸的旋轉方法：即在選擇項、規(guī)定因子軸的旋轉方法：即在選擇項P

21、OTATE=POTATE=或或R=R=后填后填1 1個選擇項：個選擇項： VARIMAXVVARIMAXV：最大方差旋轉法。：最大方差旋轉法。 4 4、SCORESCORE表示要求算出因子得分模型中的系數(shù)。表示要求算出因子得分模型中的系數(shù)。 2021/3/1030 結果如下： 1、前兩個特征值、前兩個特征值3.58819419,1.04773532都大于都大于1，將根據(jù)這兩個較大的特征值提取，將根據(jù)這兩個較大的特征值提取 兩個相應的初始公因子。兩個相應的初始公因子。 2、由上累積貢獻率可知，前、由上累積貢獻率可知，前5個因子已經(jīng)可以解釋個因子已經(jīng)可以解釋86.91%的方差。的方差。 2021/

22、3/1031 結論：結論： 經(jīng)最大方差旋轉法旋轉后的前經(jīng)最大方差旋轉法旋轉后的前5個的個的 因子模型為：因子模型為： x1=0.0295F1+0.74900F2 x2=0.75428F1+0.35016F2 x3=0.82331F1+0.13716F2 x4=0.13099F1+0.63639F2 x5=0.73143F1+0.05453F2 從旋轉后的因子模型來看，第一公因子從旋轉后的因子模型來看，第一公因子 支配著支配著x2,x3,x5,第二公因子支配著第二公因子支配著 x1,x4。第一公因子反映，可稱為，。第一公因子反映，可稱為， 第二公因子反映，可稱為第二公因子反映，可稱為 各公因子包

23、含的因子載荷較大的條目有各公因子包含的因子載荷較大的條目有 足夠的強度的負荷（大于足夠的強度的負荷（大于0.4），說明該），說明該 調查表有較好的結構效度。調查表有較好的結構效度。 2021/3/1032 問卷的內容效度檢驗問卷的內容效度檢驗 :內容效度是指問卷各條目是否測定其內容效度是指問卷各條目是否測定其 希望測量的內容。希望測量的內容。 內容效度可以用反映同一內容范圍的兩個不同測驗，對同內容效度可以用反映同一內容范圍的兩個不同測驗，對同 一組被試施測結果的相關系數(shù)來表示。若相關高，表明內一組被試施測結果的相關系數(shù)來表示。若相關高，表明內 容效度高，若相關低，表明內容效度低。容效度高，若相

24、關低，表明內容效度低。 因此，我們從以下三個方面去評價內容效度。因此，我們從以下三個方面去評價內容效度。 一、從軀體感受、心理狀態(tài)、自然的適應能力、社會的適一、從軀體感受、心理狀態(tài)、自然的適應能力、社會的適 應能力等四個維度進行評價應能力等四個維度進行評價 二、從精氣神、睡眠、飲食、二便、氣血津液功能狀態(tài)的二、從精氣神、睡眠、飲食、二便、氣血津液功能狀態(tài)的 維度進行評價維度進行評價 三、從三、從陰陽氣血津液功能狀態(tài)的陰陽氣血津液功能狀態(tài)的維度去維度去評價評價。 因為各維度下又有不同數(shù)量的條目，因此我們對每個維度因為各維度下又有不同數(shù)量的條目，因此我們對每個維度 每個觀測者所有條目算出總分，并按

25、照事先確定的評定方每個觀測者所有條目算出總分，并按照事先確定的評定方 法劃分不同的等級，用法劃分不同的等級，用spearman秩相關來描述各個維度秩相關來描述各個維度 之間的相關關系，從而評價問卷的內容效度。之間的相關關系，從而評價問卷的內容效度。 2021/3/1033 注意：注意：a1數(shù)據(jù)文件事先已被導入數(shù)據(jù)文件事先已被導入SAS中的中的work文文 件夾里，命名為件夾里，命名為a1 proc print data=a1; run; ods html; proc corr spearman; var shenti xinli ziran shehui; run; proc corr spearman; var jingqishen shuimian yinshi dabian xiaobian; run; proc corr spearman; var qixu yangxu yinxu shire tanshi xueyu qiyu; run; ods html close; 編程如下編程如下： 2021/3/1034 結果如下： 1)對問卷軀體對問卷軀體 、心理、心理 、自然、自然 、 社會社會 4 個維度的相關系數(shù)檢驗個維度的相關系數(shù)檢驗