量表的制定和信效度分析
一、量表制定-专家咨询法(德尔菲法)
专家积极系数:反映专家的积极性,及专家对该研究问题的关心、合作程度,用每轮问卷的回收率来表示。
专家权威度:专家权威程度由专家作出判断的依据以及对问题的熟悉程度两个因素决定。权威程度为判断系数(Cs)与熟悉程度系数(Ca)的算术平均值。计算公式:Cr=(Ca+Cs)/2。
专家协调系数: Kendall协调系数W检验,常用于两因素设计资料的一致性检验,属于一种非参数检验方法。也就是由m个打分者对n个观察项目或指标进行评分,然后检验m个评判员的打分结果是否具有一致性。 协调系数W在0—1之间,W越大,表示协调程度越好,一般在0.5的范围内波动。
Kendall协调系数的求法:
结果如下:
二、量表的信效度分析
1、信度分析
信度指调查表测量结果的可靠性、稳定性和一致性,即精确度。一般认为信度反映测量误差或观察误差也即随机误差引起的变异程度。
常用指标:
内部一致性信度 通常用克伦巴赫 系数(Cronbach’s alpha)表示,它取值在0到1之间,其值越大,信度越高。一般认为Cronbach’s alpha应达到0.7以上。
重测信度:用同一调查表在不同时间对同一组调查对象进行重复测量,两次结果间的一致性即重测信度。
分半信度:在一次测量后将条目分为相等但独立的两部分,如分前后两个部分、按提问项目号的奇数和偶数分两个部分。计算两个部分的得分的简单相关系数r,作为信度指标
2、效度分析
效度主要评价量表的准确度、有效性和正确性,即测定值与目标真实值的偏差大小。效度意在反映某测量工具是否有效地测定到了它打算测定的内容,即实际测定结果与预想结果的符合程度。
常用指标:
内容效度:内容效度的评价主要通过主观经验判断一般通过专家评议打分。或者对各个维度的内部相关性进行分析,同时比较各维度与总体的相关性。
效标效度 效标效度分析是根据已经得到确定的某种理论,选择一种指标或测量工具作为准则(效标),分析问卷题项与准则的联系,若二者相关显著,或者问卷题项对准则的不同取值、特性表现出显著差异,则为有效的题项。评价准则效度的方法是相关分析或差异显著性检验。在调查问卷的效度分析中,选择一个合适的准则往往十分困难,使这种方法的应用受到一定限制。
结构效度 又称构想效度,说明量表的结构是否与制表的理论设想相符,测量结果的各内在成分是否与设计者打算测量的领域一致,结构效度主要用探索性因素分析和验证性因子分析评价。
(1) 探索性因素分析:主成分分析
(2)验证性因素分析:结构方程模型(Mplus)
DATA: FILE IS E:\2.txt;
VARIABLE: NAMES ARE y1-y42;
MODEL: f1 BY y1-y5 ;
f2 BY y6-y17;
f3 by y18-y22;
f4 by y23-y30;
f5 by y31-y35;
f6 by y36-y42;
OUTPUT: tech4;