信度与效度(ReliabilityandValidity)
信度(Reliability)
信度(Reliability)即可靠性,它是指采用同样的方法对同一对象重复测量时所得结果的一致性程度。信度指标多以相关系数表示,在实际应用中,信度的估计和分析是从几个方面根据不同的情况分别处理的,大致可分为三类:即从稳定性(stability)、内在一致性(internal consistency)和等价性(equivalency)三个方面来分析测量的信度。信度分析的方法主要有以下四种:
1、重测信度法
这一方法是用同样的问卷对同一组被调查者间隔一定时间重复施测,计算两次施测结果的相关系数。显然,重测信度属于稳定系数。重测信度法特别适用于事实式问卷,如性别、出生年月等在两次施测中不应有任何差异,大多数被调查者的兴趣、爱好、习惯等在短时间内也不会有十分明显的变化。如果没有突发事件导致被调查者的态度、意见突变,这种方法也适用于态度、意见式问卷。由于重测信度法需要对同一样本试测两次,被调查者容易受到各种事件、活动和他人的影响,而且间隔时间长短也有一定限制,因此在实施中有一定困难。
2、复本信度法
复本信度法是让同一组被调查者一次填答两份问卷复本,计算两个复本的相关系数。复本信度属于等值系数。复本信度法要求两个复本除表述方式不同外,在内容、格式、难度和对应题项的提问方向等方面要完全一致,而在实际调查中,很难使调查问卷达到这种
要求,因此采用这种方法者较少。
3、折半信度法
折半信度法是将调查项目分为两半,计算两半得分的相关系数,进而估计整个量表的信度。折半信度属于内在一致性系数,测量的是两半题项得分间的一致性。这种方法一般不适用于事实式问卷(如年龄与性别无法相比),常用于态度、意见式问卷的信度分析。
4、α信度系数法
Cronbach α信度系数是目前最常用的信度系数,评价的是量表中各题项得分间的一致性,属于内在一致性系数。这种方法适用于态度、意见式问卷(量表)的信度分析。
效度(Validity)
效度(validity)告诉研究者,所测量的是不是他/她所想要的,在多大程度上给出了他/她所想要的。这里可能包括测量的对象是否为所预期的,变量的操作性定义是否能反映原始的基本定义,等等。效度主要有三种类型:内容效度(Content Validity)、构想效度(Construct Validity)和效标效度(Criterion Validity)。
一、内容效度(Content Validity)
内容是效度用最简单的也是最基本的主观判断的方法,一般根据测量量表所选的题项,仅从表面上来观察判断其是否能够代表想要测量的内容或主题。为了得到高效度的量表,通常需要尽量收集和阅读与测量内容有关的资料、以及相关的以往的研究报告,以便所设
计的量表题项能较好地覆盖有关内容的各个方面。内容效度的评估方法有:
1、专家判断法;
由够资格的判断者(专家)详尽地、系统地对测验作评价而建立的。
2、统计分析法(评分者信度\\复本信度\\折半信度\\再测法);
3、经验推测法 (实验检验)
也叫表面效度(Face Validity),由外行被对测验者对测验表做出表面上的检查确定,它不反映测验实际测量的东西,只是指测验表面上看来好像是测量所要测的东西。
二、构想效度(Construct Validity)
构想效度主要用于评价量表测量的结果是否与理论假设或理论框架相关。研究者在设计测量量表时,一般都是从所研究问题的理论框架出发,假设某种构想存在,然后按照这种构想来具体设计提问的题项从而形成量表。如果所用的量表的确能测出真正的构想,则说明该量表具有较高的构想效度。构想效度的分析有时还有另一层的意义,就是评价量表中的各个题项能否有效地区分研究对象。构想效度的估计方法:
1、对测验本身的分析(用内容效度来验证构想效度)
2、测验间的相互比较:相容效度(与已成熟的相同测验间的比较)、区分效度或项目分析法(与近似或应区分测验间的比较)、因子分析法
3、效标效度的研究证明
4、实验法和观察法证实
三、效标效度(Criterion Validity)
效标效度,又称实证效度、效标关联效度或独立标准效度,反映的是测验预测个体在某种情境下行为表现的有效性程度。所谓效标就是一个与量表有密切关联的独立标准,将量表所测特性看成因变量,将效标看成自变量,所测特性与效标密切相关的量表才是有效的量表。根据研究的目的、或根据获取量表测量结果和效标测量结果的先后顺序,效标效度有时也可以分类为“预测效度”(Predictive Validity)和“协同效度”(Concurrent Validity)。效标效度分析的方法是考察所测特性(因变量)与效标(自变量)是否有显著的相关;或是对效标(自变量)的不同取值,特性(因变量)的值是否表现出显著的差异。
效标的确定并不是一件容易的事,选择效标一般要根据某种已知的理论、或某种已经得到肯定的结论。一个好的效标必须具备以下条件:
①效标必须能最有效地反映测验的目标,即效标测量本身必须有效;
②效标必须具有较高的信度,稳定可靠,不随时间等因素而变化;
③效标可以客观地加以测量,可用数据或等级来表示;
④效标测量的方法简单,省时省力,经济实用。
效标效度的评估方法
1.相关法:效度系数是最常用的效度指标,尤其是效标效度。它是以皮尔逊积差相关系数来表示的,主要反映测验分数与效标测量的相关。
2.区分法:是检验测验分数能否有效地区分由效标所定义的团体的一种方法。算出t值后,便可知道分数的差异是否显著。若差异显著,说明该测验能够有效地区分由效标定义的团体,否则,测验是无效的。
3.命中率法:是当测验用来做取舍的依据时,用其正确决定的比例作为效度指标的一种方法。
4、预期表法:是一种双向表格,预测分数排在表的左边,效标排在表的顶端。从左下至右上对角线上各百分数字越大,而其它的百分数字越小,表示测验的效标效度越高 ;反之,数字越分散,则效度越低。
信度和效度的关系
从信度和效度的定义中可以看到,信度与效度有一定的关系:信度高的测量,其效度不一定高;但是效度高的测量,其信度必定也高。
因篇幅问题不能全部显示,请点此查看更多更全内容