效度的评估方法 心理咨询中简述测量信度,效度的含义,及几种常用评估方法

www.zhiqu.org     时间: 2024-06-17

(content-related validity)
一什么是内容效度
内容效度指的是测验题目对有关内容或行为取样的适用性,从而确定测验是否是所欲测量的行为领域的代表性取样。
二内容效度的评估方法
1.专家判断法; 2.统计分析法(评分者信度\复本信度\折半信度\再测法); 3.经验推测法 (实验检验)
三内容效度的特性
内容效度经常与表面效度(face validity)混淆。表面效度是由外行对测验作表面上的检查确定的,它不反映测验实际测量的东西,只是指测验表面上看来好像是测量所要测的东西;内容效度是由够资格的判断者(专家)详尽地、系统地对测验作评价而建立的。 (construct-related validity)
一什么是构想效度
指测验能够测量到理论上的构想或特质的程度,即测验的结果是否能证实或解释某一理论的假设、术语或构想,解释的程度如何。
二构想效度的估计方法
1.对测验本身的分析(用内容效度来验证构想效度)
2.测验间的相互比较:相容效度(与已成熟的相同测验间的比较)、区分效度(与近似或应区分测验间的比较)、因素分析法
3.效标效度的研究证明
4.实验法和观察法证实 (criterion-related validity)
效标,即衡量测验有效性的参照标准,指的是可以直接而且独立测量的我们感兴趣的行为。我们感兴趣的行为,就是要预测的行为,这是一个总的观念,故必须以可操作的测量来确定才有实际意义。因此有必要把效标细分为两个层次,其一是理论水平的“观念效标”,其二是操作定义水平的“效标测量”。
效标效度又称实证效度,反映的是测验预测个体在某种情境下行为表现的有效性程度。
根据效标资料是否与测验分数同时获得,又可分为同时效度(实际士气高和士气低的人在士气测验中的得分一致性。)和预测效度两类。
常用的效标包括
1、学业成就:如在校成绩、学历、有关的奖励和荣誉、教师对学生智力的评定等,常作为智力测验的效标,也可作为某些多重能力倾向测验和人格测验的效标;
2、实际工作表现:是最满意的效标测量,为一般智力测验、人格测验和一些能力倾向测验的效标;
3、特殊训练成绩;
4、精神病诊断;
5、等级评定:是观察者根据测验欲测量的心理特质在被试身上的表现而作出的一种个人判断;
6、效标团体的比较:即找出两个在效标表现上有差别的团体,比较他们在测验分数上的差别;
7、先前有效的测验:一个新测验与先前有效的测验的相关也经常作为效度检验的证据。
一个好的效标必须具备以下条件:
①效标必须能最有效地反映测验的目标,即效标测量本身必须有效;
②效标必须具有较高的信度,稳定可靠,不随时间等因素而变化;
③效标可以客观地加以测量,可用数据或等级来表示;
④效标测量的方法简单,省时省力,经济实用。
效标效度的评估方法
1.相关法:效度系数是最常用的效度指标,尤其是效标效度。它是以皮尔逊积差相关系数来表示的,主要反映测验分数与效标测量的相关。当测验成绩是连续变量,而效标资料是二分变量时,计算效度系数可用点二列相关公式或二列相关公式;当测验分数为连续变量,效标资料为等级评定时,可用贾斯朋多系列相关公式计算。
2.区分法:是检验测验分数能否有效地区分由效标所定义的团体的一种方法。算出t值后,便可知道分数的差异是否显著。若差异显著,说明该测验能够有效地区分由效标定义的团体,否则,测验是无效的。重叠百分比可以通过计算每一组内得分超过(或低于)另一组平均数的人数百分比得出;另外,还可以计算两组分布的共同区的百分比。重叠量越大,说明两组分数差异越小,即测验的效度越差。
3.命中率法:是当测验用来做取舍的依据时,用其正确决定的比例作为效度指标的一种方法。命中率的计算有两种方法,一是计算总命中率,另一种是计算正命中率。
4、预期表法:是一种双向表格,预测分数排在表的左边,效标排在表的顶端。从左下至右上对角线上各百分数字越大,而其它的百分数字越小,表示测验的效标效度越高 ;反之,数字越分散,则效度越低。



什么是心理学中内容效度的评估方法?~

内容效度的评估方法是指评估内容效度的方法,它包括:

1、专家判断法

– 定义好测验内容的总体范围;

– 编制双向细目表,确定内容的具体细节各自所占的比例;

– 由每位评判者在评定量表上作出判断。

2、统计分析法

– 计算两个评分者之间评定的一致性(评分者信度)

– 两个测验复本上得分之相关(复本信度)

– 再测法也可用于内容效度的评估(测验-学习-再测验)

3、经验推测法

– 这种效度是通过实践来检验效度

【影响信度的因素】
  影响信度的因素很多,被试、主试、测验内容、施测环境等各方面均能引起随机误差,导致分数不一致,从而降低测验的信度。下面介绍几个影响测验信度系数的重要因素。
  (一)被试的样本
  影响信度估计的一个重要因素是被试样本的情况。
  团体的异质程度与分数的分布有关,一个团体越是异质,其分数分布的范围也就越大,信度系数也就越高。
  由于信度系数与样本团体的异质性有关,因此我们在使用测验时,不能认为当该测验在一个团体中有较高的信度时,在另一个团体中也具有较高的信度。此时,往往需要重新确定测量的信度。
  经研究表明,信度系数不仅受样本团体的异质程度的影响,也受样本团体平均水平的影响。因为对于不同水平的团体,项目具有不同的难度,每个项目在难度上的变化累积起来便会影响信度。但是,这种影响不能用统计公式来推估,只能从经验中发现。
  (二)测验的长度
  一般来说,测验越长,信度值越高。这是因为:
  ①测验加长,可能改进项目取样的代表性,从而能更好地反映受测者的真实水平;
  ②测验的项目越多,在每个项目上的随机误差就可以互相抵消。
  (三)测验的难度
  测验的难度与信度没有直接对应关系,但是当测验太难或太易时,则分数的范围就会缩小,从而降低信度。显然只有当测验难度水平可以使测验分数的分布范围最大时,测验的信度才会最高,通常这个难度水平为0.50。
  当题目过难时,被试可能凭猜测作答,从而也会降低信度。
  【影响效度的因素】
  影响测验效度的因素很多,除了前面介绍的影响信度的因素以外,测验本身、测验的实施和被试等都会对效度产生影响。其中有些因素的影响较为普遍且明显,有些因素的影响却不易察觉。
  (一)测验本身
  1.项目质量
  测验的指导语和试题的解答说明不明确,试题的编制不符合测量目的,试题难度不合适,试题的编排不合理,试题提供了额外线索,选择题的答案排列具有明显的规律性等,都会影响测验的效度。
  2.项目数量
  增加测验的长度不但能提高测验的信度,在一定程度上也能提高测验的效度。
  (二)测验的实施
  在施测时不遵照指导语,被试作弊,测验环境太差,评分标准不客观,记分错误等等,都会影响测验的效度。
  (三)被试
  1.身心状态
  被试的兴趣、动机、情绪、态度、反应心向和身体状况等都会影响被试的反应,从而影响测验的效度。
  2.样本特点
  测验的效度和样本团体的特点具有很大的关系。同一个测验对于不同的样本团体其效度有很大的不同,因此在作效度分析时,必须选具有代表性的被试团体。
  样本团体的异质性对于测验效度是非常重要的。如果其他条件相同,样本团体越同质,分数分布范围越小,测验效度就越低;样本团体越异质,分数分布范围越大,测验效度就越高。
  (四)效标
  效标测量的可靠性以及效标和测验分数的关系类型也会影响效度。
  总之,所有与测量目的无关而又能带来误差的因素都会降低测验的效度。


#鄂郝贩# 分析构思效度时,可以采用的测验间比较方法有哪些?
(19168849562): 构思效度的评估方法除了对测验本 身的分析外,还可以借助测验间的相互比较的方法,常用的方法有相容效度(与已有成熟测验的相关)与 区分效度(与无关的测验不相关).因素分析法虽然也是建立构思效度的常用方法,但是它是通过对一组 测验进行因素分析,找出影响测验分数的共同因素,然后与最初设想的因素相比较,从而对构思效度进行 验证的方法,该法并不是测验间的比较方法.内容效度是指测验题目对有关内容或行为取样的适用性,从 而确定测验是否是所欲测量的行为领域的代表性取样.由于这种效度和测验的内容相关,所以又被称为内容效度.

#鄂郝贩# 什么是效度检验? -
(19168849562): 检验效度的方法有: (1)内容效度 内容效度也称表面效度或逻辑效度,是指测量目标与测量内容之间的适合性与相符性.一个测量要具备较好的内容效度必须满足两个条件:一是确定好内容范围,并使测量的全部项目均在此范围内.二是测量...

#鄂郝贩# 用SPSS进行效度分析? -
(19168849562): 相关分析是指两个变量之间是否存在相互依存的关系,比如学生的语文成绩和历史成绩之间是否存在正向的相互依存的关系,即是否学生语文成绩越好,历史成绩也会越好.相关分析是回归分析的前提条件,在具体的研究中只有变量之间相关显...

#鄂郝贩# 工作分析方法的效度? -
(19168849562): 效度(Validity)即有效性,它是指测量工具或手段能够准确测出所需测量的事物的程度.效度是指所测量到的结果反映所想要考察内容的程度,测量结果与要考察的内容越吻合,则效度越高;反之,则效度越低.效度分为三种类型:内容效度、准则效度和结构效度.

#鄂郝贩# 如何用spss分析一个量表的效度? -
(19168849562): 相信你也知道,效度是指,测量工具能确切测得其所欲测量的特质之程度,它的测定大体可以分为内容效度(表面效度)、准则效度(效标效度)和建构效度三种. 例如,你除了手头上的量表,还同时用了其他的测量方法(methods)测量量表...

#鄂郝贩# 几种常用培训效果评估方法的比较分析 -
(19168849562): 摘 要:本文对几种常用培训效果评估方法进行了归纳整合、比较分析,希望能够对企业选择适合自己的评估方法有所借鉴.

#鄂郝贩# 影响实验和测量的信度和效度的主要因素有哪些 -
(19168849562): 影响实验和测量的信度和效度的主要因素: 1,评价的不同定义: 信度是评价工具质量的重要指标,主要是指测试结果的一致性;效度是指测试或测量工具能够对被测事物进行真实测量的程度. 2,估计的对象不同: 有效性是对测量精度的估...

#鄂郝贩# 什么叫信度分析和效度分析? -
(19168849562): 信度分析,它是指采用同样的方法对同一对象重复测量时所得结果的一致性程度.信度指标多以相关系数表示,大致可分为三类:稳定系数(跨时间的一致性),等值系数(跨形式的一致性)和内在一致性系数(跨项目的一致性).效度分析,...