如何直观理解信度、效度及两者关系?

您所在的位置:网站首页 sds量表的信度和效度 如何直观理解信度、效度及两者关系?

如何直观理解信度、效度及两者关系?

2023-03-26 01:37| 来源: 网络整理| 查看: 265

信效度是衡量一份问卷测试结果的准确性和稳定性的依据。问卷设计完成之后到分析结束,一般要经过两次信效度分析。一次是预调查时,一次是正式分析。

一、信度

信度分析用于测量样本回答结果是否可靠,即样本有没有真实作答量表类题项(重要提示:信度分析仅仅是针对量表数据,非量表数据一般不进行信度分析);信度分析仅针对定量数据. 克隆巴赫信度系数(Cronbach α系数值,下同)如果在0.8以上,则该测验或量表的信度非常好;信度系数在0.7以上都是可以接受;如果在0.6以上,则该量表应进行修订,但仍不失其价值;如果低于0.6,量表就需要重新设计题项。

二、效度

效度用于测量题项(定量数据)设计是否合理,通过因子分析(探索性因子分析)方法进行验证;研究人员心中预期着变量与题项对应关系;进行因子分析后,因子(即变量,使用因子分析时称因子)与题项对应关系;二者预期基本一致时,则说明具有良好效度水平.正常情况下,效度分析仅仅针对量表数据,非量表题目比如多选,单选性别之类的题目不能进行效度分析。如果一定想分析效度,建议可使用‘内容效度’,即用文字详细描述问卷设计的过程,用文字的形式描述清楚问卷是做什么,有什么用处,为什么合理,而且有专家认证,这样就说明问卷设计合理有效。

三、信度与效度的关系

信度是效度的基础,必须要有信度才有效度。信度低,效度不可能高,但信度高不一定效度高。

另外两者的研究对象不同:信度对象是答卷人,效度对象是题项。

四、如何用SPSSAU做信效度分析

进行信效度分析,推荐使用SPSSAU数据科学分析平台,以下介绍最常用的测量问卷信效度的方法:克隆巴赫信度系数(Cronbach α)方法测量信度、以及探索性因子分析测量效度。

1 信度分析

1.1 背景与目标

为测量消费者对某产品的购买意愿及影响因素(共5个分别为:因素产品, 促销, 渠道推广, 价格, 个性化服务),设计了一份问卷。共25题,其中Q1~Q19均为量表题,现希望对此份数据信度情况进行分析,以验证数据质量可靠。

1.2 操作步骤

信度分析需要针对每一具体细分维度或者变量进行分析

本例子中涉及6个维度,则分别需要进行六次操作,然后将六次操作的结果整理合并整理成一个表格用于研究报告中输出。

以其中一个维度为例:

选择对应题项,拖拽至右侧分析框中,默认输出Cronbach α系数。点击“开始信度分析”。

信度分析界面

1.3 输出结果

1.4 指标解释

(1)校正项总计相关性(CITC):为分析项之间的相关系数,通常大于0.4即可。这一指标,通常用于预测试中。

(2)项已删除的α系数:为删除该分析项后,剩下分析项的α系数,若此值明显高于Cronbach α系数值,可考虑删除该分析项。这一指标,通常用于预测试中。

(3)Cronbach α系数:衡量样本回答的可靠性,分析时主要关注此值。α系数值高于0.8,则说明信度高;α系数介于0.7~0.8之间;则说明信度较好; α系数介于0.6~0.7,则说明信度可接受; α系数小于0.6,说明信度不佳。

1.5 文字分析

智能分析

1.6 几点注意

信度分析仅仅是针对量表数据。以维度作为单位分别进行信度分析;最终将所有维度的α系数值进行汇总整理成表格,并且输出。如果某个维度仅对应2个题项,此时α系数值可能会较低(通常大于0.6即说明信度较好,但2个题时通常会较低),如果某个维度仅对应1个题项,此时无法进行信度分析。如果有反向题,需要首先针对反向题进行反向操作(使用“数据编码”功能),然后用新标题进行分析。如果说α信度信度系数值小于0,请查看是否有反向题。如果某个分析项进行了删除处理(即删除该题目及对应的数据),后续所有的分析都要以删除后作为标准进行。2 效度分析

2.1 背景与目标

为测量消费者对某产品的购买意愿及影响因素(共5个分别为:因素产品, 促销, 渠道推广, 价格, 个性化服务),设计了一份问卷。共25题(均为量表题),其中Q1~Q15为影响因素对应题项,Q16~Q19为购买意愿对应题项,现希望对量表效度情况进行分析,如果有不合理题项将其进行删除处理。

2.2 操作步骤

这里主要对5个影响因素的对应量表题进行分析

(1)在左侧分析方法菜单栏找到[问卷研究]>[效度]

(2)将变量Q1~Q15拖拽到右侧分析框内

(3)设置输出因子个数,预期有5个维度,所以设置因子个数为5。如果没有确定预期维度,也可以选择让系统输出。

(4)点击“开始效度分析”

效度分析操作界面

2.3 输出结果

2.4 分析结果

第一步:首先分析KMO值与巴特球形检验P值。

KMO值为0.870,大于0.6,通过Bartlett球形检验,意味着数据具有效度。同时,旋转后累积方差解释率为69.708%>50%,说明研究项的信息量可以有效的提取出来。

第二步:分析题项与因子的对应关系;如果对应关系与研究心理预期基本一致,则说明效度良好。

可以看到所有题项的共同度均大于0.4。除Q6与预期维度对应不符以外,其他题项均与预期对应关系一致,且题项的因子载荷系数绝对值均高于0.4。因而删除Q6,再次分析。

题项均已满足预期对应关系,说明效度良好,与专业情况完全相符。

第三步:对分析进行总结。

使用探索性因子分析进行效度分析,15个量表题目共分为5个维度;删除掉Q6共一道题,最终余下14个题项,此14项与维度对应关系情况良好,与专业预期相符。从上表可知:KMO值为0.870>0.6,通过巴特球形检验,累积方差解释率值为69.708%,说明5个维度可以提取出大部分题项信息。因而综合说明研究数据具有良好的结构效度水平。

2.5 几点注意

效度分析只针对量表题,如为非量表题可用文字形式进行描述以测量问卷的有效性如果KMO值过低,可删除共同度较低项,再次分析效度分析时, 很可能需要删除题目,以便于维度和题项对应关系符合预期,最关键的地方在于:维度和题项对应关系是否与专业预期符合;其余指标相应比较容易达标,最核心的是让维度和题项对应关系保持基本一致性无论如何效度分析均不达标,可考虑以单个维度分别进行分析,有几个维度就分析几次(同一维度的题目一起分析,仅需要删除掉因子载荷系数值低于0.4的题项即可,不用考虑多个维度间的逻辑对应关系)如果分析过程中删除某题项(即删除该题目及对应的数据),后续所有的分析都要按删除后的问卷作为标准进行分析

测量信效度的方法还有很多,以上只是介绍了最常见的两种方法。其他方法也均可以在SPSSAU中使用分析

更多分析方法相关内容可登录SPSSAU官网查看

SPSSAU:问卷调查数据应该怎么分析?

SPSSAU:问卷效度低该如何调整?

SPSSAU:调查问卷信度低的处理方法



【本文地址】


今日新闻


推荐新闻


CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3