美文网首页
超级糟糕的问卷效度,要如何调整?

超级糟糕的问卷效度,要如何调整?

作者: spssau | 来源:发表于2020-11-18 11:33 被阅读0次

做量表研究的人,或多或少都曾因为量表效度不达标困扰过,尤其在很多研究领域并没有特别权威的经典量表可以引用。使用自制的量表来研究,容易信效度不达标,那么如果遇到效度非常糟糕的情况时应该怎么办呢?

一、效度的标准

在解决效度低的这个问题之前,我们不妨一起来回顾下,判断效度达标的指标都有哪些。以使用探索性因子分析检验结构效度为例:

1KMO>0.6、通过巴特莱球形检验

SPSSAU效度分析中可自动输出KMO 和 Bartlett 的检验结果。

如果KMO值高于0.8,则说明效度高;如果此值介于0.7~0.8之间,则说明效度较好;如果此值介于0.6~0.7,则说明效度可接受,如果此值小于0.6,说明效度不佳(如果仅两个题;则KMO无论如何均为0.5)。

通过Bartlett 球形度检验意味着变量之间有一定的相关性,适合使用因子分析检验效度。 

(2)分析项归类清晰

结构效度分为两种:一种是使用探索性因子分析的方法;另一种是使用验证性因子性分析。其中探索性因子分析适合非经典量表使用。

比如说预期有5个维度,但是分析后得到3个公因子,可能就是某些分析项预期与实际分析时出现了偏差,这时可以适当删减不合理的分析项,当分析项与维度的划分与专业意义上的内在逻辑结构基本一致,此时则说明数据具有较好的效度。

通常分析项的在某个因子下的因子载荷系数绝对值>0.4,即认为该分析项可以归属于这个因子下。

 

比如上表中的分析项d1,预期归属于因子5里,但实际在因子1里。此时就应该移出d1重新分析。

(3)其他效度分析判断指标:共同度、相关系数矩阵等

如果变量相关性过高,可能会存在共线性问题,区分效度较低等问题;如果相关性太低,则说明变量之间的内在联系比较弱,不适合进行因子分析。通常共同度值>0.4即可。

共同度值可在效度分析结果中获得,相关系数矩阵可通过SPSSAU【通用方法】--【相关】得到。

 

二、什么样的数据是糟糕的数据

(1)怎么都划分不清维度

(2)实际分析项归类与预期维度不同

(3)有很多共同度很低的题项

三、解决方案

(1)怎么都划分不清维度

建议每次放入一个维度的题项,移出共同度低的问题。重复以上操作,将每个维度分析一遍,确保每个维度内部没有太糟糕的题。然后再放入全部的题目,整体分析。这样就可以看到维度之间划分得是否清晰。

(2)实际分析项归类与预期维度不同

分析项归类与预期维度不同,是一个非常常见的问题。

  •  如果是采用经典量表,可以用验证性因子分析CFA代替探索性因子分析EFA检验量表效度。

CFA检验流程轻参考:

https://spssau.com/helps/questionnaire/cfa.html

  • 如果是自制量表,且有一定的理论支持。想保持量表维度划分不变。

建议每次放入一个维度的题项,移出共同度低的问题。重复所有维度操作一遍,确保每个维度内部没有太糟糕的题。然后再放入全部的题目,整体做一遍。这样就可以看到维度之间划分得是否清晰。

如果仍然无法解决建议可增加样本量,或重新收集数据修改量表内容。

  • 如果是自制量表,只是实现预测有几个维度且处于探索阶段。

如果结果的维度划分比较清晰,且符合专业知识认知,建议以分析结果为准,根据假设和结果,修正量表。

同样的样本数据,不同的分析思路,有可能出现结果不相同,但只要符合效度的思维概念即可。

(3)有很多共同度很低的题项

有很多共同度低的分析项,意味着分析项之间的关联性较低,通常这时候分析项归类也不好。

此时建议可以从共同度最低的分析项开始移出,依次分析直至删除所有共同度小于0.4的项,需要来回多次进行对比,找出最佳结果。

当然,最根本的改善效度的方法,还是要做好预调研工作,保证数据收集质量。设计量表时每个维度的题目最好有出处可寻。这样做才能为后续分析工作提供便利。

相关文章

  • 超级糟糕的问卷效度,要如何调整?

    做量表研究的人,或多或少都曾因为量表效度不达标困扰过,尤其在很多研究领域并没有特别权威的经典量表可以引用。使用自制...

  • 超全整理!你一定要知道的效度分析攻略

    在问卷研究中,分析问卷信效度总是不可避免的环节之一。 尤其是效度分析过程,常常令研究人员头痛不已。 如何更有效得到...

  • 信度分析完整流程总结,一定有你需要的

    在问卷研究中,分析问卷信效度总是不可避免的环节之一。 如何更有效得到进行信效度分析,避免无用功,今天我们就一起来探...

  • SPSSAU教程03:信效度分析指标解读

    信效度是衡量一份问卷测试结果的准确性和稳定性的依据。问卷设计完成之后到分析结束,一般要经过两次信效度分析。一次是预...

  • 除了信效度,你还需要了解...

    之前的文章曾提到过信度、效度是一份量表问卷品质的保障,其实,除信效度外,项目分析也是编制、评价问卷量表的重要环节。...

  • 信度系数低怎么办?信度系数具体怎么算?

    如果研究问卷中涉及量表,则应该进行信度分析和效度分析,在进行预测试和正式研究时均可以进行信度分析和效度分析,预测...

  • 怎么做好效度分析?

    效度分析,简单来说就是问卷设计的有效性、准确程度。 当我们在为研究主题设计问卷时,都会希望问题实际测量到的是我们希...

  • 第八天:信度分析

    信度分析 信度和效度分析是问卷分析的第一步,也是检验该问卷是否合格的标准之一,所以,我们在做问卷调查的时候第一步就...

  • 问卷数据的效度与信度分析

    李克特量表是调查问卷中经常使用到的表格形式,它将一组指标分为五个等级:非常赞同、赞同、一般、不赞同、非常不赞同,分...

  • 随笔

    最近睡眠糟糕透了,要调整作息。好好睡觉。

网友评论

      本文标题:超级糟糕的问卷效度,要如何调整?

      本文链接:https://www.haomeiwen.com/subject/mtxciktx.html