当前位置: 东星资源网 > 文档大全 > 评课稿 > 正文

调查问卷的信度和效度_高等职业教育服务社会调查问卷?结构设计的信度效度分析

时间:2019-02-02 来源:东星资源网 本文已影响 手机版

   摘 要:从问卷项目内部一致性信度系数、内容效度、构想效度等方面,对高等职业教育服务社会调查问卷的结构设计进行了信度分析和效度分析。认为三份问卷都有较好的信度,《高等职业院校服务社会培就业培训》问卷的结构设计合理有效,《就业情况》和《幸福感受》问卷的结构设计比较特殊,需要作一些改进。?
  关键词:信度;效度??
   数据统计分析结果和调查结论的正确性一方面依赖于调查数据的真实性和统计方法的正确性,另一方面在很大程度上还依赖于问卷设计的科学性和合理性,因此在进行数据分析之前,我们对采用的三份问卷进行了大量的试调查,目的是设计出合理有效的问卷。?
   通过科学的统计方法对调查问卷进行信度分析和效度分析,合理设计调查题目,方便我们对数据进行科学分析,以利于提高学术界、教育界、政府、社会对高等职业培训服务社会效果的认识以及进一步改进这种人才培训模式。?
  一、信度分析?
   信度[1](Reliability)即可靠性,它是指采用同样的方法对同一对象重复测量时所得结果的一致性程度。本研究采用Cronbach a[2]系数来检验“内在一致性”。通过信度分析,可以反映被测特征的真实程度。我们主要在SPSS13.0中采用Alpha值测量问卷项目内部一致性信度系数(信度系数的取值范围为[0,1]),分别计算三份问卷各维度和各问卷总体的Alpha信度系数。主要数据详见表1。?
   上述结果显示,三份问卷总的内部一致性信度系数均大于0.8,说明问卷有很好的内部一致性信度,评价指标体系很好,问卷整体设计的可信度较高,获得的数据有较强的稳定性,能比较真实地反映被测特征。各维度的信度系数值均在0.8-0.9之间或接近0.8,说明各项目之间具有较好的一致性,基本上能较好地反映所在维度,评价指标体系可以接受。由此我们认为,这三份问卷都有较好的信度,依此调查得到的数据是可信的,对问卷进行的数据分析也是比较可靠的。?
  二、效度分析?
   效度[1](Validity)即有效性,它是指测量工具或手段能够准确测出所需测量的事物的程度。效度表明一个研究设计或测试工具实际能测出其所要测的特征的程度(有效性)。通过效度分析,观察测量到的数据是不是能够反映所要测定的特征,也就是依据测试结果所作推论的有效程度。这里我们主要讨论内容效度和构想效度。?
  (一)内容效度?
   内容效度是一个测验实际测到的内容对所要测量内容取样的代表程度,它侧重于测验题目取样的代表性,考查这些题目对所要测量的内容和行为反应测量的有效程度。?
   本次调查所采用的调查问卷是由呼和浩特职业学院有关职业培训专家根据职业培训相关理论和职业培训目的进行设计的,专家们运用科学的统计方法对问卷进行统计分析和讨论,对指标体系和调查表的项目进行修改,最终通过专家组鉴定,形成本课题的调查问卷。这表明,通过科学的问卷编制过程,研究设计中的系统误差和随机误差都应该得到较好的控制,在一定程度上保证了调查目的与调查内容的一致性。因此,可以认为问卷有较好的内容效度。?
  (二)构想效度?
   构想效度是指一个研究对其测定的结果能用它所依据的理论结构予以解释的程度,侧重于一个测验能够准确测量到心理学和教学理论上的某种抽象概念(或理论结构)和特质的程度。在本项研究中,我们主要利用AMOS7.0软件对三份问卷进行验证性因素分析(CFA),来考察每个项目是否测量了某个纬度的特质,检验它与设计的理论模型的拟合程度,以观察该问卷能够准确测量某种抽象概念(或理论结构)和特质的程度。?
   1.《就业培训》问卷?
   通过运行SPSS13.0的因子分析可以得出,就业培训问题可以由就业能力、综合能力和发展能力三个因子代表。假设这几个潜变量都相关,设定其理论模型(见模型图1)。用收集来的数据对其进行模型拟合。?
  
   运行Calculate estimates命令,分别计算出各问卷的因素载荷系数(Standardized Regression Weights)和验证性因素分析拟合结果。具体数据见表2。?
  
   三份问卷因素载荷系数均在0.4以上,这说明这些项目能较好地测量它所在的维度。?
   《就业培训》模型拟合指数显示,比较拟合指数(CFI)和非赋范拟合指数(TLI)值均大于0.88,这表明整体模型拟合还可以。近似误差均方根(RMSEA)的值小于0.10,也是可以接受的。卡方与自由度的比值(CMIN/DF)介于2.0~5.0之间,表示模型可以接受。该问卷具有良好的构想效度。?
   《就业情况》模型拟合指数显示,比较拟合指数(CFI)和非赋范拟合指数(TLI)值均小于0.9,这表明整体模型拟合一般。近似误差均方根(RMSEA)的值大于0.10,卡方与自由度的比值(CMIN/DF)介于2.0~5.0之间,表示模型需要改进。?
   《幸福感受》问卷验证性因素模型拟合结果显示,CFI和TLI值均小于0. 90 ,CMIN/DF大于5.0,这表明整体模型拟合不是很好。RMSEA的值大于0.08,不能接受。《幸福感受》问卷,虽在试调查的基础上作了修改,但问卷结构仍不是很理想,需要在今后的研究中进一步修订。?
   以上结果表明,问卷设计需要继续改进,以适应模型计算的要求,但总体来说,三分问卷具有较好的构想效度。?
  三、结论与讨论?
   根据总的内部一致性信度系数,三份问卷都有较好的信度,问卷可以接受,依此调查得到的数据是可信的,对问卷进行的数据统计分析也是比较可靠的。?
   从各维度的内部一致性信度系数看,发展能力的Alpha值较低,这主要有两个方面的原因,其一,题目设置和选项上有不一致的地方,其二,受训者填表时出现不一致现象,应从题目设置和选项上作进一步的修改。?
   效度分析结果表明《职业培训》问卷的理论模型对呼和浩特职业学院的抽样数据拟合效果较好,说明问卷的结构设计合理有效,问卷可以接受。所获得的调查数据能够较好地反映调查的目的和要求,数据的统计分析结果是有效的、可靠的。?
   信度和效度是评价一个研究设计好不好的两个指标。本次调查问卷是在试调查基础上进行修改的,但修改后的问卷,其结构设计的信度效度如何、各培训项目适用问卷的可靠性怎样?课题组成员可以通过本次调查作进一步的检验和完善。?
   参考文献:?
  [1]侯杰泰,温忠麟,成子娟.结构方程模型及其应用[M].北京:教育科学出版社,2004.?
  [2]杨晓明. SPSS在教育统计中的应用[M].北京:高等教育出版社,2004.?
  ?
  本文为全国教育科学“十一五”规划课题(FJB070507)??
  

标签:社会调查 问卷 结构设计 高等职业教育