问卷信度效度检验
- 格式:doc
- 大小:68.50 KB
- 文档页数:4
毕业学位论文调查问卷信度效度检验一、隗金水--博士论文运动员选材的选育结合理论与实证研究1、问卷的效度问题。
本研究的调查问卷是在大量阅读有关运动员选材和早期训练及管理等资料的基础上,结合运动选材和训练实际,同时考虑教练员和运动员的特殊性(时间问题,阅读能力问题,对理论研究的兴趣问题等)编制而成,内容方面力求全面反映选育现状,文字表达方面字斟句酌,反复修改,力求简单朴素,言简意赅.按照《体育测量评价》效度理论及《社会研究方法》中的概念操作化的方法(艾尔.巴比,2000),先对调查的基本内容进行纲要式的拟订、修改,并在征求专家意见的基础上,最后确定调查内容纲要细目表(见表2一1表2一),这样可以在结构上保证内容的全面性而避免遗漏重要内容,再根据细目表逐一进行问卷的编写,达到概念操作化的目的,即将抽象的概念转化为可观测的具体指标或题目。
然后在小范围内进行预备测试,并结合教练员和运动员的意见进行反复修改,力争在内容效度和表面效度达到较高要求。
2、调查问卷的信度检验。
调查问卷定稿后,以重测法在小范围内进行了信度检验。
其中教练员问卷在以沁2年7月在教练员进修班(45名学员)中进行重测,其信度系数为091(P劝.01);运动员问卷在60名运动员(田径专项)中进行重测,其信度系数为0.87(P劝.01)。
在问卷设计和正式实施调查的过程中,采取了下列措施以确保问卷信度,(l)问卷题目数量尽量少,控制在一张A4纸(正反面)内。
(2)语言表达上尽量通俗、简单扼要,主要采用选择题型,极少数题目采用填空题型。
(3)匿名填写问卷。
(4)运动员问卷的发放和填写尽量避开教练员在现场。
二、宋秀丽博士论文新农村社区体育研究--以东尉社区为个案1、问卷信度:笔者之所以能有这样的便利条件发放问卷,原因在于本人的爱人是当地市日报社的记者,长山镇是其常年负责宣传报道的乡镇之一,在2008年6月曾经为东尉社区写过整版宣传报道,并获得滨州市新闻媒体单位的精品工程"本人爱人的工作特点为本论文问卷的发放回收以及实地考察提供了极为便利的条件"问卷调查的对象之所以将56岁以上老年人排除在调查范围之外,原因在于两方面,一是东尉社区对老年人采用集中供养的方式,凡是年龄达56岁者其家庭每年向公寓交一定象征性的费用就可以入住东尉社区的老年公寓,在老年公寓有专门为老年人提供的各种文体活动场地设施;二是东尉社区老年公寓老人文化水平一般较低,问卷的填答对他们来说有相当的难度"所以,对于老年公寓老年人的体育活动开展状况多是采用访谈方式进行2、效度检验:问卷制定之后,请8位专家对问卷的内容和结构效度进行了检验,有5位专家认为合理,3位专家认为基本合理,问卷具有较高的结构效度"三、陈琦--博士论文从终身体育思想审视我国学校体育的改革与发展1、信度检验:问卷设计完后请专家判定问卷的指标是否能够含盖研究主题是否合适从而进行效度检验学生问卷专家认定率为91.72%教师问卷专家认定率为90.41%市民问卷专家认定率95.56%参见表2-12、效度检验:对部分调查对象采用再测法检验问卷的信度信度系数r=0.920.910.94符合规范要求。
发放问卷做信效度检验的流程及注意事项下载提示:该文档是本店铺精心编制而成的,希望大家下载后,能够帮助大家解决实际问题。
文档下载后可定制修改,请根据实际需要进行调整和使用,谢谢!本店铺为大家提供各种类型的实用资料,如教育随笔、日记赏析、句子摘抄、古诗大全、经典美文、话题作文、工作总结、词语解析、文案摘录、其他资料等等,想了解不同资料格式和写法,敬请关注!Download tips: This document is carefully compiled by this editor. I hope that after you download it, it can help you solve practical problems. The document can be customized and modified after downloading, please adjust and use it according to actual needs, thank you! In addition, this shop provides you with various types of practical materials, such as educational essays, diary appreciation, sentence excerpts, ancient poems, classic articles, topic composition, work summary, word parsing, copy excerpts, other materials and so on, want to know different data formats and writing methods, please pay attention!一、流程1.确定研究目的:首先要明确问卷的编制目的,是为了评估某一特定变量的信效度还是为了进行整体信效度的检验。
关于调查问卷的信度和效度检验(一)信度1、 信度的含义测验的信度又称测验的可靠性 ,是指同一个测验对同一组被试施测两次或多次 ,所得结果 一致形程度。
一个好的测验必须是稳定可靠的,多次使用所获得的结果是前后一致的。
例 如,用直尺测量长度,其结果是稳定可靠的;用橡皮筋测长度则是不可靠的 ,前后测量 结果缺乏一致性。
在测量理论中 ,信度被定义为:某次测验分数的真变异数与总变异数ST2(即实测分数)之比:R xx - S x 2式中Rxx 表示测量的信度,ST -代表真分数的变异数(方差),Sx -表示实得分数的变异数(方差)。
For pers onal use only in study and research; not for commercial use从上式可看出,(1)信度是指实测值和真值相差的程度,实测值是指对某物实际进行测 量时所获得值 ,也称实测分数 (X );真值是指被测事物的真实规模取值,也称真分数 (T )。
由于各种原因,实得分数常不等于真分数 ,两者之差称为测量误差或误差分数 (E )。
从理论上看,实得分数由真分数和误差分数两部分组成即:X=T+E Rxx 就是对一组测验数据的实测分数与真分数相差程度的最好估计。
(2 )信度又是指相同的测验对相同的被试再次测量时引起的同样反应的程度。
如果两次测验中,受测者所得分数或所处等级前后一致,则说明测验结果的信度较高 ;反之,两 次测验结果一致性低 ,说明测验结果的信度低。
For pers onal use only in study and research; not for commercial use信度是任何一种测量的必要条件 (但不是唯一条件 ),只有测量值接近或等于真值 ,用同一工具多次测量同一特性获得相同或相近的结果,才能认为这个测量结果是可靠的。
信度 对于教育测量尤其重要,只有信度高的教育测验才能成为教育工作者有用的工具,才能为 教育工作者提供可靠的信息,为教育预测和决策提供客观依据。
问卷信度效度检验从统计数据质量角度谈调查问卷的设计质量一、引言从保证统计数据质量的统计工作过程看,统计数据质量可以被划分为统计设计质量、统计调查质量、统计整理质量、统计分析质量以及数据发布传输质量等。
统计设计质量是保证统计数据质量的首要环节,在统计数据质量保证体系中起着关键性作用。
统计设计质量一般包括调查问卷设计质量与调查方案设计质量,其中调查问卷设计质量指的是:通过问卷测量得到的,反映调查对象客观现象的统计数据的准确性和有效性,即调查问卷设计质量的好坏,需要通过问卷测量能力的高低来检验。
在市场调查中,为了深入地研究一些本质的或理论性的现象,问卷调查法被广泛运用,除了调查时采用的抽样方法以及所抽取的调查对象是否具有代表性之外,调查者最关心的就是调查问卷的测量能力。
问卷测量能力包含了两个方面的内容,即问卷测量结果的准确性和有效性。
准确性和有效性是统计数据质量蕴涵的最主要的两个特性,一个好的调查问卷设计不仅可以保证在多次重复使用下得到可靠的数据结果,即准确性;也可以保证所得测量结果能够反映它所应该反映的客观现实,即有效性。
所以我们可以通过对问卷测量能力的分析来检验问卷的设计质量,对问卷设计进行质量控制,进而发现问卷设计中应注意的问题。
在此基础上,通过不断改进问卷设计,提高其测量能力,最终将有助于我们得到高质量的调查数据。
二、调查问卷的设计质量检验信度和效度的概念来源于心理测试中关于测验的可靠性和有效性研究,当建构和评估测量时,通常使用信度和效度这两个技术性指标。
因此我们采用问卷的信度和效度分析来评估其测量能力,进而实现对问卷设计质量的检验。
1(问卷设计质量的信度检验所谓问卷设计质量的信度检验,指的是对问卷测量结果准确性的分析,即对设计的问卷在多次重复使用下得到的数据结果的可靠性的检验。
在实际应用中,信度检验多以相关系数表示,常用的方法有:重测信度,复本信度,折半信度,克朗巴哈信度,评分者信度等。
国内外已经有很多关于这些信度分析方法介绍的文献,在这里,笔者不再一一详述,仅列出相关公式作为参考。
问卷调查与信度效度随着社会的不断发展和进步,问卷调查已成为一种常见的研究方法。
在各个领域,从市场调研到学术研究,都广泛使用问卷调查来获取信息。
然而,问卷调查的可靠性和效度一直是研究者关注的焦点。
本文将探讨问卷调查的信度效度问题,阐述其重要性,并介绍常用的方法来评估问卷调查的信度效度。
一、问卷调查的信度问卷调查的信度是指问卷测量结果的稳定性和一致性。
即在相同的测量条件下,问卷是否能够得出相似的结果。
信度是保证问卷调查结果可靠的基本要求。
评估问卷调查的信度通常使用内部一致性信度和重测信度两种方法。
1. 内部一致性信度内部一致性信度是指问卷中不同问题或项目之间的一致性。
使用内部一致性信度方法,可以评估问卷中各项指标之间的相关性,判断问卷是否测量了相同的概念。
常用的内部一致性信度方法包括:Cronbach's α系数、Splithalf信度等。
2. 重测信度重测信度是指在时间间隔较短的情况下,对同一组受访者进行两次或多次问卷调查,评估结果的稳定性。
通过计算两次测试的相关性,可以判断问卷调查在不同时间段内的结果是否一致。
重测信度的常用方法有:Pearson相关系数、Spearman秩相关系数等。
二、问卷调查的效度问卷调查的效度是指问卷测量结果与实际情况之间的一致性。
效度是保证问卷调查结果准确性的关键要素。
评估问卷调查的效度通常使用内容效度和结构效度两种方法。
1. 内容效度内容效度是指问卷内容是否充分、准确地反映了研究目标。
通过专家评审、面谈等方法,评估问卷中各项指标是否覆盖了要研究的对象,以及问题的表述是否准确清晰。
2. 结构效度结构效度是指问卷的结构和测量维度与理论假设之间的一致性。
通过因子分析、相关分析等方法,验证问卷中各项指标之间的关系是否符合预期。
三、评估问卷调查的信度效度了解问卷调查的信度效度非常重要,因为只有信度和效度充分保证,研究结果才能具有科学性和可靠性。
在实际评估过程中,可以采取以下步骤:1. 设计合理的问卷结构和问题表述,确保内容准确、清晰。
教育调查问卷设计的基本原则及信效度检验方法教育调查问卷设计的基本原则及信效度检验方法一、引言调查问卷是教育研究中常用的数据收集工具之一,通过问卷调查可以获取大量的信息和数据,有助于理解群体的心理特征、态度和行为习惯等。
然而,设计一份合理有效的教育调查问卷并不容易,需要遵循一定的原则并确保问卷的信度和效度。
本文将介绍教育调查问卷设计的基本原则,以及常用的信效度检验方法。
二、教育调查问卷设计的基本原则1. 明确研究目的:在设计教育调查问卷前,研究者首先需要明确研究的目的和研究问题。
明确的研究目的有助于指导问卷的设计和内容选择,避免题目的冗余和重复,提高问卷的有效性。
2. 简明扼要:问卷的设计应尽量简明扼要,避免冗长和复杂的问题。
研究者应尽量使用简洁的语言和直接的表达方式,避免产生歧义或理解困难。
3. 结构合理:问卷的结构应该合理,问题之间应有逻辑关联,使得整个问卷的回答流程清晰。
可以根据研究的内容和问题的性质进行分块,将问题按照一定的逻辑顺序排列。
4. 考虑受众特点:问卷设计应充分考虑受众的特点,包括受众的年龄、文化背景、教育程度等。
对于不同特点的受众,可以采用不同形式的问题表述,以保证问题的理解和回答准确性。
5. 预测试和修订:在正式使用问卷之前,进行预测试是非常重要的。
通过预测试,可以检查问卷的问题是否清晰易懂,是否存在歧义,以及问题的顺序和结构是否合理。
根据预测试的结果,研究者可以对问卷进行修订和改进。
三、信度和效度的检验方法1. 信度检验信度是指问卷测量结果的稳定性和一致性,即同一样本在不同时间或不同情境下得到的结果是否一致。
以下是常用的信度检验方法:(1) 内部一致性信度检验:可以使用Cronbach's α系数来检验问卷整体各项指标的一致性。
Cronbach's α系数越高,表明问卷的信度越好。
(2) 半分信度检验:可以使用重测法或拆分半分法来检验问卷各个维度的一致性。
通过两次测试或将问卷拆分为两部分进行测试,计算相关系数来评估问卷的信度。
调查问卷信度和效度检验-回复
调查问卷信度和效度检验是评估一份问卷的可靠性和有效性的方法。
下面是一些常用的信度和效度检验方法:
1. 信度检验:
- 重测信度:通过重复测量同一组被试者来检验问卷的稳定性。
使用相关系数(如皮尔逊相关系数)来比较两次测量结果之间的一致性。
- 分割半信度:将问卷分为两个部分,分别测量同一组被试者。
使用Cronbach's alpha系数来检验问卷各部分之间的一致性。
- 内部一致性信度:通过统计问卷各项之间的相关性来检验问卷的内部一致性。
常用的方法包括Cronbach's alpha系数和因素分析。
2. 效度检验:
- 内容效度:通过专家评估或理论分析来评估问卷项是否涵盖了研究领域的主要内容。
- 构效效度:通过问卷和其他已经被公认为有效的测量工具进行比较来评估问卷的构效效度。
常用的方法包括相关系数(如皮尔逊相关系数)和因子分析。
- 准则效度:通过与一个被广泛接受的准则进行比较来评估问卷测量结果的准确性。
常用的方法包括相关系数和受试者工作特征曲线(ROC曲线)分析。
以上是常用的信度和效度检验方法,但具体的选择方法可以根据研究领域和具体研究问题进行调整和选择。
问卷数量和信度和效度的标准问卷是一种常用的调查工具,被广泛应用于社会科学研究、市场调研、医学研究等领域。
在进行问卷调查时,我们常常要关注三个重要的指标,即问卷数量、信度和效度。
问卷数量是指参与问卷调查的样本数量。
合适的问卷样本数量对于保证研究结果的准确性和代表性至关重要。
那么如何确定合适的问卷样本数量呢?一般来说,确定问卷样本数量需要考虑以下几个因素:1.总体大小:总体是指我们研究的对象的整体群体,例如某一城市的居民、某一公司的员工等。
总体大小越大,我们需要的样本数量也相对较大,这样才能更准确地反映总体特征。
2.置信水平:置信水平是我们对研究结果的可信程度的度量。
常见的置信水平有95%和99%。
一般来说,置信水平越高,我们需要的样本数量越大。
3.误差范围:误差范围是指我们能够接受的研究结果与真实值之间的差异程度。
一般来说,误差范围越小,我们需要的样本数量越大。
为了确定合适的问卷数量,我们可以使用一些统计学方法,例如抽样方法、样本量计算等。
通过这些方法,我们可以根据以上因素来确定具体的问卷样本数量,以保证研究结果的准确性和代表性。
除了问卷数量,还需要关注问卷的信度和效度。
信度是指问卷测量的稳定性和一致性,即反映了测量工具对同一概念在不同时间和场合下的测量结果是否相似。
问卷信度的检验可以通过如下几个指标进行评估:1.重测信度:重测信度是指在一定时间间隔内,对同一群体进行两次问卷调查,然后通过比较两次测量结果的相关性来评估问卷的信度。
常用的衡量指标有皮尔逊相关系数和斯皮尔曼等级相关系数。
2.内部一致性信度:内部一致性信度是指问卷中各个项目之间的一致性。
常用的衡量指标有Cronbach's alpha系数和Kuder-Richardson公式20等。
通过评估重测信度和内部一致性信度,我们可以判断问卷在测量同一概念时的稳定性和可靠性。
一般来说,重测信度和内部一致性信度的值要达到一定的标准,才能认为问卷具有较高的信度。
问卷调查的信度与效度篇一:调查问卷的信度效度分析方法调查问卷的信度效度分析方法问卷调查法是教育研究中广泛采用的一种调查方法,根据调查目的设计的调查问卷是问卷调查法获取讯息的工具,其质量高低对调查结果的真实性、适用性等具有决定性的作用。
为了保证问卷具有较高的可靠性和有效性,在形成正式问卷之前,应当对问卷进行试测,并对试测结果进行信度和效度分析,根据分析结果筛选问卷题项,调整问卷架构,从而提升问卷的信度和效度。
信度和效度分析的方法包括逻辑分析和统计分析,本文主要讨论后者。
一、信度分析信度(Reliability)即可靠性,它是指采用同样的方法对同一对象重复测量时所得结果的一致性程度。
信度指标多以相关系数来表示:大致可分为三类:稳定系数(跨时间的一致性)、等值系数(跨形式的一致性)和内在一致性系数(跨项目的一致性)。
若以信度系数来表示信度的大小。
信度系数越大,表示测量的可信程度越大。
究竟信度系数要多少才算有高的信度。
学者DeVellis(1991)认为,0.60~0.65(最好不要);0.65~0.70(最小可接受值);0.70~0.80(相当好);0.80~0.90(非常好)。
由此,一份信度系数好的量表或问卷,最好在0.80以上,0.70至0.80之间还算是可以接受的范围;分量表最好在0.70以上,0.60至0.70之间可以接受。
若分量表的内部一致性系数在0.60以下或者总量表的信度系数在0.80以下,应考虑重新修订量表或增删题项。
信度分析的方法主要有以下四种︰1、重测信度法这一方法是用同样的问卷对同一组被调查者间隔一定时间重复施测,计算两次施测结果的相关系数。
显然,重测信度属于稳定系数。
重测信度法特别适用于事实式问卷,如性别、出生年月等在两次施测中不应有任何差异,大多数被调查者的兴趣、爱好、习惯等在短时间内也不会有十分明显的变化。
如果没有突发事件导致被调查者的态度、意见突变,这种方法也适用于态度、意见式问卷。
从统计数据质量角度谈调查问卷的设计质量一、引言从保证统计数据质量的统计工作过程看,统计数据质量可以被划分为统计设计质量、统计调查质量、统计整理质量、统计分析质量以及数据发布传输质量等。
统计设计质量是保证统计数据质量的首要环节,在统计数据质量保证体系中起着关键性作用。
统计设计质量一般包括调查问卷设计质量与调查方案设计质量,其中调查问卷设计质量指的是:通过问卷测量得到的,反映调查对象客观现象的统计数据的准确性和有效性,即调查问卷设计质量的好坏,需要通过问卷测量能力的高低来检验。
在市场调查中,为了深入地研究一些本质的或理论性的现象,问卷调查法被广泛运用,除了调查时采用的抽样方法以及所抽取的调查对象是否具有代表性之外,调查者最关心的就是调查问卷的测量能力。
问卷测量能力包含了两个方面的内容,即问卷测量结果的准确性和有效性。
准确性和有效性是统计数据质量蕴涵的最主要的两个特性,一个好的调查问卷设计不仅可以保证在多次重复使用下得到可靠的数据结果,即准确性;也可以保证所得测量结果能够反映它所应该反映的客观现实,即有效性。
所以我们可以通过对问卷测量能力的分析来检验问卷的设计质量,对问卷设计进行质量控制,进而发现问卷设计中应注意的问题。
在此基础上,通过不断改进问卷设计,提高其测量能力,最终将有助于我们得到高质量的调查数据。
二、调查问卷的设计质量检验信度和效度的概念来源于心理测试中关于测验的可靠性和有效性研究,当建构和评估测量时,通常使用信度和效度这两个技术性指标。
因此我们采用问卷的信度和效度分析来评估其测量能力,进而实现对问卷设计质量的检验。
1.问卷设计质量的信度检验所谓问卷设计质量的信度检验,指的是对问卷测量结果准确性的分析,即对设计的问卷在多次重复使用下得到的数据结果的可靠性的检验。
在实际应用中,信度检验多以相关系数表示,常用的方法有:重测信度,复本信度,折半信度,克朗巴哈信度,评分者信度等。
国内外已经有很多关于这些信度分析方法介绍的文献,在这里,笔者不再一一详述,仅列出相关公式作为参考。
(1)重测信度,也叫稳定系数,对同一组调查对象采用同一调查问卷进行先后两次调查,采用检验公式,其中为两次调查结果的协方差,为第一次调查结果的协方差,为第二次调查结果的协方差。
系数值越大说明信度越高。
(2)复本信度,也叫等值系数,对同一组调查对象进行两种相等或相近的调查,要求两份问卷的题数、形式、内容及难度和鉴别度等方面都要尽可能的一致。
检验公式同稳定系数公式,系数越大,说明两份问卷的信度越高,具体调查时使用哪一份都可以。
(3)折半信度,也叫内在一致性系数,将调查的项目按前后分成两等份或按奇偶题号分成两部分,通过计算这两部分调查结果的相关系数来衡量信度。
当假定两部分调查结果得分的方差相等时,检验用Spearman-Brown公式来表示:,其中表示折半信度系数;当假定方差不相等时,采用Flanagan 公式:,其中、分别表示两部分调查结果的方差,表示整个问卷调查结果的方差。
如果折半信度很高,则说明这份问卷的各项题之间难度相当,调查结果信度高。
(4)克朗巴哈信度,是对折半信度的改进,检验公式是:,其中K表示问卷中的题目数,为第i题的调查结果方差,为全部调查结果的方差。
信度系数是目前最常用的信度分析法。
(5)评分者信度,包括信度和信度,将问卷中的每道题看作是一个变量,然后通过调查的结果得分对所有问题做因子分析。
得到,,其中是最大特征值,N是问题数, 是因子分析法的第i个问题的共同度。
2.问卷设计质量的效度检验所谓问卷设计质量的效度检验,指的是问卷测量结果有效性的分析,即对设计问卷的测量结果反映它所应该反映的客观现实的程度的检验。
具体来说,效度检验必须针对其特定的目的功能及适用范围,从不同的角度收集各方面的资料分别进行。
常用的效度检验有内容效度、结构效度、难易效度、准则效度等。
有关效度分析方法的详细内容,笔者也不在一一赘述。
(1)内容效度,也叫单项和总和的相关效度分析,指的是调查问卷所采用的题项能否代表所反映的内容或主题。
通常是用单个问题的得分与总得分的相关系数来反映,如果相关系数不显著,表示该题的鉴别力低,就不应该再将该题纳入调查问卷。
(2)难易效度,在调查反映观念、态度的问题中采用检验公式:难易效度=,其中、分别代表高分组和低分组样本数,、分别代表高分组和低分组通过该题的样本数。
计算结果越大,表示该题越容易,反之该题难度较大。
(3)鉴别效度,在对观念、态度问卷单个题的评价中采用公式:鉴别效度= ,符号含义同难易效度公式。
一般我们总是希望调查问卷的每道题的鉴别效度高一些,这样可以很好的反映被调查者对问题看法的差异性。
(4)准则效度,又叫独立标准效度分析。
采用的是先根据已经掌握的理论,选择一个与调查问卷直接相关的独立标准,把它当作自变量。
然后再分析调查结果的特性与该自变量的关系,如果对于自变量的不同取值,调查结果的特性表现出显著差异与我们掌握的理论有很强的相关性,则说明调查问卷是有效的。
(5)结构效度,该检验主要就是将问卷中的每道题看作是一个变量,然后通过调查的结果得分对所有问题做因子分析,提取一些较为显著的因子,通过各个问题在每个因子上的载荷将问题分类。
其目的就是为了检验问卷中的属于相同理论概念的不同问题是否能落在同一因子上,如果能够做到符合理论,即属于相同概念的题都归为同一因子,则说明问卷有着很好的结构效度。
三、问卷设计质量信度、效度检验间的关系如果以X表示测量值,T表示真实值,E表示随机误差,则他们之间的关系为X=T+E,测量值总方差可分解为,信度可用真实值的方差占测量值的总方差来表示,即信度=。
如果将T进一步分解为想要测量的目标真值,与测量目标无关的系统偏差,效度可用想要测量目标真值的方差占测量值总方差的比重来表示,即效度=。
很明显,大并不一定保证也大,也就是说信度高时效度不一定高。
反过来,在一定时,大则保证也一定大,也即效度高时信度一定高。
所以信度检验是效度检验的必要条件,但不是充分条件。
效度检验结果的好坏直接决定了整个调查研究的价值,如果设计的问卷不能充分表示所要研究的对象,那么整个研究也就失去了意义。
高效度一定隐含着高信度,如果问卷设计是有效的,那么一定是可信的。
如果调查问卷有信度而没有效度,其测量结果则可能并不是理论上想要研究的结论。
四、如何提高调查问卷设计质量1.问卷设计信度、效度检验中的启示(1)信度检验的启示调查对象的范围与信度的关系。
由于信度检验采用的是相关系数的形式,因此受调查对象范围的影响。
如果调查对象的特征分布范围较大,则变异性越大,信度系数就会越小;相反调查对象的特征分布较集中,则变异性较小,信度系数就会越大。
调查问卷设计长度与信度的关系。
通常来说,采用折半信度分析方法时,由于同一份问卷不太容易分为等同的两部分,所以折半信度分析的效果不如采用整体分析的效果,这可以通过Spearman-Brown公式观察出,整体的信度系数是折半信度系数的两倍还多。
因此如果对于同一目的和同一调查对象所设计的两份调查问卷,其中一份是在另一份问题的基础上增加若干道同类型的问题,那么问题多的问卷的信度一定会较高。
同时,问卷的信度会随着问卷同质问题的增多而增大。
调查问卷的设计与信度的关系。
由于信度检验是在对调查问题答案编码打分的基础上进行的,如果调查问卷设计过程中存在偏差,例如正向问题偏多或逆向问题偏多、备选答案易让被调查者打高分或低分的问题偏多等都有可能造成认为信度分析的偏差。
所以问卷的设计是保证信度的一个前提条件。
影响信度检验的其他因素:调查对象的持久性、合作态度等影响;调查实施者是否按规定实施调查;调查环境与条件是否适当;调查内容是否恰当、问题数目是否适中等这些也都是影响调查问卷设计信度检验的主要因素。
(2)效度检验的启示调查问卷的问题设计与效度的关系。
问题是构成调查的要素,调查问题的性能就成为影响调查问卷效度的因素之一。
从前面的效度检验可以看出问题的取材、长度、鉴别力、难度及编排方式都和效度有关。
如果调查的问题设计合理,即如果问题的取材合理、长度适中、有相当的鉴别力且难度分布适当、编排也较合理,那么调查结果的检验就会有很高的效度。
调查的实施和效度的关系。
问卷调查的效度检验要得到保证,调查督导员应该适当控制调查情况,而调查员应当严格按照访问手册的规定实施调查。
在调查过程中,如果场地的选择、调查材料的准备、调查方式的说明、调查时间限制等,如不按照调查手册程序进行,则必然降低问卷调查测量的效度。
被调查者的态度和效度的关系。
被调查者的兴趣、动机、情绪、及是否合作以及合作程度等都影响到问卷结果的可靠性和正确性。
无论是什么调查内容,只有借助调查对象的真实反映,才能了解到真正的调查情况。
关联效度准则的选取与效度的关系。
适当地选择关联准则是关联效度分析的先决条件,如果选择的准则不当,就会导致效度分析的错误,问卷调查的真实效度就有可能被掩盖。
一个问卷准则效度分析时,选择的准则不同,其效度分析的结果会相差很大。
从统计分析的观点来看,一个准则关联效度受以下三个因素的影响作用最大:问卷的信度、准则变量的信度、准则变量和调查变量之间真正的相关程度。
调查对象的选取和效度的关系。
在调查中,最注重的是选取样本的代表性。
好的样本代表性能够提高问卷调查的效度。
一个调查应用与不同的调查对象,由于对象在性别、年龄、教育程度、背景上的差异,效度也随之变异。
3.改善问卷设计质量,提高调查数据的质量通过以上得到的信度和效度检验的启示,可以很明确的是,一个问卷调查测量能力的好坏,最关键的还在于整个调查问卷的设计阶段。
通过分析具体调查指标的特性,正确设计有针对性的调查问题;问题的措辞恰当、长度安排合理;问题对于所要了解的调查内容有相当的鉴别力和适当的难度;并分别给予每一个问题适当的答案选项;问题的前后顺序编排合理等这些设计要求的满足,有助于明显提高问卷的信度和效度,使得我们能够用一份完善的调查问卷去收集所要调查的数据内容,从而为得到高质量数据创造了前提条件。
在实施调查过程中,严格的按照调查方案选择调查对象,确定合理的调查时间、地点、环境;以及在调查过程中积极争取调查对象的合作;访问过程中严格按照计划实施等是我们对收集高质量调查数据的保证。
通过以上的分析和论述,可以看到能否通过问卷调查收集到准确的、有效的高质量数据,完善的问卷设计是前提,而周密的按照调查方案实施数据收集是保证。
此外,对调查结果的正确汇总、整理、分析,以及选用适当的信度和效度检验方法也是我们提高问卷调查数据质量不可或缺的条件。
(出处:兰州商学院统计学院)。