问卷可靠性有效性检验.doc

从统计数据质量角度谈调查问卷的设计质量 一、引言　　从保证统计数据质量的统计工作过程看，统计数据质量可以被划分为统计设计质量、统计调查质量、统计整理质量、统计分析质量以及数据发布传输质量等。统计设计质量是保证统计数据质量的首要环节，在统计数据质量保证体系中起着关键性作用。统计设计质量一般包括调查问卷设计质量与调查方案设计质量，其中调查问卷设计质量指的是：通过问卷测量得到的，反映调查对象客观现象的统计数据的准确性和有效性，即调查问卷设计质量的好坏，需要通过问卷测量能力的高低来检验。　　在市场调查中，为了深入地研究一些本质的或理论性的现象，问卷调查法被广泛运用，除了调查时采用的抽样方法以及所抽取的调查对象是否具有代表性之外，调查者最关心的就是调查问卷的测量能力。问卷测量能力包含了两个方面的内容，即问卷测量结果的准确性和有效性。准确性和有效性是统计数据质量蕴涵的最主要的两个特性，一个好的调查问卷设计不仅可以保证在多次重复使用下得到可靠的数据结果，即准确性；也可以保证所得测量结果能够反映它所应该反映的客观现实，即有效性。　　所以我们可以通过对问卷测量能力的分析来检验问卷的设计质量，对问卷设计进行质量控制，进而发现问卷设计中应注意的问题。在此基础上，通过不断改进问卷设计，提高其测量能力，最终将有助于我们得到高质量的调查数据。　　二、调查问卷的设计质量检验　　信度和效度的概念来源于心理测试中关于测验的可靠性和有效性研究，当建构和评估测量时，通常使用信度和效度这两个技术性指标。因此我们采用问卷的信度和效度分析来评估其测量能力，进而实现对问卷设计质量的检验。　　1．问卷设计质量的信度检验　　所谓问卷设计质量的信度检验，指的是对问卷测量结果准确性的分析，即对设计的问卷在多次重复使用下得到的数据结果的可靠性的检验。在实际应用中，信度检验多以相关系数表示，常用的方法有：重测信度，复本信度，折半信度，克朗巴哈 信度，评分者信度等。国内外已经有很多关于这些信度分析方法介绍的文献，在这里，笔者不再一一详述，仅列出相关公式作为参考。　　（1）重测信度，也叫稳定系数，对同一组调查对象采用同一调查问卷进行先后两次调查，采用检验公式 ，其中 为两次调查结果的协方差，为第一次调查结果的协方差， 为第二次调查结果的协方差。系数值越大说明信度越高。　　（2）复本信度，也叫等值系数，对同一组调查对象进行两种相等或相近的调查，要求两份问卷的题数、形式、内容及难度和鉴别度等方面都要尽可能的一致。检验公式同稳定系数公式，系数越大，说明两份问卷的信度越高，具体调查时使用哪一份都可以。　　（3）折半信度，也叫内在一致性系数，将调查的项目按前后分成两等份或按奇偶题号分成两部分，通过计算这两部分调查结果的相关系数来衡量信度。当假定两部分调查结果得分的方差相等时，检验用Spearman-Brown公式来表示： ， 其中 表示折半信度系数；当假定方差不相等时，采用Flanagan 公式： ，其中 、 分别表示两部分调查结果的方差， 表示整个问卷调查结果的方差。如果折半信度很高，则说明这份问卷的各项题之间难度相当，调查结果信度高。　　（4）克朗巴哈 信度，是对折半信度的改进，检验公式是： ，其中K表示问卷中的题目数， 为第i题的调查结果方差， 为全部调查结果的方差。 信度系数是目前最常用的信度分析法。　　（5）评分者信度，包括 信度和 信度，将问卷中的每道题看作是一个变量，然后通过调查的结果得分对所有问题做因子分析。得到 ， ，其中 是最大特征值，N是问题数, 是因子分析法的第i个问题的共同度。　　2．问卷设计质量的效度检验　　所谓问卷设计质量的效度检验，指的是问卷测量结果有效性的分析，即对设计问卷的测量结果反映它所应该反映的客观现实的程度的检验。具体来说，效度检验必须针对其特定的目的功能及适用范围，从不同的角度收集各方面的资料分别进行。常用的效度检验有内容效度、结构效度、难易效度、准则效度等。有关效度分析方法的详细内容，笔者也不在一一赘述。　　（1）内容效度，也叫单项和总和的相关效度分析，指的是调查问卷所采用的题项能否代表所反映的内容或主题。通常是用单个问题的得分与总得分的相关系数来反映，如果相关系数不显著，表示该题的鉴别力低，就不应该再将该题纳入调查问卷。　　（2）难易效度，在调查反映观念、态度的问题中采用检验公式：难易效度= ，其中 、 分别代表高分组和低分组样本数， 、 分别代表高分组和低分组通过该题的样本数。计算结果越大，表示该题越容易，反之该题难度较大。　　（3）鉴别效度，在对观念、态度问卷单个题的评价中采用公式：鉴别效度= ，符号含义同难易效度公式。一般我们总是希望调查问卷的每道题的鉴别效度高一些，这样可以很好的反映被调查者对问题看法的差异性。　　（4）准则效度，又叫独立标准