问卷设计及数据分析初步 柯政 zke@kcx.ecnu.edu.cn.

Presentation on theme: "问卷设计及数据分析初步 柯政 zke@kcx.ecnu.edu.cn."— Presentation transcript:

1 问卷设计及数据分析初步 柯政

2 主要参考资料 Neuman, W.L.著，郝大海译，《社会研究方法》，中国人民大学出版社，2007年。
Johnson, B. & Christensen, L. (2008). Educational Research: Quantitative, Qualitative, and Mixed Approaches (third edition). London: Sage. Neuman, W.L.著，郝大海译，《社会研究方法》，中国人民大学出版社，2007年。 SPSS公司提供的一份有关如何作调查的免费指南： 一个著名调查研究专家的个人网站，其中有一些相关论文：

3 更多内容，请登录 ecnu88

4 内容纲要 一、问卷调查的性质 二、问卷设计的基本原则和步骤 三、问卷数据结果分析与处理

5 一、问卷调查的性质 数据收集方式 为什么需要数据？ 科学研究的证据原则 还有哪些方式呢？ 实验 访谈、观察 文本分析

6 一、问卷调查的性质 基于证据的需要 优势 弥补实验研究的局限 适用面广、成本相对低 推论程度相对高

7 一、问卷调查的性质 基于证据的需要 优势 缺陷 因果推论比较困难 有些内容不适宜

8 一、问卷调查的性质 基于证据的需要 优势 缺陷 效度与信度 效度 需要证明 信度 可以计算 内部一致性

9 二、问卷设计的基本原则和步骤 15条基本原则

10 1、明确研究目的 确定自己明白了自己想干什么！ 验证性研究？或探索性研究？ 最糟糕的结果是？ 前期准备再怎么强调都不为过！！ 文献阅读
反思、访谈、观察

11 2、了解你的研究对象 记住：是他们，而不是你自己填写问卷。 尽量使用自然和熟悉的语言，选择恰当的阅读难度 注意文化差异

12 3、题目需清晰、简短 确保题目所传达的意思是清晰而没有歧义的 尽量让题目简短一些

13 4、不要使用有导向性和价值色彩的词语 导向性词汇往往暗含着研究者倾向，影响或者引导研究对象作出特定的反应。如“这次课程改革受到很多人的批评，你对它怎么看呢？”。 价值色彩的词语意味着用词本身就能影响研究对象的选择，而不是内容本身。如公平、懒惰、欺骗、诚恳

14 5、一道题目不要涉及两个议题 如“你认为教师应该多跟家长和学校领导联系吗” 题目中出现“和”或者“或”，就要考虑是否可以拆分成两道题目
不要直接询问有关两个变量相关关系的想法，如“你会给那些经常讲笑话的老师更高的评价吗？”，而是要拆开两道独立的题目

15 6、避免使用“双重否定” 你是否同意如下的说法：不应该要求学生通过所有的科目后才能毕业？ A、同意 B、不同意 会加重心理负担

16 7、恰当选择题型 开放题或者封闭题 单选或者多选

17 8、选项不重叠、不遗漏 教龄 A、5年以下 B、5～10年 C、10～15年 A、1～3年 B、4～9年 C、10～20年

18 9、选择恰当的选项设计 类别描述 等级刻度（rating scale） 哪种好？ 点数（4～11） 文字描述 对称
强烈反对 强烈支持 对称 哪种好？

19 10、考虑运用多个项目来测量一个抽象的特质（构造）
如：教师对学校的满意度 增加信度和效度 可相加？

20 11、考虑用多重方法来测量 避免测量方法效应 各种方法的验证、结合，如有关满意度的调查，把问卷与访谈结合起来。 效度检验

21 12、设计题目时就要考虑以后怎么分析数据 为什么出这道题目？ 可能的数据结果是什么？ 怎么分析这些数据？频数分析？相关？ 能说明什么？

22 13、问卷要有恰当的结构，有利于被试使用 先题目，再背景信息
不要把最重要的题目放在最后（Roberson & sundstrom,1990) 开始的题目尽量不要带有“威胁”味道，如要求对领导进行评价 不要太多的关联问题（除非进行网络问卷调查） 要有清晰的标题和说明 如果要测量好几个内容，那么各块内容之间要适当分开，加上小标题或者其他说明提示，并加上题目编号 不要吝啬纸张！ 专业！

23 14、问卷一定要试测 请被试“出声思维”，检测被试的反应与预期的是否一致 计时，检验问卷是否太长 要对他们进行访谈

24 15、注意研究伦理 记住：问卷本身可以传递信息，而信息都是有价值偏见的。
例如，一项有关出国留学意向调查问卷往往会调查诸如是否有海外亲戚、家庭有多少台电脑等信息，而这会刺激甚至伤害部分学生，尤其是当反映项编制不合理的情况下。

25 二、问卷设计的基本原则和步骤 15条基本原则（Johnson & Christensen, 2008) 问卷编制的基本流程

26 问卷编制的流程图 第一步：进行文献检索，准备编制问卷 考虑： 尽量使用已有的问卷，而不是编制全新的问卷 是否了解研究对象？
对研究问题了解多少？ 想调查什么内容？ 被试可能用什么词语来表达意思？ 如何进行问卷调查？

27 问卷编制的流程图（续） 第二步:编制题目 考虑： 是否参考过其他类似的问卷？ 是否看过其他高质量的问卷，了解了基本的结构和模板？
重要的方面是否都已经涵盖？ 是否询问过朋友，题目表达是否清晰？

28 问卷编制的流程图（续） 第三步：编排题目，完成问卷 考虑：
题目（包括分部分题目）、导语、结语、背景信息、各题目（部分）次序、页码、页面空白等信息是否齐全、恰当 卷面看上去是否专业？是否征询过别人的意见？

29 问卷编制的流程图（续） 第四步：试测 考虑： 选择哪些人进行试测，在什么样的情况下试测？ 是否以及如何收集问卷的效度、信度信息？
是否进行足够的修改？

30 问卷编制的流程图（续） 除非前面所有的问题都已解决了，否则不要轻易走这一步！这不仅是研究原则，而且还是经济原则！ 第五步：施测 如何施测

31 三、问卷数据结果分析与处理 数据分析的基本类型与结构

32 量化数据整理分析的基本结构 描述分析 单变量 双变量 多变量 推断统计 基于样本的数据对总体进行统计推断 参数检验 非参数检验

33 三、问卷数据结果分析与处理 数据分析的基本类型与结构 单变量（题目）分析 频数统计（Excel即可） 单项选择（排序功能）
多项选择（查找功能） 集中趋势描述（只适合定距或定序数据） 平均数、中位数 离散趋势描述（只适合定距或定序数据） 标准差（方差）

34 数据的类型 Nominal（定类） Ordinal（定序） Interval（定距） Ratio（定比）
简单的分类，如男、女，即使用数字表示，也不能进行任何加减乘除 Ordinal（定序） 排名；平均分没有意义 Interval（定距） 没有绝对零值；问卷中的等级数据； Ratio（定比） 有绝对的零值

35 在SPSS上的实现 打开数据——Analyze——Descriptive Statistics——Descriptives
然后把选择要计算的变量从左边栏送进右边名为Variable(s)的栏目中 点击Options按钮，选择要统计的内容

36 操作截图

37 统计结果截图

38 三、问卷数据结果分析与处理 数据分析的基本类型与结构 单变量（题目）分析 双变量（题目）分析 散点图 双变量表 相关系数

39 散点图 常用而重要！ 可看出相关的类型 要转化成数字，如把A替代成1

40 曲线相关

41 曲线相关

42 双变量表示例（一） 男 女 总计 同意 78 30.5％ 92 36.4％ 170 没意见 30 11.7％ 49 19.4％ 79 反对
148 57.8％ 112 44.3％ 260 256 100％ 253 509

43 双变量表示例（二） 积极 一般 消极 总计 同事关系 教学质量 收入 管理制度 教学条件 办学理念 …

44 相关系数计算 如果数据类型允许的话，还可以统计不同变量之间的相关系数，如教龄与学生受欢迎程度的相关
不同数据类型需要用不同的统计方法，不同的相关系数。我们常用的相关系数是Pearson相关系数r，适用于两组都是定比或者定距数据。Spearman系数是适用要求低一些的相关系数，可以适用定序数据。Kendall系数最常用的一种情况是考察多位评分者评分的一致性（相关）程度或者说称为是评分者系数。

45 在SPSS上的实现

46 统计结果截图

47 三、问卷数据结果分析与处理 数据分析的基本类型与结构 单变量（题目）分析 双变量（题目）分析 用SPSS对问卷本身的分析
内部一致性分析（重要的一个信度检验） 问卷效度分析

48 内部一致性检验 例子：假设我们编制了一套学习能力问卷，由5道题目构成（语数外物化）。有43人被试参加了这套问卷，检验这套问卷的内部一致性。

49 在SPSS上的实现

50 操作截图

51 相关矩阵 内部一致性系数

52 因素分析 例子：我们假设这5道题目是在测量一个因素，或者两个因素，现在需要通过因素分析看看是否与预期的相符合。或者说，我有N道题目，我想知道这N道题目进行因素归类，即可以归结为几个维度的内容。

53 因素分析在SPSS上的实现

54 默认为一个因素以上，也可以自己定义

55 与预期一样，这5道题目测量的是一个因素内容

56 如果强行定义为2个因素呢