1、设计科学设计科学:成功调查的基本保障成功调查的基本保障上海市教科院普教所上海市教科院普教所上海市教育信息调查队上海市教育信息调查队汤林春汤林春2012.03.23一、调查小知识一、调查小知识（一）调查种类（一）调查种类v 探索性调查探索性调查v按调查目的分按调查目的分 描述性调查描述性调查v 解释性调查解释性调查项项目目 探探索索性性调调查查 描描述述性性调调查查 解解释释性性调调查查 目目的的 提供一些资料帮助调研者认识和理解所面对的问题（什么问题？）描述某些教育现象的特征或功能（是什么？怎么样？）解释教育现象背后的原因（为什么？）适适用用 预调查 现状研究、态度研究 原因研究 重重点点 发
2、现问题和提出问题，以便确定调研的重点 揭示现象本身的特点、分布特征和发展趋势 寻找原因，为对策建议提供依据 性性质质 一般通过搜集第二手资料，或请教一些内行专家，或参照类似案例 通过详细的调查和分析对已经找出的问题作如实的反映和具体的回答 通过关系分析，推断现象背后的原因 方方法法 文献搜集、专家征询、定性调查 定性描述（印象描述、概观描述、类型描述），定量描述（集中描述、离中描述、区间估计描述、定比描述、定距描述）定量方法（相关分析、回归分析、因径分析），定性方法（因果分析、功能分析、意向分析、发生分析、区位分析）结结果果 使问题更加明确和具体 呈现教育现象的现状 验证假设 （二）调查步骤（
3、二）调查步骤 调查意图 调查设计调查设计 调查准备 调查实施 分析总结 二、调查设计二、调查设计（一）调查设计的种类（一）调查设计的种类 v纵向设计、横向设计纵向设计、横向设计v纵向设计涉及随着时间推移收集资料或在特定时间纵向设计涉及随着时间推移收集资料或在特定时间内收集资料的过程。包括趋势调查、群体调查、专内收集资料的过程。包括趋势调查、群体调查、专门对象调查；门对象调查；v横向设计是指在一段时间内，对代表一个总体或两横向设计是指在一段时间内，对代表一个总体或两个以上总体的随机样本进行一次性资料收集的过程。个以上总体的随机样本进行一次性资料收集的过程。从两个或多个总体中同时选择样本，并进行有
4、关同从两个或多个总体中同时选择样本，并进行有关同一个问题的调查，叫一个问题的调查，叫“平行样本设计平行样本设计”。设设计计种种类类 调调查查总总体体 取取样样办办法法 纵纵向向设设计计 对对同同一一总总体体进进行行两两次次以以上上取取样样调调查查 趋势调查 一般总体 每次数据收集时进行随机抽样 群体调查 特定总体 每次数据收集时进行随机抽样 专门对象调查 一般或特定总体 在整个数据收集过程中，都采用相同随机样本 横横向向设设计计 一一般般或或特特定定总总体体 从从所所有有总总体体中中同同时时随随机机抽抽样样 平行样本设计 多个总体或亚总体 从所有总体中同时随机抽样 （二）调查设计的要素（六（二
5、）调查设计的要素（六WW）要要素素 要要点点 Why 为什么要搞这项教育调查？What 从调查中要获取什么信息？way 以什么方式进行调查？Who 向谁进行调查？Where 在什么地方进行调查？When 在什么时间进行调查？（三）调查设计的几个关键内容（三）调查设计的几个关键内容v1.1.样本设计样本设计v（1 1）确定样本大小的方法）确定样本大小的方法v置信区间法置信区间法v置信区间法是运用差异性置信区间、样本分置信区间法是运用差异性置信区间、样本分布以及平均数标准差或百分率标准误差等概布以及平均数标准差或百分率标准误差等概念来创建一个有效的样本。念来创建一个有效的样本。v如果利用百分率来创
6、建样本，则公式为：如果利用百分率来创建样本，则公式为：v z z2(pq)(pq)v n=n=v e e2vn n为样本大小，为样本大小，z z为置信区间的标准误差，为置信区间的标准误差，p p为总体的估计差异性，为总体的估计差异性，q q为为100-p100-p，e e为可接受为可接受的误差。的误差。v假定我们设定置信区间为假定我们设定置信区间为95%95%，则标准误为，则标准误为1.961.96，总体的差异为最大，即，总体的差异为最大，即50%50%，且可接，且可接受的误差或精确度为受的误差或精确度为3%3%。v那么：那么：n=1067n=1067v如果调查的不是百分数，而是某些度量值，则
7、可利如果调查的不是百分数，而是某些度量值，则可利用平均数来确定样本大小，其公式为：用平均数来确定样本大小，其公式为：v s2z2v n=v e2v vn n为样本大小，为样本大小，s s为估计的标准差，为估计的标准差，z z为置信区间的为置信区间的标准误差，标准误差，e e为可接受的误差。为可接受的误差。v假定我们设定置信区间为假定我们设定置信区间为95%95%，则标准误为，则标准误为1.961.96，总体的标准差为总体的标准差为100100，且可接受的误差或精确度为，且可接受的误差或精确度为3 3。v那么：那么：n=4266n=4266v如果总体较小如果总体较小(样本超过总体的样本超过总体的
8、5%)5%)，则可以使用以，则可以使用以下公式修正：下公式修正：N-nN-nv样本大小样本大小=样本大小公式样本大小公式 v N-1N-1vN N为总体数，为总体数，n n为样本大小，假定前例是某次调查需为样本大小，假定前例是某次调查需要的样本大小，但调查总体却只有要的样本大小，但调查总体却只有1000010000，那么经，那么经调整后的样本大小应为调整后的样本大小应为32303230。（2 2）抽样方法）抽样方法 v从大的方面说，抽样方法有概率抽样方法与从大的方面说，抽样方法有概率抽样方法与非概率抽样方法。非概率抽样方法。v非概率抽样方法一般是在调查者对调查总体非概率抽样方法一般是在调查者对
9、调查总体不了解的情况下，采取的无奈之举，代表性不了解的情况下，采取的无奈之举，代表性较低，容易产生较大的误差。较低，容易产生较大的误差。v概率抽样方法概率抽样方法是以概率理论为基础，使总体中每一是以概率理论为基础，使总体中每一个体都有机会被选中，从而能保证样本的代表性。个体都有机会被选中，从而能保证样本的代表性。概率抽样方法包括许多具体的抽样方法，简单些的概率抽样方法包括许多具体的抽样方法，简单些的有简单随机抽样法、等距抽样法、整群抽样法等，有简单随机抽样法、等距抽样法、整群抽样法等，复杂一点的有分层抽样法、分阶段抽样法及复杂一点的有分层抽样法、分阶段抽样法及PPSPPS抽抽样法等。样法等。v
10、不同的抽样方法有不同的特点与适用条件，采取何不同的抽样方法有不同的特点与适用条件，采取何种抽样方法，需要根据调查的目的，调查者对总体种抽样方法，需要根据调查的目的，调查者对总体的了解程度，调查的时间、经费、人力等条件确定。的了解程度，调查的时间、经费、人力等条件确定。v譬如上海市中小学生课业负担调查，譬如上海市中小学生课业负担调查，如果调查的目如果调查的目的是了解上海市中小学生课业负担的总体情况，则的是了解上海市中小学生课业负担的总体情况，则只要求样本能代表全上海市学生总体的分布特点即只要求样本能代表全上海市学生总体的分布特点即可，如符合上海市民办学校与公办学校学生的比例，可，如符合上海市民办
11、学校与公办学校学生的比例，中心城区、次中心城区与远郊区的学生比例，中学中心城区、次中心城区与远郊区的学生比例，中学与小学生的比例等。这样采用分层抽样方法即可。与小学生的比例等。这样采用分层抽样方法即可。即先将上海市按公办民办性质或地域分布等标准将即先将上海市按公办民办性质或地域分布等标准将学校进行分类，然后在每一类里随机抽取若干所学学校进行分类，然后在每一类里随机抽取若干所学校，再从选取的学校里随机抽取若干学生；校，再从选取的学校里随机抽取若干学生；v如果调查目的是对各区县中小学生课业负担进行比如果调查目的是对各区县中小学生课业负担进行比较，那么重点是所取样本要能代表每区县学生的分较，那么重点
12、是所取样本要能代表每区县学生的分布情况。布情况。v如每区县学生样本要能反映出每区县学生在公办与如每区县学生样本要能反映出每区县学生在公办与民办学校中的分布比例、城镇与农村的分布比例、民办学校中的分布比例、城镇与农村的分布比例、中学与小学的分布比例等等。这样最好是采取分阶中学与小学的分布比例等等。这样最好是采取分阶段抽样方法。即先要从全市随机抽取若干个区县，段抽样方法。即先要从全市随机抽取若干个区县，然后从抽取的区县中按分层抽样的方法，以公办与然后从抽取的区县中按分层抽样的方法，以公办与民办学校的性质、学校区域分布及中小学分布等标民办学校的性质、学校区域分布及中小学分布等标准进行分层抽样，直至抽
13、出合适的学生样本。准进行分层抽样，直至抽出合适的学生样本。v对调查总体的了解程度直接决定调查者采取对调查总体的了解程度直接决定调查者采取的抽样方法。如果对调查总体一无所知，则的抽样方法。如果对调查总体一无所知，则使用概率抽样的方法几乎不可能；即使是对使用概率抽样的方法几乎不可能；即使是对总体有所了解，但了解的程度也直接影响抽总体有所了解，但了解的程度也直接影响抽样方法的使用。样方法的使用。v假设我们要从假设我们要从A A、B B两区抽取两区抽取900900名学生，要求名学生，要求能代表这两区的公办学校与民办学校，如果能代表这两区的公办学校与民办学校，如果我们知道两区公民办学校的数量，但对两区我
14、们知道两区公民办学校的数量，但对两区内部各学校的学生数不甚了解，则可以采取内部各学校的学生数不甚了解，则可以采取以下抽样方案，即按比例抽取以下抽样方案，即按比例抽取3030所学校，然所学校，然后每校抽取后每校抽取3030名学生。名学生。区 学校性质 学校数 抽取比例 样本学校 抽样比例 学生数 公办 26 24.8%6 每校30人 180人 A区 民办 5 24.8%1 每校30人 30人 公办 80 24.8%20 每校30人 600人 B区 民办 10 24.8%3 每校30人 90人 总 计 121 24.8%30 每校30人 900人 v如果掌握了每校学生数，我们最好采取不等如果掌握了
15、每校学生数，我们最好采取不等比的抽样方式比的抽样方式(即即PPS)。由于这一方案考虑。由于这一方案考虑了学校的规模，使规模大的学校有更大的被了学校的规模，使规模大的学校有更大的被抽中机会，也就弥补了后一阶段规模大的学抽中机会，也就弥补了后一阶段规模大的学校学生被抽中机会少的不足，从而使获取的校学生被抽中机会少的不足，从而使获取的样本更具代表性，使精确性更高。样本更具代表性，使精确性更高。学 校 规 模 所 占 比 例 累 计 号 码 范 围 所 选 号 码 对 应 单 位 1 3000 1.3%1.3%000-012 003 单 位 1 2 2500 1.0%2.3%013-022 3 150
16、0 0.6%2.9%023-028 4 4000 1.7%4.6%029-045 0036 单 位 2 5 3000 1.3%5.8%046-057 120 2200 0.9%99.1%982-990 121 2300 1.0%100.0%991-999 993 单 位 30 （3 3）分析抽样的质量）分析抽样的质量v一是要看样本大小，样本大小要求达到一定一是要看样本大小，样本大小要求达到一定的统计要求；的统计要求；v二是要将样本与总体进行比较，如果样本与二是要将样本与总体进行比较，如果样本与总体的情况相符，则认为样本具有代表性。总体的情况相符，则认为样本具有代表性。v还有两点值得注意：还有两
17、点值得注意：v首先，根据统计计算出来的样本大小，首先，根据统计计算出来的样本大小，是指经调查是指经调查后，实际回收的有效调查样本大小，而非抽样时的后，实际回收的有效调查样本大小，而非抽样时的样本大小。所以在抽样时，要根据调查方法的不同，样本大小。所以在抽样时，要根据调查方法的不同，确定一个折扣率，一般在确定一个折扣率，一般在5%-25%5%-25%为宜；为宜；v其次，要分析对样本进行调查的可行性。其次，要分析对样本进行调查的可行性。根据抽样根据抽样规则，选取了样本后，我们还要认真分析调查的条规则，选取了样本后，我们还要认真分析调查的条件和需要。如果估计到调查人员在规定的时间与人件和需要。如果估
18、计到调查人员在规定的时间与人力内，无法完成调查任务，那么在不影响调查样本力内，无法完成调查任务，那么在不影响调查样本的代表性与精确性的前提下，应该考虑对样本进行的代表性与精确性的前提下，应该考虑对样本进行适当调整，以利于调查的顺利实施。适当调整，以利于调查的顺利实施。2.2.问卷设计问卷设计v（1 1）问卷设计的步骤）问卷设计的步骤 确定调研目的和限制性因素 确定数据收集方法 确定问题的回答形式 决定问 题的措辞 确定问卷的编排流程 评估问卷 获得各方的认可 确定并印制问卷 试测与修订 设计阶段 准备阶段 修订阶段 定稿印制 （2 2）问卷的题型）问卷的题型 v直接性问答题直接性问答题v您感觉
19、自己工作的压力您感觉自己工作的压力v（1）很小）很小 （2）比较小）比较小（3）适中（）适中（4）比较大）比较大（5）很大）很大v间接性问答题间接性问答题v据您所知，按考试成绩对学生排名次并向学生及家长公布的据您所知，按考试成绩对学生排名次并向学生及家长公布的做法，在您接触的教师中做法，在您接触的教师中v（1）比较多）比较多 （2）比较少）比较少 （3）没有）没有 v假设性问答题假设性问答题v如果让您重新选择职业，您是否还会选择做教师如果让您重新选择职业，您是否还会选择做教师v（1）会）会 （2）不会）不会 （3）不清楚）不清楚v开放式问答题开放式问答题v您每周的课时节数为您每周的课时节数为
20、节节v封闭式问答题封闭式问答题v您现在就读的学校阶段是您现在就读的学校阶段是v（1）小学（）小学（2）初中）初中 （3）高中）高中（3 3）答案设计）答案设计v二项选择法二项选择法v您是否是班主任您是否是班主任v（1）是）是 （2）否）否 v单项选择法单项选择法v当您在课堂上对老师的讲解提出异议时，老师最有可能的反应是（限选当您在课堂上对老师的讲解提出异议时，老师最有可能的反应是（限选一项）一项）v（1）共同探讨，耐心解答）共同探讨，耐心解答 v（2）视时间是否够用而定。如不够，下课再谈）视时间是否够用而定。如不够，下课再谈 v（3）认为是捣乱，加以训斥）认为是捣乱，加以训斥 v（4）不予理睬
21、，继续讲课）不予理睬，继续讲课 v（5）敷衍，告诉）敷衍，告诉“下课再研究下课再研究”v（6）为保住）为保住“面子面子”，自圆其说，自圆其说 v（7）肯定学生的想法，鼓励大家提出自己的见解）肯定学生的想法，鼓励大家提出自己的见解 v多项选择法多项选择法v如果您的实际情况是工作量如果您的实际情况是工作量“增加增加”了，您认为主要是因为了，您认为主要是因为（本题可多选）（本题可多选）v课时增加课时增加 v备课时间增加备课时间增加 v批改作业时间增加批改作业时间增加 v教研活动时间增加教研活动时间增加 v补课或辅导时间增加补课或辅导时间增加 v住校值班住校值班 v做学生思想工作时间增加做学生思想工作
22、时间增加 v其它其它 v排序法排序法v您对上海城市的印象您对上海城市的印象（请根据印象深刻程度由深到（请根据印象深刻程度由深到浅将选项的号码填入相应位置）浅将选项的号码填入相应位置）v第一：第一：第二：第二：第三：第三：v（1）建筑漂亮）建筑漂亮 （2）时尚精致）时尚精致 v（3）人口密集）人口密集 （4）城市太大）城市太大v（5）繁华热闹）繁华热闹 （6）道路拥挤）道路拥挤 v（7）干净卫生）干净卫生 （8）喧闹嘈杂）喧闹嘈杂v（9）陌生，没有什么印象）陌生，没有什么印象 （10）其他）其他 v回忆法回忆法v请您回忆一下，当您小时候向父母提问时，父母的反应是请您回忆一下，当您小时候向父母提问
23、时，父母的反应是（可选多项）（可选多项）v（1）如果知道答案会耐心解答，不知道答案就会不耐烦）如果知道答案会耐心解答，不知道答案就会不耐烦 v（2）总是耐心解答，如果不知道答案，指点我去查阅书本）总是耐心解答，如果不知道答案，指点我去查阅书本或请教他人或请教他人 v（3）不耐烦）不耐烦 v（4）敷衍，以）敷衍，以“您长大就知道了您长大就知道了”之类作为回答之类作为回答 v（5）认为问题幼稚，不屑于回答）认为问题幼稚，不屑于回答 v（6）如果对父母的解答表示怀疑，父母不高兴）如果对父母的解答表示怀疑，父母不高兴v（7）其他）其他 v比较法v以下三种版本的英语教材，您最喜欢哪一种？以下三种版本的英
24、语教材，您最喜欢哪一种？v（1 1）牛津版）牛津版 （2 2）上海版）上海版 （3 3）人教版）人教版投影技法投影技法v联想技法联想技法v请您说出由以下词引出的联想。v课堂 。v完成技法完成技法v请您完成以下句子。v在上课时，一个学生低头不语，我会 。（4 4）题目设计中的常见病）题目设计中的常见病v问题设计得不具体、不明确，使调查对象不问题设计得不具体、不明确，使调查对象不知道如何作答。知道如何作答。v你经常开展信息化教学吗你经常开展信息化教学吗?v“信息化教学信息化教学”是什么是什么?是指教师在教学时采用信息是指教师在教学时采用信息技术呢技术呢?还是将信息技术与学科教学进行整合抑或还是将信
25、息技术与学科教学进行整合抑或是对学生进行信息知识或技术方面的培训是对学生进行信息知识或技术方面的培训?很难确很难确定定,教师即使回答了又说明什么问题呢教师即使回答了又说明什么问题呢?v问题涉及调查对象的隐私或敏感问题，调查问题涉及调查对象的隐私或敏感问题，调查对象肯定不会给出真实答案。对象肯定不会给出真实答案。v你能够主动抵制黄、赌、毒、反动等不良信息吗？你能够主动抵制黄、赌、毒、反动等不良信息吗？v这事关学生的品德这事关学生的品德,绝大部分学生肯定会回答绝大部分学生肯定会回答“能能”,这样就了解不到事实的真相这样就了解不到事实的真相,达不到调查目达不到调查目的。的。v问题带有暗示性，诱导答题
26、者做出预期的回问题带有暗示性，诱导答题者做出预期的回答。答。v有许多冲突是由于同学间相互不了解而导致的，您有许多冲突是由于同学间相互不了解而导致的，您认为上海同学是否需要了解您们民族的风俗习惯？认为上海同学是否需要了解您们民族的风俗习惯？v（1 1）需要）需要 （2 2）不需要）不需要 （3 3）不一定）不一定v给出的答案交叉、不周全。给出的答案交叉、不周全。v如果您和其他人产生矛盾时，您多数会如果您和其他人产生矛盾时，您多数会v(1)(1)尽可能理解他们的好意尽可能理解他们的好意 (2)(2)消极抵触消极抵触 v(3)(3)直接冲突直接冲突 (4)(4)耐心解释耐心解释v(5)(5)回避接触
27、回避接触 （6 6）求同存异、学会宽容）求同存异、学会宽容 （5 5）调查问卷的规范格式）调查问卷的规范格式v问卷标题问卷标题v问卷说明问卷说明v被访者基本资料被访者基本资料v调查主题内容调查主题内容v编码及作业证明记载编码及作业证明记载v附例：附例：高等学校自主招生对高中教育改革的影响高等学校自主招生对高中教育改革的影响（教师卷）（教师卷）（四）调查方案的基本格式（四）调查方案的基本格式v调研题目调研题目v调研目的调研目的v调研内容调研内容v调研时间调研时间v调研方式调研方式v调研对象调研对象v调研实施计划调研实施计划v调研经费预算调研经费预算v附例：附例：京、津、沪、渝、南京、杭州、南昌京
28、、津、沪、渝、南京、杭州、南昌7城市中小学生创造力及其城市中小学生创造力及其培养状况调研方案培养状况调研方案建议大家进一步参阅以下文献建议大家进一步参阅以下文献v郭强主编：郭强主编：调查实战指南调查实战指南，中国时代经济出版，中国时代经济出版社社2004年版。一套十册。年版。一套十册。v威廉维尔斯曼威廉维尔斯曼美美著，袁振国主译：著，袁振国主译：教育研究方教育研究方法导论法导论，教育科学出版社，教育科学出版社1997年版。年版。v陶保平、黄河清主编：陶保平、黄河清主编：教育调查教育调查，华东师范大，华东师范大学出版社学出版社2005年版。年版。v汤林春：汤林春：走出调查抽样的误区走出调查抽样的误区，上海教育科上海教育科研研2006年第年第6期。期。v汤林春：汤林春：试论调查失真的原因与对策试论调查失真的原因与对策，上海上海教育科研教育科研2007年第年第9期。期。谢谢大家！
