笔趣阁中文

4 1 教育政策监测与评价体系的理论研究（第2页）

通过调研采集资料是监测与评价资料获取的重要途径。通过调研，能够根据监测与评价的需要，有针对性地收集相关的资料信息，为政策监测与评价提供强有力的数据支持，是监测与评价资料收集最重要的途径之一。调研材料的收集一般来说是一项比较浩大的工程，需要耗费相当大的人力、物力和财力。

目前调研资料的获取可以通过实地调研、网络调研等方式进行。实地调研是最常用的一种方式，这种方式直观、易操作，但却耗时、耗力、耗财。近年来，随着电脑的普及和信息化的发展，网络也成为一种高效、低耗的调研方式，比如基于网络的舆情调查等。基于调研获取监测与评价信息时需要注意以下几个问题。

第一，使用科学的抽样方法，确保所选择的样本具有较好的代表性。根据监测与评价设计的需要，样本的选择有所不同，主要可分为三类。（1）全面调查。即将特定时间、特定范围的所有样本都列入调查范围。（2）抽样调查。在任何抽样调查中，抽样技术的选择与应用是不可避免的。一般而言，样本抽取的方法分为简单随机抽样、分层随机抽样、多阶段抽样、整群抽样、系统抽样、非概率抽样等。在实际的操作中，应当根据监测与评价设计和需要进行选择或结合使用。（3）个案调查。通过对一个或多个样本进行分析，从中收集各种信息，这是定性方法收集资料的重要途径。个案调查对于研究者的能力具有较高要求。

第二，量化方法与质性方法相结合，确保获得全面的监测与评价资料。量化方法和质性方法是社会科学领域从对立走向融合的两大重要研究方法，两种方法在方法论基础、目的、表现形式、抽样方法、数据收集方式、用途等方面都存在很大的差异。在实地调查中，应当坚持量化方法和质性方法相辅相成，相互结合的原则，最大程度地挖掘数据所蕴含的价值，通过量化研究方法获得关于政策实施情况的相关量化数据，客观、说服力强，辅之以质性方法可以挖掘更复杂的问题，比如调查对象产生某种行为结果的原因、过程及对政策的态度和观点。两种方法相结合才能确保监测与评价资料的全面和深入。

量化方法收集资料具有标准化的格式，研究者从整体的研究设计出发制定资料收集方法，主要通过问卷调查、访谈、观察等手段获得。每一个调查对象都采用统一格式记录信息，并将研究问题数量化，结论明确，更有说服力。量化方法的基本逻辑是调查样本对总体的代表性。量化方法收集资料的质量与抽样设计紧密相关，被认为是一种最常用的数据收集方式。定量方法收集资料需要丰富的统计知识支撑，可以在广泛的目标群体中进行，在量化分析中对影响力的规模和分布进行调整，进而使评价结果更具有说服力。其最大的不足在于，尽管能收集大量的数据，但收集、录入、统计、分析数据往往需要耗费很长的时间，这往往会影响监测中对于时效的要求；同时在这些环节中对于抽样技术、软件使用技术的要求往往较高。

质性方法主要包括观察法和访谈法等。采集资料的途径比较多元，主要有知情者访谈（keyinformantinterview）、焦点小组讨论（focusgroupdis）、直接观察（directobservation）等，在现场对研究对象进行直接或间接的观察，通过感知或记录获取有关感性资料。质性方法收集资料重点在于与相关群体的深入接触，对项目实施有广泛、细致的了解。通过质性的、参与式调查的方法可以研究比较复杂和富有争议的问题，而且可以同时研究问题的原因和结果，但其成本较高，难以进行大样本调查，代表性和外推性较小。

两种资料收集方法各有所长，将两类方法结合起来，扬长避短，可以起到相互补充和相互验证的作用，以保证研究结果的客观真实性。

此外，在调研资料收集过程中，应当尽可能地通过严格规范的监测过程，使用科学严谨的调研工具，收集相关的资料和信息，为全面把握政策实施情况、诊断政策问题、提出改进方案提供参考信息。

2。二手资料

二手资料通常是相关部门或单位因为其他目的已经收集好的资料，资料是对原始调查信息处理后的内容，如统计年鉴、相关地区政府机构的报告、管理者的执行报告等。二手资料的收集相对比较容易和便捷，成本较小，并且有些资料并非实地调研能够获得的。相对于调研资料，其不足之处在于，针对性、时效性、全面性和客观性都有待评估。因此，有必要对二手资料信息进行相关评估。此外，二手资料也可以划分为定性资料和定量资料。

总之，每一个监测与评价指标都需要有清楚的、确定的数据来源。通常来说，数据信息采集是官方统计机构数据库、政策执行部门日常管理数据库及实地调查数据库的有机结合。但是，在具体的数据采集和使用过程中需要做出一定的调整。因此，最初的数据收集工具在某些情况下（尤其是在评价某项重要政策时）需要执行特殊的调查而做出相应的修改和补充。

4。1。2。3教育政策监测与评价的数据管理与分析

数据的管理同样非常重要，必须以数据库的形式对数据进行管理，以方便和保证研究人员对数据进行相关的统计分析。数据的管理涉及四个步骤。

第一，数据录入软件的选择。数据录入软件的选择对于数据质量的保证非常重要。随着数据管理水平的不断提升，产生了专门的数据录入软件。如“西发”项目监测与评价调查数据录入采用的是CSPro软件。CSPro是由美国普查局开发、中国国家统计局计算中心进行汉化移植的。它可以让用户在单一的集成开发环境中创建、修改和运行数据录入、批量编辑及交叉制表应用程序，它可按照每个观察单位（一个或多个调查问卷）来处理数据，其中每个观察单位可以由一个或多个数据记录组成。

第二，数据录入模板的建立。数据录入模板建立的关键在于编码，包括样本的编号、变量名的编写、变量的取值等方面。

第三，数据的录入。数据录入最重要的是培训数据录入人员，确保其熟悉数据编码和软件及相关要求。从保证数据录入质量的角度，双份录入校对及录入数值范围设定等措施非常重要。EpiData软件具有双份输入校对的功能，可以打印出双份独立录入后的不一致部分，数据管理者可以较为容易地进行修改，从而有效地减少录入错误的发生。

第四，数据的清洗。大规模的数据调查中，调查者填写错误、数据录入错误等情况在所难免，数据错误对数据分析的准确性会产生很大的影响。因此，在数据管理中有必要对数据进行清洗。数据清洗主要是针对异常值、缺失值等进行处理，目前主要使用样本删除、均值替代、逻辑插补、回归分析插补等方法。

明确相关机构在数据分析中的责任非常重要，数据分析不仅包括对指标的简单描述性分析，还包括通过计量模型探究指标间的关联性及进一步挖掘其背后的深刻含义。

4。1。2。4教育政策监测与评价的信息公告和发布系统

监测与评价报告应当恰当地发布。其中，最为重要的是确定发布的时间及发布的方式，进而确保关键信息能够有效地传递给政策管理者与决策者。此外，为应对公众问责，也要向公众及相关学术界发布政策执行效果方面的信息。

4。1。2。5关键执行者间的组织安排

由于监测与评价系统包含不同的机构，确定关键执行者（参与者）之间的责任非常重要。同时，需要在不同执行者之间构建一个清晰的、高质量的、便捷的信息交流机制。

监测与评价系统的组织架构由三部分组成（见图4-1），分别是负责政策制定的中央政府及相关部委（如教育部、财政部、科技部等）、省政府及市（县）政府；负责政策分析的监测和评价机构；负责数据采集工作的统计局及下属城调队、专项数据收集人员等。在这一组织系统中，各层级的监测与评价机构居于核心地位。这些机构设计监测和评价方案，对下要与统计部门沟通协调，帮助他们完成数据采集工作；对上要对上级主管部门负责，提交政策实施的监测报告和评价报告；同时，他们还需要回应社会各界、科研机构、媒体及捐赠者的问责，采纳各方的合理意见和建议。

图4-1监测与评价系统的组织架构

4。1。3教育政策监测与评价系统的建构

构建教育政策监测与评价系统并非一蹴而就，需要政策制定部门、政策分析部门及数据收集部门各司其职，同时，各部门还要保持沟通协调，才能按照如下步骤建立起一个结果导向的政策监测与评价系统。笔者参考国际组织政策监测与评价的工作经验，将教育政策的监测与评价系统的构建归纳为10个步骤。

（1）协商做好建构监测与评价系统的准备工作（人员配备，资金筹措，监测与评估方案设计等）。

（2）对监测与评价的目标达成一致意见。

（3）选择考察监测和评价目标的关键指标。根据政策目标设定背景指标、投入指标、产出指标、结果指标和影响指标果。研究者根据政策预期目标设立一级指标、二级指标……并用科学方法为各指标赋权重。