如何设计教师培训质量监测与评估方案

——基于结果的教师培训与管理

北京教育学院 李 晶

LJJKS@163.COM

基本观点

科学的教师培训质量监测与评估方案一般没有统一的标准，因项目而异。

项目设计中的主题、目标、课程与活动、培训方式和质量检测与评估是个有机的、自洽的体系。（基于结果的思想—— RBM, Results-Based Manag

ement ）有时也迁就多数人的想法给出一些参考意见。

学习计划主题：设计新教师培训质量监测与评估方案标准 过程指标 结果指标 数据收集

形成科学、可行的新教师培训质量评估方案

•学习什么是结果指标•整理与检结果过程指标达到符合要求

•结果描述的是次要利益相关人的行为变化•结果指标可观察、可评价

•修改后的方案、•交流时的表现

形成科学、可行的新教师培训质量监测方案

•学习什么是过程指标•整理与检验过程指标达到符合要求

•过程指标能够保证结果的实现•过程指标可操作

体现方案的一致性

整理与检验主题、目标、结果、过程之间的关系

主题、目标、结果、过程内容自洽

确定实施计划

根据项目的进行提出计划

步骤、时间、人员、方式具体、可行

一、了解基于结果的管理思想

基于结果的管理是一种思维方式，一套工具，能帮助我们：1. 将项目理念转换成一系列活动和预期变化。2. 采用的方式具有如下特点：3. 跟踪计划的进展情况，并利用该信息。

规范的步骤1 。概念设计（项目性质，核心概念界定）2 。规划（实施方案）3 。日常运作 （执行过程指标，瞄准结果）4 。风险识别和管理 5 。监测和评估6 。报告

例如：项目性质，核心概念界定• 绿耕：性质：政府期望，社会发展核心概念：农村校级骨干（什么是？为什么？） 双提高一落实（内涵是什么） 三段式（依据、相互关系、阶段目标） 概念的演变及原因形成共识。

基于结果的管理方法工作流程

准备项目逻辑模块 收集、分析数

据并进行报告

随着项目继续，调整

设计监测和评估

识别并管理风险

准备项目逻辑模块

活动 产出 结果 影响 / 效果

建立逻辑模块……

如同拼图一样：• 这儿有一项活动，• 那儿就有结果，• 结果会产生影响，• 直到各个部分按一定

的逻辑组合在一起。

准备一个逻辑模块

成果测量框架

情境评估

建立逻辑模块前的一项任务1. 形势分析

- 使命、能力、经验（自身）- 问题和机遇（外部）

2 。需求调查与评估3 。阐明优先事项

准备一个逻辑模块

投入

• 政策• 师资• 资源（一般与特殊）• 经费（项目性质，确定合理比例）• 是否能获得项目所需的人力和物力资源

准备一个逻辑模块

活动（过程指标）在教师培训项目中相当于课程、

活动和方式

• 描述基本活动－ 你要做什么。 归纳为 5 到 8句陈述。

•每个活动要设立具体的过程指标。

准备一个逻辑模块

产出

• 在你完成活动时要能够看到产出。•每个产出至少与一项活动有关。例如：培训了多少人、开了什么课、满意程度。

准备一个逻辑模块

结果

• 描述以后可能取得的结果（你拥有十足把握）

• 描述你想在项目中取得的主要变化（可观察、可测量）。

• 要能够在项目结束时或结束后不久看到成果。•每个都自然地源于几个产出。是由活动导致

的。•每个结果要设立具体的结果指标。

准备一个逻辑模块

指标类型

•目标性的

•指导性的

•中性的

• 80% 达到良好• 将提高良好的百分比• 良好的百分比

类型 例如

• 选取初中语文的代表性篇目为例，系统讲授各类实用文体的解读，更新和丰富教师的文体知识。紧扣每次讲授的要领，学员进行系统的文本分析练习，提高文本解读能力。

• 掌握记叙类、说明类、议论类实用文章及其细类（如新闻报道、说明书、杂文）的文体特征和阅读要领。阅读实用性文章，能快速准确地提取和加工信息。基于先进的文体知识，准确把握各类文体不同的阅读方法和教学着眼点。

• 高考语文试卷中现代文阅读题的题型和难度为参照，以答题分数作为阅读技能的结果指标（ 80 分以上）。

例如：掌握各类实用文章的文体特征和阅读要领

• 开设了学生数学学习基本规律及其实践意义课程；开设了学生研究的意义、方法课程，课程中有学生调研的案例分析；组织学员进行了学生研究实践；组织学员进行了学生研究实践的交流并做指导；

• 学生分析中有经过调研获得的与要学内容有关的知识基础分析；学生分析中有经过调研获得的与要学的内容有关的学生的已有经验的描述；学生分析中有经过调研获得的与要学的内容有关的学生的已有方法的描述；学生分析中有经过调研获得的与要学的内容有关的学生的情感态度价值观的描述；

• 学员提交的作业教学讲义；授课教师访谈；学员作业；学员访谈与问卷实践交流与指导记录

学生已有基础分析（包括知识、方法、经验）

• 开设如何确定和表述课时目标的课程，展示优秀课例的教学目标，并作研讨学员设计两个教学单元的典型课的教学目标，组织学员进行了实践交流并做指导，

• 能结合具体的课时教学内容，清晰、具体地表述出课时教学目标；目标表述中使用的目标动词比较准确；知识、技能、方法目标的表述具体可检测。

• 给学员一个单元，请学员选择两节典型课（新授课和练习课）表述课时教学目标

能清晰表述课时目标，所设计的知识、技能和方法目标具有可检测性

影响 / 效果

• 是否展现一个美好的前景 － 项目之所以重要的原因。

• 产生间接影响。• 项目完成后是否很容易看出变化。

准备一个逻辑模块

逻辑模块模式

投入

投入

投入

投入

投入

活动

活动

活动

活动

活动

结果

结果

影响 / 效果

产出

产出

产出

准备一个逻辑模块

识别并管理风险

促进因素和限制因素……

• 哪些因素对项目的任何一部分将会产生积极和消极的影响？

• 风险降低策略应减少不期望出现的事件的可能性，或尽可能地减小该事件可能给项目带来的影响。

识别并管理风险

利益相关者分析（利益相关者分析（ Stakeholder AnalyStakeholder Analysis)sis)

•保障项目主要受益者的利益——项目目标•检测项目的风险步骤：•确定项目的利益相关者，并按照重要程度排序•分析对项目实施的影响者，并按照影响力排序•作“利益重要性——影响力”图•得出基本结论

对 项目进行利益相关者分析

利益重要程度

影响力

促进因素+ + + + + +

设想和风险

限制因素- - - - - - -

总结——基于结果的管理术语

活动 产出 结果 影响投入

指标

设计监测和评估监测和评估区别• 监测

对进展进行持续的自我评估：依据过程指标，收集数据，将目前的情况同计划的活动和结果相比较。

• 评估 依据结果指标，对项目的持续相关性、管理、 统辖、结果、覆盖面、外部关系和可持续性等进行独立的（常常是外部的）、定期的、具有战略重点的评估。

设计监测和评估

跟踪结果……意味着要关注……

– 指标（监测更关注过程及与结果的距离，评估更关心原因）

– 信息来源– 方法和频率–开展工作的人

设计监测和评估

数据收集过程

• 确定基线• 抽样 • 收集数据• 分析• 报告

设计监测和评估

数据收集方法

定量• 观察• 人员日志 /签名手册• 调查• 数据审核• 参与人员纪录

定性• 访谈• 观察• 讲故事（案例）• 参与式评估

设计监测和评估

数据收集提示

力求• 系统性• 与指标有关的问题• 结构范围 /没有结构范围• 语言清晰• 预测良好

避免• 多个问题• 领导性问题• 是 /不是问题• 技术语言• 侵犯隐私

设计监测和评估

针对预期结果报告

预期结果 迄今的进展情况

变量 下一个报告期的优先事项

产出

成果

影响

教师培训项目中运用基于结果”的管理思想

维度（方面）

标准（目标）

过程指标 结果指标 数据收集

保证结果 实现（可 操作）

达到目标 的具体观测点（可察觉的表现）

一些术语• 关键表现领域• 过程指标——保证结果指标实现所必须的活动• 标准 ——要达到的水平• 结果指标 ——做到什么程度就认为达到了• 数据来源——怎么看出来达到结果指标了

• 过程指标——可操作，达到结果指标的必要动作，建议而不是一成不变，可以控制

• 结果指标——可测量，可以有不同的等级。 结果指标中的结果 (result) 二字与前面所说的产出（ outcome) 意义不同。

做法：（ 1 ）把目标分解最关键的几个观测点，在可观察、可测量的水平上描述“结果指标”，具体说清楚作到什么程度，就认为达到了目标。

（ 2 ）围绕“结果指标”建立“过程指标”。“过程指标”必须满足两个条件：一是能够保证“结果指标”实现的必要活动，二是具有可操作性。

（ 3 ）数据收集：用什么方法或材料证明达到了“结果指标”。

基于结果所体现的理念（ 1 ）“结果指标”关注的是“首要或次首要利益相

关人”的行为或变化。• 例如培训的“首要利益相关人”是学生，培训效果最终要体现在学生身上。由于教育成果的复杂性和表现滞后性，“结果指标”可以描述“次首要利益相关人”教师（校长）、学校组织的行为或变化。

• 在这里，平时我们所标榜的“培训多少人“、“满意度”、 成果为“几个一”等没有很重要的意义，并不能够说明目标的实现程度。

（ 2 ）设计过程是教师发挥专业自主权的过程。• 在设计计划的过程中，教师经过讨论，确定自己认

可的“标准”、“结果指标”、“过程指标”和“数据收集方式”

• 从一开始就充分享有决策权、知情权、自我调控权。• 维度标准过程指标结果指标数据收集评估依据过程

监控依据评估依据实证性材料所有人从一开始就知道且认同。

（ 3 ）设计、实施、监控、评估成为有机的、一致的过程。

（ 4 ）评估全面，兼顾不同的层次• 产出——“培训多少人“、“满意度”、 成

果为“几个一”等。• 结果——“首要或次首要利益相关人”的行

为或变化，体现目标。• 影响——对学习文化形成、社会舆论及事业

发展产生的深远影响。

二、运用基于结果的思想修改自己带来的项目中的主题、目标、课程与活动、培训方式和质量检测与评估形成有机的、自洽的体系。实现培训目标。

并交流

• 设计一个新教师培训质量检测与评估计划

有时也迁就多数人的想法给出一些参考意见。（一）一些环节的评估（二）培训结果的评估 ( 前后测）