2018年度云录播课堂教学评价系统项目专项资金财政支出绩效跟踪评价报告.pdf

2018年度云录播课堂教学评价系统项目 专项资金财政支出绩效跟踪评价报告 预算单位 ： 上海市 闵行区教育学院 主管部门： 上海市 闵行区教育局 委托单位：上海市闵行区 教育局 评价机构：上海浩丞管理咨询有限公司 二零一 八 年十 月 目 录 摘要 . 2 正文 . 4 一、 项目概况 . 4 （一）项目立项程序和依据 . 4 （二）项目要解决的主要问题、整体绩效目标、指标完成计划和现阶段完成情况 . 5 1、项目要解决的主要问题 . 5 2、项目绩效目标 . 6 （三）项目实施组织管理情况 . 7 1、组织分工 . 7 2、项目实施流程 . 7 3、项目管理措施 . 8 （四）项目预算安排和支出情况 . 10 1、经费来源 . 10 2、 2018年预算安排及支出情况 . 10 3、近三年项目预算及执行情况 . 11 4、各阶段项目合同签订及历年付款情况 . 12 （五） 2018年项目实施范围、计划及完成情况 . 13 二、项目完成情况及偏差分析 . 13 （一）投入类指标完成情况及偏差分析 . 13 （二）过程类指标完成情况 及偏差分析 . 14 （三）产出类指标完成情况、偏差分析及全年预测 . 14 三、跟踪结果判定 . 15 四、主要问题及对产出类指标完成情况的预测 . 15 五、建议和改进措施 . 16 2 2018年度云录播课堂教学评价系统项目 专项资金 绩效跟踪评价 报告 摘要 一、项目要解决的主要问题 为响应 国家中长期教育改革和发展规划纲要（ 2010-2020）提出的 构建 国家教育管理信息系统，强化信息技术应用，提高教师应用信息技术水平，更新 教学观念，改进教学方法，提高教学效果，促进优质教育资源普 及共享，最终实 现促进教育内容、教学手段和方法现代化的目标 的要求；同时考虑到， 闵行区 受到地域、时间及专职研训员人数的限制， 传统评价方案缺乏灵活和 针对性， 且 无法记录并再现评价过程， 因此，闵行区教育局 于 2014年开始实施基于云录播的 课堂教学评价系统项目 。 目前，已在全区 156 所 公办中小学 和幼儿园建成了云录 播课堂教学评价系统。 项目设立目的是 通过建设云录播与评课反馈平台，完善教研评价体系 ，提升 职初教师的教学水平；实现基于证据的教育决策和教学研究，提升宏观教育决策 的有效性和教研业务开展的精准度；落实基于课程标准的教学与评价，通过优质 的教学资源共享，与基于标准的教学范例，发挥辐射引领的作用，促进区域教育 的均衡发展。 二、项目资金安排和执行情况 2018 年度项目 年初 预算总额为 1,869.10 万 元， 经调整 后 ，全年预算总额为 968.10 万元 ， 分别对应 云录播课堂教学评价系统四个阶段 合同项下 的付款。 因跟 踪期间尚未至合同付款期， 故截止到 2018.8.31实际支出为 0。 三、项目产出类绩效指标完成情况 2018 年 项目范围是 云录播课堂评价系统第一至第四 阶段 涉 及 156 所中小学及 幼儿园 。实施内容是由第三方向 156 所中小学及幼儿园 提供 的云录播课堂评价系 统 整体 运维 服务 。 跟踪期间已按计划落实各项工作 ， 产出情况 较好 ： 通过 四 年的云录播课堂评价系统建设，闵行区已经实现了云录 播课堂评价系 统全区中小学覆盖和幼儿园片组公用。 相关学校的教师参与数和录播课程数逐步 3 增加。 2018年上 ，闵行区云录播课堂评价系统 录课教师 参与 数为 3562名， 总 录课 数量为 5596节 ，见习教师 349， 录课率达 100%，第三方的运维服务完成率 100%。 四、项目跟踪结果判定 根据闵行区财政局制定的绩效跟踪评价指标体系，经本公司独立评价， 2018 年度 项目跟踪判定结果为运行 基本 正常。 五、 项目 存在问题概述 云录播课堂教学评价系统项目整体 完成预定目标，但 在运行中 存在以下问题， 建议采取进一步改进措施： 1.预算方面，由于 系统运维预算 以往 未 严格按照 前期已签订 的合同金额和付 款进度编制，造成项目预算调整率偏大。 建议根据 合同约定的年度费用和付款进 度编制项目预算 并支付 ，从而提高项目的预算编制的准确性，避免不必要的预算 调整。 2. 业务方面，工作计划与执行情况较好， 跟踪期间 总体 工作进度与整体计划 安排一致，但计划内 容 较为 笼统 ， 绩效指标设置不够 细化 量化 ， 未建立单校目标 值考核 。建议 制定 工作计划 时，内容上应具体、细化， 包括项目 学校使用云录播 课堂教学评价系统的考核要求 、 对第三方 提供 服务的计划 、项目小组督导计划 等， 同时 进一步 明确 学校录课、评课的产出与效果 目标便于期终考量。 4 正文 为进一步加强财政支出预算绩效管理，提高财政资金使用效率和效益，闵行 区教育局根 据上海市财政局上海市预算绩效管理实施办法（沪财绩 201422号） 和 闵行区财政 关于开展 2018 年度财政预算项目支出绩效跟踪评价工作的通知 （闵财评 201821号）的要求 ，对 闵行区 教育 学院 2018年 云录播课堂教学评价系 统 项目进行绩效跟踪评价，评价时间节点为 2018年 8月 31日。 一、 项目概况 （一）项目立项程序和依据 云录播课堂教学评价系统是构建在云存储平台上的教育资源及评价中心。 云录播中心实现对课堂教学资源的生成、编辑、播放及存储等基本管理。评课反 馈中心对云录播中心的课堂教学资源进行应用管理，对教师课堂教学进行评价， 并针对评价管理进行有针对性的推送，形成教师教学资源生成、评价及改进的闭 环管理机制。 根据国家中长期教育改革和发展规划纲要（ 2010-2020）提出的 提高教 师应用信息技术水平，更新教学观念，改进教学方法，提高教学效果，促进优质 教育资源普及共享，最终实现促进教育内容、教学手段和方法现代化的目标 的 要 求，同时考虑到，闵行区地域广大，由于受到地域、时间及专职研训员人数的 限制，研训员对基层教师的业务指导无法实现全覆盖；传统评价方案缺乏灵活性 和针对性，无法记录并再现评价的全过程，必须借助信息化手段在评价量表库中 有针对性的灵活生成评价方案。因此， 2014 年 起 闵行区教育局开始实施基于云录 播的课堂教学评价系统项目。 该 项目采用 了 购买服务的方式分多期实施， 于 2014 年、 2015 年、 2016 年、 2017 年 通过 分批 向 第三方运营商 中国电信股份有限公司租赁云录播设备和购买技 术服务 的方式，在 156 所中小学及幼儿园 完成了录播教室建设并建立了 基于 云录 播的课堂教学评价功能 （ 包含网络教研、在线评课、 S T 分析、优质课评选、资 源共享等主要功能 ） ， 为全区 12000多名教师提供服务，实现了专家评课、新教师 规范化培训等业务的信息化，提高了教研工作的信息化水平。 项目发展进程如下： 5 项目子项 项目数量 建设完成 时间 合同期 服务期间 项目总投入 (万元） 年付款金额 （万元） 第一 阶段 34 所中小学校 2014.3 5 年期 2014.02.25 2019.02.24 1528 305.6 第二 阶段 89 所中小学校 2015.9 3 年期 2015.12.01 2018.11.30 2490 830 第三 阶段 20 所幼儿园 2016.12 3 年期 2016.11.01 2019.10.31 540 180 第四 阶段 13 所幼儿园 2017.10 3 年期 （一年一签） 2017.08.11 2020.08.10 345 115 2018 年预算资金对应 闵行区 156 所中小学及幼儿园的云录播课堂评价系统 整 体 运维 服务 。项目经区教育学院立项申请，区教育局、 区 科 委 、区财政审批和前 评程序，取得 2018年度预算批复后执行。立项依据文件主要有： 国家中长期教育改革和发展规划纲要（ 2010-2020 年）：“ 构建国家教 育管理信息系统，强化信息技术应用， 提高教师应用信息技术水平，更新 教学观念，改进教学方法，提高教学效果，促进优质教育资源普及共享， 最终实现促进教育内容、教学手段和方法现代化的目标”； 上海市教育信息化“十三五”发展规划（沪教委科 2016 87号）：“深 入推进“一师一优课、一课一名师”活动，通过“晒课”“评课”等形式 持续提升教师信息化素养”； 闵行区教育信息化工作三年行动计划（ 2013-2015）：“建立基于网上观 摩、研讨和评价的云录播系统，面向所有教师课堂开放的区网上教研训工 作平台，提升教师专业素养，健全基于云录播系统的教学评价量表”； 闵行区教育改革和发展“十三五”规划（闵府发 2016 38号）：“通 过云录播课堂教学评价系统，实现科学化的教学分析与反思”。 （二）项目要解决的主要问题、整体绩效目标、指标完成计划和现阶段完成情况 1、项目要解决的主要问题 （ 1）健全云录播与评课反馈平台，完善教研评价体系。建立教学、评课、反 馈诊断，实现全过程记录，聚焦职初教师和底部教师的课堂教学改进，提升职初 教师的教学水平。 （ 2）实现基于证据的教育决策和教学研究。用量化手段准确定位每位教师教 学中待改进的部分，使教育局、教育学院制订教师培训计划更有针对性，提升宏 6 观教育决策的有效性和教研业务开展的精准度。 （ 3）落实基于课程标准的教学与评价。通过细化点评、教学反思和同课异构 等方式提升职初教师和底部教师的教学规范化和标准化程度。通过优质的教学资 源共享，与基于标准的教学范例，发挥辐 射引领的作用，促进区域教育的均衡发 展。 2、项目绩效目标 （ 1）整体绩效目标： 完成 156所学校及幼儿园的云录播教室运维服务； 完成 精品课 分享 2000节；促进教学资源的共享；提高项目服务的满意度，达到服务对 象满意度达 90%以上。 （ 2）绩效指标完成计划和现阶段完成情况 指标类型 指标名称 年度目标值 指标解释 跟踪 选择 跟踪期目标值2018 年 1-8 月 跟踪期完成值 管理目标 预算执行率 100% 预算支出情况，支出数 /调整后预算数100% 0% 0% 合同签订及时 性、内容规范性 及时、规范 合同签订是否及时、规范，内容要素 是否齐全 及时、规范 及时、规范 产出目标 录播教室实施 对象数量 156 实施对象完成情况（ 123 所中小学以 及 33 所幼儿园） 156 156 录播教室录课 数量 4000 节 考察云录播系统录课量的增长情况， 年度录课数不低于 4000 节 5596 节 5596 节 录播教师录课 数量 1)4345 名 2)100% 1)全年参与录课教师人数高于上一年 度 2)见习教师录课使用率 100% 1) 3562 人 2) 100% 1) 3562 人 2) 100% 见习教师使用 占比 100% 见习教师参与录课人数 /见习教师总 人数 见习教师共 349 人，每人录播 1 次课程，见习人 数使用达标率 100% 100% 第三方运维服 务完成率 100% 第三方运维工作合同履约情况，包括 1)人员到岗率 100%;2)运维频次达标 率 100%;3)故障响应率 100% 1)运维人员 15 人，到岗率 100%; 2)运维频 次达标率 100%;3)故障响 应率 100% 1)运维人员 15 人，人员到岗 率 100%;2)运 维频次达标率 100%;3)故障 响应率 100% 效果目标 教学资源共享 2000 节精品课 实现优质 评课 资源共享 第三方服务年 度验收结果 1 次验收通过 第三方服务年度专家验收是否通过 服务对象满意 度 90% 教师、评课人员对项目的综合评价 7 指标类型 指标名称 年度目标值 指标解释 跟踪 选择 跟踪期目标值2018 年 1-8 月 跟踪期完成值 录播数据安全 稳定性 安全稳定 录播数据保存完整，无重大故障 可持续 长效机制 建立健全 项目所涉长效机制的建立健全性、包括购买服务机制、退出机制等 （注： 按闵行区绩效跟踪管理要求 ， 跟踪评价 不 对效果指标进行跟踪 ） （三）项目实施组织管理情况 项目经过多年实施和改进，已建立了完善的管理机制，在项目团队领导、学 校 、幼儿园 和教师 的 支持下，形成有序的工作模式。 1、组织分工 项目主管单位是区教育局，实施单位是区教育学院。由于项目采用整体服务 外包模式，且涉及学校 幼儿园 较多，为保障顺利运行、监管得当， 成立了项目推 进小组，负责项目决策、实施保障等，由教育局局长担任领导小组组长。另外， 成立项目专家组、项目工作小组，各学校、幼儿园成立项目组，负责区校两级层 面的项目策划、组织、协调、指导、监控与评估。 2、 项目实施流程 云录播课堂评价系统的分批建设 ，采用学校自愿原则，根据学校申请情况， 分批次有序推进， 每阶段在实施过程中的一般流程是 ： 制定 项目方案 -供应商采购 -合同 签订与 执行 -学校录课、区教育院评课 - 年度项目 验收。 图 1：项目管理流程图 区教育学院 制定项目方案，委托 代理机构实施采购 代理机构 按政府采购流程 实施项目采购 中标供应商 根据合同约定提 供相应服务 区教育学院 与中标供应商签 订项目合同 涉及学校、区教育学院 使用云录播课堂评价系 统录课、评课 区教育学院 组织专家对项目 完成情况验收 8 3、项目管理措施 （ 1）日常管理 例会制度 。为保证项目各阶段顺利推进，建立每月一次教育局信息化领导小 组例会制度；每两周一次的项目工作小组例会制度； 培训制度 。 根据项目 进展情况，对项目领导与指导人员、 园长 、 教师 和相关 技术人员进行有针对性的培训。 汇报制度 。 建立学校 、幼儿园 实验情况月报制度，项目组建立简报制度，向 相关区、局、院领导及时汇报项目进展情况。 研讨制度 。建立区、 校各个 层面的研讨制度，及时发现典型、扶持典型，辐 射典型经验。 评比制度 。 建立项目评比制度，激励学校、幼儿园 与教师工作的积极性与创 造性。 评估制度 。每学期对项目 、学校、幼儿园和教师应用 情况进行评估。 资源共建共享制度 。 号召各学校、幼儿园和教师将制作的个性化资源参加区 级评选，优质资源进入区数字化资源地 ，为 学 校 、幼儿园 师生以及所有需要此类 资源的师生所共享。 （ 2）第三方监管 为了有效保障基于云录播的课堂教学评价系统项目的平稳运行，实现项目服 务实施目标，为项目配置了全方位的运行保障团队和服务团队以及持续服务内容， 具体如下： 专业服务中心架构： 9 服务管理：负责统筹项目运行服务工作。 咨询支撑：安排咨询师提供内容答疑或响应内容服务，提供技术培训和资源 建设咨询服务。 运行保障：安排专业服务工程师现场为学院和各学校提供专业的运行保障， 协调处理各类服务请求。 技术支持：安排技术工程师提供技术支持服务、整理收集技术需求。 专家顾问： 组织专家顾问团队，在课堂教学评价和评价量表的理论体系上给 与指导，同时不定期的到现场参与云录播教育实践研讨活动，为闵行区申报国家 课题提供支撑。 定期提供信息技术驱动下的教学模式的最新资讯。 设备配置 ：按合同约定配置，经试运行和验收后合格。 运维服务 ： 派专人驻场，对学校的录播教室软硬件、观摩教室进行维护服务； 对区级系统的软硬件进行维护服务 ； 提供网络安全监控服务，并承担由于网络安 全事故所产生的所有赔偿、消除负面影响 ； 提供 S-T 分析、精品课打造、专家咨 询、培训、应用推广等一系列增值服务。 提供 服务热线 ，由专人值守， 5*8小时工作 ，接听教师服务请求， 1小时内解 决相应故障，并记录事件处理结果 ；非工作时间在 I 级事件中，运维负责人第一 时间到达现场，并在 7*24小时接听移动电话； 故障响应时效和解决时效执行（ IIV）标准， 在规定时间范围内无法解决的， 需提交故障级别变更申请 ； 满意度抽查。抽查不满意次数达到三次及三次以上、收到书面投诉达到三次 及三次以上，将书面通知第三方整改，拒不整改的，将扣除本年服务费的 10%； 年度验收。采用综合验收，验收合格后进行相关服务费用的支付，验收不合 格的，第三方需整改直至通过，并负担由此产生的专家费用。 违约与合同终止。未能按期提供技术服务，每逾期 5个日历日，违约金为 0.1%。 如违约金的数额累计达到年度服务费的 10%时，委托方有权终止合同。 （ 3）资金管理 目前执行的资金制度有：闵行区教育局专项资金管理暂行办法、闵行区教 10 育系统预算编制与执行暂行规定 （四）项目预算安排和支出情况 1、经费来源 项目经费来源于教育费附加，按各阶段合同约定执行付款，经区教育学院申 请后，区财政直接拨付。 2、 2018年预算安排及支出情况 2018年度项目预算总额为 1,869.10万 元，分别对应第一至第四阶段合同项下 的付款。 项目实施过程中， 根据合同 ， 由于云录播课堂评价系统整体解决方案购 买（二期）项目约定在 2018 年 11 月验收合格后 只需支付 第三年 年度费用 的 50% 尾款 ， 且 (四期 )项目约定在 2018 年内只需支付年度费用的 40%， 因此 ， 闵行区教 育学院调整了项目预算 ，调整后的年度预算为 968.10万元。 鉴于 跟踪期间 尚未至 合同付款期 ，故截止 2018.8.31 实际支出为 0。依据各阶段合同约定的支付条款， 经测算 预计本年度需支出 946.60 万元，预算执行率为 97.78%。预算构 成及 2018 支出预测如下：（单位 万元） 序号 项目明细 年初预算 调整后 预算 实际支出 （ 1-8 月） 预计全 年支出 执行率 支付 方式 采购 方式 供应商 2018 付款依据 1 第一 阶段 34 所中小 学校 305.6 305.6 - 305.6 100% 直接支付 单一来源 中国电信股 份有限公司 上海分公司 合同第 5 年， 年服务费 305.6 万， 要求：验收合格后 10 个工作日内支 付 100%。 2 第二 阶段 89 所中小 学校 830 436.50 - 415 95.07% 直接支付 单一来源 中国电信股 份有限公司 上海分公司 合同第 3 年 ， 年服务费 830 万的尾 款 50%， 要求： 2018 年 11 月 15 日前组织验收，合 格后 30 工作日内支付 尾款。 （ 2） 第二 阶段 89 所中小 学校 830 0 0 0 直接支付 单一来源 中国电信股 份有限公司 上海分公司 合同第 3 年，年服务费 830 万的尾 款 50%，要求： 2018 年 11 月 15 日前组织验收，合 格后 30 工作日内支付尾款。 3 第三 阶段 20 所幼儿 园 180 180 - 180 100% 直接支付 单一来源 中国电信股 份有限公司 上海分公司 合同第 3 年，年服务费 180 万，要 求： 2018 年 11 月 1 日前支付第 3 年度服务费的 70%； 并组织上一年 度的验收，合格后 15 个工作日内支 付第 2 年的尾款 30%。 4 第四 阶段 13 所幼儿 园 117 46 - 46 100% 直接支付 招投 标 中国电信股 份有限公司 上海分公司 合同第 2 年，年服务费 115 万的， 要求：协议签署后 30 个工作内日支 付 40%。次年验收合格后支付 55%， 合同期满后 5%。 11 序号 项目明细 年初预算 调整后 预算 实际支出 （ 1-8 月） 预计全 年支出 执行率 支付 方式 采购 方式 供应商 2018 付款依据 合计 1869.10 968.10 - 946.60 97.78% 3、近三年项目预算及执行情况 云录播课堂教学评价系统 第 一 至第四阶段各年预算及支出情况如下 ： 子项目 2015 年 （万元） 2016 年 （万元） 2017 年 （万元） 预算数 支出数 执行率 预算数 支出数 执行率 预算数 支出数 执行率 第一 阶段 34 所中小学校 305.60 305.60 100% 305.60 305.60 100% 305.60 305.60 100% 第二 阶段 89 所中小学校 836.60 830.00 99.21% 873.00 830.00 95.07% 436.50 415.00 95.07% 第三 阶段 20 所幼儿园 180.00 180.00 100% 180.00 126.00 70% 第四 阶段 13 所幼儿园 117.00 115.00 98.29% 12 4、各阶段项目合同签订及历年付款情况 序 号 子项 采购 方式 采购方 供应商 合同名称 合同期 服务期间 合同总价 （万元） 付款条件 2014 实 付 2015 实 付 2016 实 付 2017 实 付 2018 应付 1 第一 阶段 34 所中小 学校 单一 来源 上海市闵 行区教育 学院 中国电信股 份有限公司 上海分公司 闵行区教育学院基于 云录播的课题教学评 价系统项目服务合同 5 年 2014.2.2 5 2019.2.2 4 1528 年服务费 305.6 万，要求：每 年度验收合格后十个工作日内 支付 100%。 305.60 305.60 305.60 305.60 305.60 2 第二 阶段 89 所中小 学校 单一 来源 上海市闵 行区教育 学院 中国电信股 份有限公司 上海分公司 闵行区云录播课堂教 育评价系统 （第二阶段 89 所学 校）项目 服务合同（补充协议） 3 年 2015.12. 01 2018.11. 30 2490 年服务费 830 万，要求： 合同第 1、 2 年， 100%；第 3 年， 2017 年 11 月 15 日前支付 年度费用的 50%， 2018 年 11 月 15 日前组织验收，合格后 30 工作日内支付剩余 50%。 830.00 830.00 415.00 415.00 3 第三 阶段 20 所幼儿 园 单一 来源 上海市闵 行区教育 学院 中国电信股 份有限公司 上海分公司 闵行区教育学院基于 云录播的课堂教育评 价系统项目技术服务 合同（补充协议） 3 年 2016.11. 01 2019.10. 31 540 年服务费 180 万，要求： 合同签署后首付款 70%，次年 11 月 1 日前组织验收，合格后 15 个工作日内支付上一年度尾 款的 30%。 180.00 126.00 180.00 4 第四 阶段 13 所幼儿 园 招投 标 上海市闵 行区教育 学院 中国电信股 份有限公司 上海分公司 2017 年闵行区云录 播课堂评价系统 采购项目 技术服务合同（补充 协议） 3 年（ 1 年 1 签） 2017.8.1 1 2020.8.1 0 345 年服务费 115 万，要求：协议 签署后 30 个工作内日支付 40%；验收合格后支付 55%； 合同期满后支付 5%。 115.00 46 13 （五） 2018年项目实施范围、计划及完成情况 2018 年 项目范围是 云录播第一至第四阶段 涉 及 156 所 中小学及幼儿园（ 其中 123 所中小学， 33 所幼儿园 ） 。 实施内容是由第三方运营商 提供 的 整体运维服务 ， 包括录播教室设施设备维护服务、区级服务器存储设备维护服务、区级软件维护 服务 、 驻场服务 以及增值服务 。 2018年实施计划及完成情况如下： 序 号 子项 内容 实施 计划描述 产出目标 跟踪期完成情况 （ 2018 年 1-8 月） 1 项目学校录播 开展情况 11 月进行考核验收112 月循序开展 1) 使用数量 156 所中小学及幼儿园 2) 见习教师使用 率 100% 3) 全区年录课数量达到 4000 节 1） 156 所 2）见习教师共 349 人，每人录播 1 次课程，见习人数使用 率 100% 3）录课数量 5596 节 2 第三方运维服 务管理 1-12 月循序开展 1) 人员到岗率 100% 2) 运维频次达标率 100% 3) 故障 响应 率 100% 1） 人员人数 15 人 ,到岗率 100%。 2） 运维频次达标率 100% 3） 故障响应 率 100% 二、项目完成情况及偏差分析 （一）投入类指标完成情况及偏差分析 投入类指标共设置了 2个指标，各指标完成情况如下： 指标类 型 指标名称 指标细化 完成情况 好 较好 一般 差 A 投入 A1 项目立项 A11 项目立项规范性 A12 绩效目标质量 A2 资金落实 A21 预算执行率 - - - - 分析说明： 1、项目立项方面 本项目立项规范性好，体现在（ 1）立项依据充分，有市、区政策文件作为支 撑，且与项目内容相适应；（ 2）立项审批程序完整，符合闵行区财政预算管理流 程，并取得了相应的预算批复。 项目绩效目标质量 一般， 对学校教师使用人数与录播频次的目标值不够细化 ， 未建立单校目标值考核 。 （详见正文（二）项目绩效目标设立情况）。 2、资金落实方面 资金执行与项目执行进度相符。因跟踪期间本 项目未到付款期 ，故无资金支 出。 14 （二）过程类指标完成情况及偏差分析 过程类指标共设置了 2个二级指标，各指标完成情况如下： 指标类型 指标名称 指标细化 完成情况 好 较好 一般 差 B 过程 B1 业务管理 B11 工作计划完好性 B12 工作计划执行准确性 B13 项目管理制度建立与执行 B2 财务管理 B21 财务管理制度建立与执行 分析说明： 1、业务管理方面 工作计划与执行情况较好， 跟踪期间工作进度与整体计划安排一致，但计划 内 容比较笼统。鉴于 云录播课堂评价系统涉及 学校、 幼儿园、 第三方等多方合作， 且财年与学年往往无法完全对应，建议可以学期为单位制定工作计划，内容上应 具体、细化，包括 对 学校 使用云录播录课 的 考核要求 、 对 第三方服务 计划 、项目 小组督导计划等等，同时明确产出、效果目标便于期终考量。 2、项目管理制度建设和执行方面 项目管理制度建立和执行情况较好。 制度内容比 较全面 ， 不足之处 在于 虽然 采用第三方专家评审验收方式，但是 验收标准较为笼统 ，建议后续进一步加强专 家验收的量化，减少专家验收存在的主观性较强等弊端。 3、财务管理制度建设和执行 财务管理制度健全，依据区教育局专项资金管理制度执行。执行方面，因跟 踪期间本项目 未到付款期， 故无法评判。 （三）产出类指标完成情况、偏差分析及全年预测 产出类项目共设置了 5个绩效指标，各指标完成情况和绩效值如下： 指标名称 指标 细化 年度目标值 实际产出数 （ 1-8 月） 阶段目标值 （ 1-8 月） 阶段目标完成情况 目标全部完 成可能性 C11 录播教室实 施对象数量 156 (123 所中小 学以及 33所幼儿 园） 156 156 完成 能够完成 C12 录播教室录 课数量 4000 节 （总量） 2018 上： 5596 节 2018 上： 2000 节 完成 能够完成 15 指标名称 指标 细化 年度目标值 实际产出数 （ 1-8 月） 阶段目标值 （ 1-8 月） 阶段目标 完成情况 目标全部完 成可能性 C13 录播教师录 课数量 1） 全年参与 录课教师 人数 2)见习教师 100% 1)4345 名 （高 于上一年度） 2)100% 1) 3562 名 2) 349 名 /100% 1) 2173 名 2) 100% 完成 能够完成 C14 见习教师使 用占比 100% 100% 100% 完成 能够完成 C15 第三方运维 服务完成率 1)人员到岗 率 100%; 2)运维频次达标率 100%; 3)故障响应率 100% 100% 1)人员人数 15 人 ,到岗率 100% 2)运维频次达标 率 100% 3)故障 响应率 100% 100% 完成 能够完成 分析说明： C11 云录播课堂评价系统 实施对象数量： 根据项目的合同 、验收 报告等材料 ， 项目计划对 156 所 中小学及幼儿园 的云录播课堂评价系统进行运维，实际对 156 所 中小学及幼儿园 的云录播课堂评价系统进行运维。 C12 录播教室录课数量： 2018 年 上 ， 156 所 中小学及幼儿园 实际录课数量为 5596节 。 已完成全年录课计划不低于 4000节的要求 。 C13录播教师录课数量： 2018年上 ， 156所中小学及幼儿园教师使用云录播课 堂评价系统，录课人数为 3562名 。 其中见习教师 参与录课人数 100%。 预计全年参 与录课教师数量优于 2017年 4345名。 C14 见习教师使用率： 2018 年 上 ，闵行区共有见习教师 349 名。 通过云录播 课堂评价系统， 每人录播 1次课程 ，因此， 见习教师 的 使用 达标率为 100%。 C15云录播课堂评价系统运维 服务 完成率 ： 1)根据第三方提供的运维服务人员 名单，共计 人数 15人 ,到岗率 100%； 2)运维频次达标率 100% 3)故障 响应 率 为 100%。 云录播课堂评价系统运维按时完成率 100%。 三、跟踪结果判定 经 本公司 独立评价 ，项目跟踪判定结果为运行 基本 正常。 四、主要问题及对产出类指标完成情况的预测 （一）主要问题 1.项目 预算管理存在不足，编制 方式不科学 ，造成项目的预算调整率偏高 在 156 所学校的云录播课堂评价系统的运维方面， 运维服务合同在建设系统 时已经签订，并在合同中明确了运维费用和付款进度。但在编制项目预算时，未 16 严格 根据已确定的合同金额和付款进度编制预算，而是按照 合同年服务费进行 整 体预算，故造成了项目的总体预算偏高，导致 2018年 实施过程中预算大幅调减 （ 901 万元） ，预算 调整率偏高 。 2.项目实施管理有待提升，绩效指标设置不完善 ，系统使用存在不均衡性 云录播课堂评价系统在学校覆盖方面具有明确的规划，但是在系统使用方面， 对 156 所中小学及幼儿园仅仅评估 整体录课数量 、 参与 录课教师的人数和见习教 师录课数， 未能 针对中小学和幼儿园的不同情况 建立针对性的考核机制。 明确 对 重点学校、 重点教师群体所要实现 的 目标 进行设置。考核指标较为笼统，存在不 均衡性 。 例如，使用率较高的实验小学， 2018 年上 半学期 共有 209 名教师参与录 课，录课数量高达 367节，占整体录课教师人数的 6.56%，录课数量的 9.79%。而 部分 学校 系统使用率较低， 2018 年上半学期 仅有 2 名教师参与录播，录课数量 为 2节。幼儿园 方面，也存在仅 1名教师参与录播，录播 1节课的情况。类似使用情 况的不均衡性将会影响项目的效果和初衷。 （二）产出类指标完成情况预测 结合跟踪期间项目执行进度和年度计划安排，预计全年工作可以顺利完成。 业务方面， 2018年 1-8月参与云录播录课的教师人数共计 3562人，录课数量达到 5596节，见习教师录课达标率为 100%。 第三方运维完成率 100%。 预计全年系统整 体使用 情况将优于 2017 年度。 资金方面，根据合同金额和 2018 年度验收结果， 预算全年执行率为 97.78%。 五、建议和改进措施 1.根据 已签订的合同条款编制项目预算 ， 并进一步梳理建设项目实施内容 ， 提高预算编制的合理性 对于已经具有服务合同的项目，区教育学院可按照合同约定的年度费用和付 款进度编制 项目预算，从而提高项目的预算编制的准确性，避免不必要的预算调 整，提 高预算编制的科学性。 2.明确系统的重点使用对象， 建立单校考核目标， 进一步提高系统使用效果 建议区教育学院进一步明确使用系统的重点 学校及 教师群体， 将考核指标落 实到学校，总量进行分解， 制定各学校 年录播录课数量达标率、录课 教师 人数达 17 标率 、评课 数 量 达标率、见习教师录课人数达标率等， 并建立相应的监督指导机 制，监督指导各校实现教师使用目标，从而 改善目前的不均衡性， 进一步提高云 录播课堂评价系统的使用效果，提升教师的教学水平。 上海浩丞管理咨询有限公司 二零一 八 年 十月