2017 年度在线课程资源建设项目绩效评价报告.pdf

上海文汇会计师事务所有限公司 SHANGHAI WENHUI CERTIFIED PUBLIC ACCOUNTANTS Co.,Ltd. 财政项目绩效评价报告 项目名称： 2017年度在线课程资源建设项目 项目单位： 上海开放大学 主管单位：上海市教委 委托单位： 上海开放大学 评价机构：上海 文汇 会计师事务所有限公司 2018年 06月 上海开放大学理工学院 2017年度在线课程资源建设项目 绩效评价报告 目录 摘 要 . 1 前 言 . 8 一、项目基本情况 . 8 （一）立项背景及目的 . 8 （二）立项过程 . 10 （三）预算安排、资金来源和使用情况 . 11 （四）项目的组织和管理 . 13 （五）项目实施情况 . 14 （六）项目绩效目标 . 18 二、 绩效评价工作情况 . 19 （一）绩效评价目的 . 19 （二）评价依据 . 19 （三）绩效评价工作方案制定过程 . 19 （四）绩效评价原则、评价方法 . 19 （五）绩效评价实施情况 . 20 （六）绩效评价的局限性 . 21 三、评价结论与绩效分析 . 21 （一）评价结果 . 21 （二）具体绩效分析 . 24 四、业绩及经验做法、存在的问题、建议和措施 . 31 （一）业绩及经验做法 . 31 （二）存在的问题 . 33 （三）建议和改进措施 . 35 五、其他需要说明的问题 . 36 六、评价报告附件 . 37 附件一 在线课程资源建设 项目 经费支出绩效评价指标综合表 . 38 附件二 在线课程资源建设 项目 基础表 . 45 附件三 绩效评价指标体系工作底稿 . 49 附件四 访谈单位与访谈报告 . 98 附件四 （ 1）开放大学在线课程资源建设项目负责人访谈报告 . 98 附件四 （ 2）向日葵科技公司项目负责人访谈报告 . 105 附件四 （ 3）上海日天教育咨询有限公司项目负责人访谈报告 . 108 附件五 学生调查问卷及分析报告 . 110 附件五（ 1） 学生调查问卷 . 113 附件六 教师调查问卷及分析报告 . 115 附件六（ 1） 教师调查问卷 . 120 上海开放大学理工学院 2017年度在线课程资源建设项目 绩效评价报告 1 摘 要 概述 为了落实上海市人民政府办公厅转发市财政局关于全面推进预算 绩效管理意见的通知（沪府办发 2013 55号）的文件精神， 上海开 放大学 对 理工学院 “ 2017年度在线课程资源建设项目 ”（以下简称“ 在 线课程资源建设项目 ”）进行绩效评价 。 为加强财政支出管理，提高财政资金使用效益，发挥财政资金对 项目 的支持作用，进一步加强对项目的管理工作，确保 在线课程资源建 设项目 的正常实施，受 上海开放大学 的委托，上海 文汇 会计师事务所有 限公司承担“ 在线课程资源建设项目 ” 的绩效评价工作。 本次绩效评价目的是对“ 在线课程资源建设项目 ”的实施情况、资 金使用情况、制度建设及执行情况和取得的成效进行评价，总结经验， 发现问题，提出改进的意见和建议。 评价结论 2017年度 “ 在线课程资源建设项目 ”财政预算资金为 560万元 ， 实 际使用资金 505.43万元 ，预算执行率 90.26%， 高于前两 年的平均预算 执行率 82.09%。 项目决策方面：项目与国家及市级的战略目标一致、项目立项程序 规范、立项依据充分、绩效目标较合理、指标明确。 项目管理方面：预算编制依据充分、成本控制良好、预算执行率较 高、财务管理制度建立且执行、在资金使用与会计信息管理方面情况良 好，未发现不合规情况、项目管理制度建立且执行情况较好。 项目绩效方面： 100%按计划量完成任务、项目完成及时且所有课 程均已上线运行；项目实现了随时随地可学、在线课程使用率较高达到 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 2 80%、在线课程的满意度也较高、在 2017年的第二 十一届全国教育教学 信息化大奖赛中，总校共报送的 80个作品中 42个获奖。上海 开放大学 理工学院 2017年度 在线课程资源建设项目 财政支出绩效评价最终评分 结果为 87.2分 ，属于“良”。 绩效分析 1. 项目 主要 绩效方面： 1） 成本控制率为 93%，成本控制情况较好 。 2） 预算执行率为 90.26%，高于前两年的项目执行率 82.09%，预算 执行率提高明显 。 3） 资金合规性检查良好， 评价小组对 77.36%的项目支出资金进行 抽凭审核， 未发现使用范围不合规、费用支出超标准、审批手续不合规 、 会计处理不正确、原始附件不齐全、资金支付进度不匹配等情况 。 4） 项目管理制度的建立与执行情况较好，开放大学建立了有关项 目管理制度及规范，且执行情况良好。 5） 项目 100%按计划工作量且 100%按时完成，并且 100%投入使用。 6） 在线课程实现通过电脑、智能手机、平板电脑等智能终端，登 录平台后即可随时随处学习 。 7） 部分在线课程实现 向上海开放大学系统分校学习平台免费 资源 共享，据数据统计，目前学生在线课程的使用率达到 80%。 8） 在线课程项目的总体满意度较高，其中教师满意度为 82.9%，学 生满意度为 81.27%，平均满意度为 81.92%。 9） 在线课程项目获奖情况良好， 2017年的第二十一届全国教育教 学信息化大奖赛中，总校共报送的 80个作品中 42个获奖，一等奖 4个， 二等奖 18个，三等奖 20个 。 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 3 经验教训和建议 （一）业绩及经验做法 1.主要业绩 1）项目按计划完成并验收合格且通过第三方测评上线运行 开放大学理工学院的 20门在线课程于 2017年 10月 25日完成了上 线、调试等工作， 2017年 10月 31日完成视频的试运营、 2017年 11月 1 日完成课程成果的提交，由开放大学对课程成果进行验收。 开放大学 委托 上海日天教育咨询有限公司，为 2017 年度在线课程资源项目进行 评测。并于 2017年 11月 18日取得了上海开放大学 2017年度在线资 源评审报告（初稿）， 2018年 5月 21日取得了正式稿。 20门课程均 已通过评测并上线运行。 2）在线课程实现多种终端 随时随处可学习且 部分课程共享 在线课程已上传至上海开放大学网上学习平台，学生通过智能上网 终端，登录平台后即可随时随处学习。目前的学习终端有：电脑，智能 手机，平板电脑。部分课程在 上海开放大学系统分校学习平台免费开放 共享。 3）社会影响力提升 2017年建设的在线课 程在系统分校平台上的点击率为 93%，在线调 查显示， 69.9%的学生认为线上线下结合的教学模式更适合进行学习， 在线课程减轻了学生的工学矛盾，促进了学生知识水平的提高，方便了 学生的学习过程， 2017年度在线课程的使用率达到 80%，越来越多的学 生愿意使用在线课程进行学习。在线课程项目的建设，提高了上海开放 大学在社会上的影响力。 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 4 2.经验做法 1）开放大学经验做法 开放大学 从 2015年开始建设在线课程资源，至今共建设了 273门 课程，涉及 30个专业。 通过多年的项目实施，开放大学总结出以下一 些经验做法： 高标准：提出在线课程的概念，制定在线课程的建设标准。 2014年 开放大学成立了课程资源中心，负责上海开放大学在线 课程建设规范的制定，对在线课程的建设标准作出了明确详细的规定。 严规范：严格按照制定的建设流程环节进行。 上海开放大学在线课程建设规范中对项目的建设流程也作出 了详细的规定，明确了各流程的岗们职责及执行标准。 重合作：合作建设采用校内外团队合作建设的方式。 在线课程资源建设主要采用校内外团队合作建设的方式实施项目， 项目的实施团队由：教师团队、学院、课程资源中心、教务处、师资中 心 、校网络安全与信息化、资源建设工作领导小组、后勤（采购与招投 标管理办公室）、技术公司等多个部分组成。 强服务：贯穿在整个建设过程各个环节。 项目的实施，由校内外多个团队互相协作、各司其职，确保项目 保质保量按时完成。 2）技术公司经验做法 开发教师预约平台： 在线课程的录制过程中 时间是变数最大的，为 了方便老师可以利用碎片化时间，协助老师排期， 向日葵科技公司 开发 了“教师预约平台”，移动与 PC 端同步操作，保证了时间与信息上的 同步与对等，大大缩短了因突发状况导致的录制空挡，保证了录制进度， 增强进度保障措施与相关系统的协调配合措施 。 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 5 （二）存在的问题 1.项目制度建设及执行方面 1）未能建立专家库体系 在线课程资源建设项目中专业课程方案的设计与评审，需要大量行 业专家的参与，开放大学未能就专家资质认定、专业特长、费用标准等 方面作出相关规定。 2）中期检查无记录 开放大学项目管理制度中要求对项目实施中期检查，但评价小组未 能取得与执行中期检查有关的文件记录。 2.项目实施方面 1）项目评测结果应用不及时且验收单内容不够具体 2017 年 11 月在线课程资源项目已完成并上线运行，根据上海日天 教育咨询有限公司 2017年 11月 18日提供的 2017年度在线课程资源 评审报告，对每一门在线课程从完整度方面、专业度方面、体验度方 面均提出了一些问题与改进建议。 据了解，向日葵科技公司应在课程交付使用后的一年内根据上海 开放大学 2017 年度在线资源评审报告的评测结论，负责对课程资源 进行后期更正维护。并于到期日（ 2018 年 10 月），取得课程负责老师 的验收合格签字后方可取得最后一笔合同款。因此截止报告日，评价小 组无法取得 2017年度项目的相关评测 结果应用资料。 评价小组抽查了部分 2017 年 10 月份出具 2016 年度的课程上海 开放大学课程资源项目最终验收单，验收内容不够具体，无法与 2017 年度在线课程资源评审报告的相关内容对应。 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 6 2）教学设计及技术规范有待提升 根据 2017年度在线课程资源评审报告对每一门在线课程的评测 分析， 20门课程的教学设计及技术规范方面，最高分 84分，最低分 63 分，平均分为 76.35。 教学设计存在的主要问题有：个别课程案例数据陈旧，脱离了现有 政策内容，对教学指导有误、课件或者字幕、配音错误造成的知识错误， 容易产生 混淆、资源与授课内容及授课标题不匹配。 技术规范存在的主要问题有：教学视频资源比特率、动态码流的最 低码率与音频码率低于最低要求、个别视频编码格式不合规。 （三）建议和改进措施 1.对项目建设管理的建议 1）完善项目管理制度 建议开放大学在项目管理制度中增加对专家体系建设的相关内容， 规范专家资质认定、专业特长、费用标准、专家库建立管理等。 2）实施项目中期检查记录 建议开放大学在实施项目中期检查时，设计建立项目中期检查台账， 对检查的日期、实施检查人员、检查的内容、发现的问题、解决问题措 施、问题解决结果等进行 记录，保留检查痕迹。 2.对项目实施方面的建议 1）加强评测结果及时有效应用 建议开放大学加强对在线课程评测结果的及时有效应用，在质保期 内，根据 2017年度在线课程资源评审报告有针对性地制定更正改进 计划，并实行监管机制，促进计划有效落实。 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 7 2）提升教学设计水平 及时更新相关知识点，鼓励引进名师专家，加强合作能力，提高 建设团队的整体水平； 进一步加强审核和专题培训，充分理解课程资源建设标准，并在 资源建设中严格遵循； 根据目前实际，进一步借助合作技术公司力量，帮助老师提升设 计能力，完善方案。 3）严格执行技术规范 建议技术公司，总结项目经验，严格按照上海开放大学在线课程 建设规范的技术要求，对课程进行方案设计、视频制作、后期字幕处 理、剪辑等，并加强后期审核，减少错误的发生。 3.其他建议 根据对理工学院 20位任课教师的调研分析，在部份教师一致认为： 要 想充分发挥在线课程的优势，一是要解决好教学平台的问题，做到设计 方便，界面友好，页面打开切换流畅等。二是应提高学生学习的支持服 务，平台上应该让老师看到学生网上资源使用状况、时长及进度的统计 数据。三是课程的更新与维护应当是长期的工作，希望能得到技术公司 的长期有效的技术支持。四是建立绩效政策鼓励，让更多的老师能主动 地投入更多的时间和精力研究和实践在线教学。 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 8 上海开放大学理工学院 2017年度 在线课程资源建设项目 绩效评价报告 前 言 为了落实上海市人民政府办公厅转发市财政局关于全面推进预算 绩效管理意见的通知（沪府办发 2013 55号）的文件精神， 加强财 政支出管理，提高财政资金使用效益，发挥财政资金对 上海开放大学 “ 在 线课程资源建设项目 ” 的支持作 用，进一步加强对项目的管理工作， 探 索开展项目事中、事后监管。 上海文汇会计师事务所有限公司受上海开 放大学委托，对 “上海开放大学理工学院 2017年度在线课程资源建设 项目” 进行绩效评价。 同时参照上海市预算绩效管理实施办法（沪 财绩 201422号）的规定， 撰写本项目绩效评价报告 。 本次绩效评价目的是对“ 理工学院 在线课程资源建设项目 ”的实施 情况、资金使用情况、制度建设及执行情况和取得的成效进行评价，总 结经验、发现问题、提出改进的意见和建议。 一、项目基本 情 况 （一）立项背景 及 目的 国家中长期教育改革和发展规划纲要（ 2010-2020年） 中提出： 办好开放大学，搭建终身学习“立交桥”， 基本形成全民学习、终身学 习的学习型社会的要求。提倡 大力发展现代远程教育， 推动 建设以卫星、 电视和互联网等为载体的远程开放继续教育及公共服务平台，为学习者 提供方便、灵活、个性化的学习条件。 教育部 2016年 1月 16日发布 的 关于办好开放大学的意见（教职 成字 20162 号） 中 指出 ： 坚持深化改革，创新发展模式 ， 要求继续 教育与远程开放教育有机结合，加强信息技术与教育教学深度融合。 同 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 9 时 强化信息技术应用，提高在线教育水平 ， 利用计算机技术、通讯技术 和网络技术，搭建开放性、可扩展的信息技术系统平台，实现教学、管 理、服务一体化。 上海开放大学 （以下简称“开放大学”） 是由上海市人民政府举办， 教育部批准成立，上海市教育委员会管理的新型高等学校，前身为上海 电视大学，创办于 1960年。学校以现代信息技术为支撑，以远程开放 教育为主要形式，主要面向成人开展专科、专升本科教育。学校顺应上 海经济社会发展需求开展大规模的非学历教育培训，每年举办各类培训 和考试约 50万人次，并面向特定学习人群建设了包括理工学院、人文 学院、经管学院、工管学院等四个特色学院。学校实施系统办学，依托 政府、行业和社会资源在全市设有 40所分校、教学点，为学生提供全 面的学习支持服务。 上海市委市政府也对开放大学提出了 办学理念：整合资源，促进优 质资源共建共享、共同搭建市民终身学习平台。以学历和非学历教育并 举，全面服务上海建设“人人皆学、时时能学、处处可学”的学习型社 会需求。 为了 响应 国家 办好开放大学的战略、落实 教育部坚持深化改革，创 新发展模式 ， 强化信息技术应用，提高在线教育水平的方针、 实现上海 市委市政府建设学习型社会的 目标。上海开放大学十三五规划明确： 实施在线优质资源建设工程，全面提高开放大学的教育质量，为混合教 学模式实现常态化、普遍化和规模化奠定基础，以开放、灵活、终身、 优质的学习资源服务学习型社会建设，实现 2020 年完成在线课程对所 有专业的覆盖。 为了规范在线课程的建设工作， 2014年上海开放大学成立了课程资 源中心（以下简称“资源中心”），并于当年制定了上海开放大学在 线课程建设规范（以下简称“规范”）。规范于 2016年进 行了首次修订，并于 2018年 4月再次进行了修订，从在线课程标准、 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 10 在线课程申报、在线课程评测、项目管理等方面，制定了详细的要求与 标准。 2015年起开放大学开展了 61门在线课程的试点建设工作 （其中， 理工学院 20门） ，并于 2015年 12月全部完成并上线投入使用， 2016 年度上海开放大学共有 69门在线课程资源建设项目 （其中，理工学院 27门） ，并于 2016年 12月全部完成并上线投入使用。 2017年度上海 开放大学共有 68门在线课程资源建设项目（其中，理工学院 20门）， 并于 2017年 12月全部完成并上线投入使用。 （ 二 ）立项过程 2016年 9月 2日 ，资源中心 向开放大学 的 四所学院传达了 关于组 织申报 2017年度课程资源建设 的 通知 （以下简称“申报通知”） ， 申报工作通过以学校要求、学院统筹和个人申报相结合的方式来组织开 展。 根据课程方案的申报情况及课程负责老师的教学任务计划， 经过 各 学院的初审， 截止 2016 年 9 月 20 日 ，资源中心共收到了 68 份上海 开放大学 在线课程资源建设申报书 （以下简称“申报书”） 。 根 据规范要求，资源中心聘请校内外专家组成评审小组， 对 申报 书 的项目需求、方案和预算等进行评审，形成专家组意见反馈。各申报的 课程项目根据专家组意见对项目 申报 书 进行修改与补充。 2017年 1月 12日，开放大学召开了学校网络安全与信息化、资源 建设工作领导小组会议，对申请的资源项目进行终审。 2017 年 1 月 13 日，资源中心公示了终审结果。 2017 年度 共有 68 门在线课程资源建设项目（其中，理工学院 20门） 通过终审。 2017年 1月 23日， 开放大学公布了关于公布 2017年度上海开放 大学 课程资源建设项目立项结果的通知 （沪开大 20179号）， 对 “上 海开放大学 理工学院 2017年度在线课程资源建设项目 ” （ 以下简称“ 在 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 11 线课程资源建设项目 ”），正式 予以 立项 ，具体课程信息详见 下 表一 ： 表一 上海开放大学理工学院 2017年度立项建设课程资源名单 序号 专业 课程名称 课程负责人 1 机械电子工程（本） C语言程序设计 陈海建 2 过程控制技术 纪艳华 3 电子技术基础 纪艳华 4 机电一体华系统设计 杨洪柏 5 工业设计基础 由路 6 微机原理与接口技术 郑任儿 7 现场总线技术 周益明 8 组态软件控制技术 周益明 9 计算机应用技术（专） 网络操作系统与服务器配置 陈海建 10 网络通信管理与监控 李澍淞 11 网络互联与配置 彭建涵 12 网络安全与存储 杨焕宇 13 小型企业网络配置与管理 郑任儿 14 软件工程（本） Linux操作系统安全管理 王磊 15 创业基础 黄河笑 16 网络安全方案设计与实施 李澍淞 17 网络安全技术与实践 杨焕宇 18 机电一体化技术（专） 电工技术基础 李杰 19 建筑工程管理（专） 建设工程安全管理 曹明 20 汽车营销与服务（专） 汽车营销 李战伟 （ 三 ） 预算安排、资金来源和使用情况 1、预算安排 理工学院 2015年度在线课程资源建设项目预算为 698.5万元，实 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 12 际支出为 577.48万元，预算执行率为 82.67% 理工学院 2016年度在线课程资源建设项目预算为 803.16万元，实 际支出为 654.59万元，预算执行率为 81.5% 理工学院 2017年度在线课程资源建设项目预算为 560万元 （包括： 在线课程资源建设项目开发费 400万元、策划设计费 24万元、咨询费 3.2万元、印刷费 28.8万元、培训费 6.4万元、劳务费 48万元。） ， 实际支出为 505.43万元，预算执行率为 90.26%。 理工学院在线课程资源建设项目的资金来源均为财政专项资金，近 三年的项目预算安排及执行情况详下表二 ： 表 二 理工学院在 线课程资源建设项目 预算 安排及执行情况表 单位：万元 费用类别 项目 开发 费 策划 设计费 咨询费、 劳务费 印刷费 培训费 交通费 调研费 及其他 合计 2015 年度 预算金额 540.00 14.10 85.82 10.34 22.20 26.04 698.50 实际支出 金额 450.00 11.30 79.89 5.17 22.09 9.03 577.48 预算执 行率 83.30% 80.14% 93.09% 50.00% 99.50% 34.68% 82.67% 2016 年度 预算金额 589.16 60.80 100.15 7.85 8.00 37.20 803.16 实际支出 金额 567.48 25.36 47.09 2.60 1.93 10.13 654.59 预算执 行率 96.32% 41.71% 47.02% 33.12% 24.13% 27.23% 81.50% 2017 年度 预算金额 400.00 24.00 80.00 20.80 6.40 28.80 560.00 实际支出 金额 371.92 20.40 74.89 12.32 1.88 24.02 505.43 预算执 行率 92.98% 85.00% 93.61% 59.23% 29.38% 83.40% 90.26% 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 13 （ 四 ）项目的组织和管理 1.项目组织结构及职责 1） 预算 资金拨付单位：上海市财政局， 负责项目预算资金的审批 与专项资金的拨付 。 2） 上级主管单位 ： 上海市教委 作为上级主管单位 。 3）项目实施单位： 上海开放大学 作为项目实施单位，负责项目前 期调研、可行性方案的撰写、 方案的评审、 项目立项的申请、 各相关单 位部门之间的协调，确保项目正常实施 。 4）招标代理单位： 开放大学 通过 政府采购 平台 ，确定 上海上投招 标有限公司 为本项目的招标代理单位，负责项目实施过程中所涉及的招 标工作的全过程代理。 5） 在线课程 制作 单位 ： 开放大学 委托 上投公司 通过公开招标方式， 确定 辽宁向日葵教育科技有限公司 作为 在线课程 制作单位 ，负责 开放大 学理工学院 20门在线课程的制作 。 6） 在线课程资源建设项目评审组 ： 由 上海开放大学联合第三方评 审 机构 上海日天教育咨询有限公司 ，组成了 在线课程资源建设项目 评审组， 基于规范的相关要求标准，对理工学院 2017年度的 20门 在线课程的 制作的 初稿进行评测，为在线课程资源建设、改进等提供参 考和依据。 2. 项目 管理流程 上海开放大学 在线课程建设规范，对 课程资源建设项目 制定了项目 管理流程， 项目 申报 、 项目 评审 、 项目 开发、 结项 验收等流程如下图 一 所示： 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 14 图 一 项目管理流程 图 3. 资金管理流程 开放大学在线课程资源建设项目的资金均为财政资金， 项目支出分 为：专用设备购置（课程建设）、委托业务费、劳务费、其他培训费、 差旅费、邮电费、咨询费、印刷费等。其中除“专用设备购置（课程建 设）费用”通过财政直接支付外，其他费用均通过零余额账户进行授权 支付。 （ 五 ）项目实施情况 1.项目 立项 2017年 1月 23日，理工学院 “ 在线课程资源建设项目 ”正式立项， 申报 资源中心、学院（分校）和课程建设团队：按学科专业课程建设要求，课程建设团 队在学院（分校）指导下，根据学校资源建设发布要求有针对性地申报并填写建设 申报书。 初审 学院（分校）：对填写的申报书及预算进行初审。学院（分校）对填写的申报书及预算进行初审。学院（分校）负责签署意见、加盖公章并汇总后，送资源中心。 专家小 组评审 资源中心和专家组：资源中心聘请校内外专家组成评审小组，对项目需求、方案和 预算形成等进行评审。 反馈与 修改 资源中心和课程建设团队：资源中心汇总评审意见并反馈至课程建设团队修改。 终审 学校网络安全与信息化、资源建设工作领导小组、资源中心：召开学校网络安全与 信息化、资源建设工作领导小组会议，对资源项目进行终审，资源中心公布终审结 果及立项。 课程开 发 资源中心、课程建设团队、技术公司：资源中心组织课程建设团队和技术公司沟通 协调会，提出来招标需求，由采购与招投标管理办公室公开招投标，选择合作技术 公司。签订合同后，课程建设团队会同合作技术公司，共同进行课程开发建设。 中期检 查 资源中心、课程建设团队、专家组：资源中心根据项目进展情况，在项目建设过程 中组织专家对项目进度及实施情况等进行检查国。 结项验 收 资源中心、专家组、课程建设团队、技术公司、第三方评审公司：项目完成后，资 源中心提出招标需求，由采购与招投标管理办公室进行公开招投标确定第三方评审 公司，对项目进行评测。资源中心反馈评测报告至建设方修改，试运行一学期后， 聘请专家完成项目最终验收。 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 15 涉及机械电子工程、计算机应用技术、软件工程、机电一体化技术、建 筑工程管理、汽车营销与服务等 6个专业 共 20门课程。 2017年 3月， 理工学院 与 20门课程的 负责人分别签属了在线课 程开发任务责任书。 2.委托招标 2017年 3月 15日， 开放大学与 上 海上 投 招标有限 公司 （以下简称 “上投公司”） 签订了编号为 CGXQ-00-20170313-1347的 上海市政府 采购委托协议书 ，委托上投公司 负责代理“关于理工学院 2017年度 在线课程资源建设 ” 需求委托” ， 政府采购编号为 00-17-33595，财政 预算批复资金为 400万元。 2017年 3月 16日，上投公司在上海市政府采购网，公开发布了招 标编号为 SHXM-00-20170315-0259的招标公告。 对 具有专业建制视频课 程及后期编辑制作 、 多媒体课件开发 、 移动课件开发能力的 制作 单位 ， 实施公司招标。 2017年 4月 7日，上海中文在线文化发展有限公司、辽宁向日葵教 育科技有限公司、上海电达信息技术有限公司、上海绿荧 文化传媒有限 责任公司、北京慕华信息科技有限公司等 5家公司，参加了开标。经过 评标委员会的综合评定，推荐第一中标人为：辽宁向日葵教育科技有限 公司（以下简称“ 向 日葵科技 公司 ”） ，第二中标人为：上海电达信息 技术有限公司。 2017年 4月 14日，上投公司发布了中标通知书，向日葵科技公司 确定为中标人，中标金额为人民币 371.92万元 。 3.签订合同 2017年 5月 8日，开放大学与向日葵科技公司签订了上海开放大 学理工学院 2017年度在线课程资源建设项目技术开发合同 ，约定合 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 16 同金额 371.92万元、向日葵科技公司于 2017年 11月 1日，完成提交 课程成果的任务，由开放大学对课程成果进行验收确认。 4.课件制作 2017年 4月 20日至 2017年 5月 10日，项目启动，按学科分配项 目人员，完成课件制作基础建设。 2017年 4月 24日前，针对学科特点和教师特点，进行教学设计、 虚拟背景设计、课件设计。 2017年 5月 14日至 2017年 10月 15日，完成课 程 的制作和剪辑相 关工作。 2017年 10月 15日至 2017年 10月 25日，完成课程上线、调试。 2017年 10月 26日至 2017年 10月 31日，完成课程视频的试运营。 2017年 11月 1日，完成提交课程成果的任务，由开放大学对课程 成果进行验收并确认。 5.在线课程资源评审 2017年 7月，开放大学 委托上投公司 ， 对 上海开放大学四个学院 2017年度的 68门课程资源建设项目（包括理工学院的 20门课程）， 实 施 公 开 招标 。 2017年 8月 1日，上投公司发布了编号为 SITEN-SZC-S2017431号 的招标公告， 2017年 9月 5日，上海派汀信息科技有限公司、上海日天 教育咨询有限公司、上海晟聪文化 传播有限公司等 3家单位参与开标， 经评标委员会的综合评定，推荐第一中标人为：上海日天教育咨询有限 公司（以下简称“日天咨询公司”），第二中标人为：上海晟聪文化传 播有限公司。 2017年 9月 8日，上投公司发布了中标通知书，日天咨询公司确定 为中标人，为 2017年度在线课程资源项目进行评测，中标金额为人民 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 17 币 43.0144万元。 开放大学与日天咨询公司签订了 2017年度上海开放 大学在线资源建设第三方评测项目合同，合同金额为人民币 43.0144 万元。 日天咨询公司 基于规范，对开放大学理工学院建设的 20门在 线课程初稿 进行评测，于 2017年 11月 20日 出具了上海开放大学在 线课程资源评审报告（ 2017年度） （评审稿） ， 2018年 5月 21日取 得了正式稿 ， 为在线课程资源建设、改进等提供了参考和依据。 20门课 程均已通过评测并上线运行。 7.在线课程资源上线 截 止 2018年 3月 ，理工学院的 20门 在线 课程 均已 上线运行。 8.项目评价 在线课程资源建设项目 实施，首先可直接为学习者的学习提供保证， 方便其随时随地，充分利用碎片化时间进行学习，解决学生在学习上的 工学、家学等矛盾，满足和推动学生的自主学习。其次，技术制作上支 持在线学习或移动学习，为社会成员提供更加灵活、便捷、公平、开放 的学习方式和多层次多样化的教育服务，推进上海开放大学实现全民、 终身的学习对象服务的目标，也为人人皆学、时时能学、处处可学的办 学模式创新，在学习资源上提供了一定的保证。再次，项目建设对教师 转型发展其应用新技术的能力的内涵建设，探索校内外的合作机制以及 引入第三方客观公正的评价机制来保证建设 的质量，都有其一定的意义。 最后，上海开放大学将以在线课程资源、教师团队、平台建设等多方面 转型发展，推动信息技术与教育教学深度融合的教学模式改革创新，最 终为建成以卫星、电视和互联网等载体的远程开放继续教育服务平台， 全面提高开放办学的教学质量，为实现服务学习型社会及人力资源强国 的长远目标作出积极贡献。 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 18 （ 六）项目绩效目标 评价小组 对“在线课程资源建设项目”进行了前期 调研、与项目单 位 沟通与 共同论证， 分解细化了项目年度绩效目标， 将此项目的目标 梳 理 归纳如下： 1.总体目标 在线课程资源建设项目的总体目标是： 响应国家中长期教育改革 和发展规划纲要（ 2010-2020年）提出的“办好开放大学” 的要求， 推动建成以卫星、电视和互联网等为载体的远程开放继续教育服务平台， 建成满足多样化学习需求的优质课程资源，服务学习型社会建设。 2.绩效目标 根据 上海市预算绩效管理实施办法（沪财绩 201422号） 中对 绩效目标内容的要求，结合指向明确、具体细化、合理可行的原则， “ 在 线课程资源建设项目 ”的绩效目标如下： 1） 建立 完善 项目管理 制度 ； 2） 严格按项目管理 制度 实施管理 ； 3） 项目 执行 政府采购 流程； 4） 项目按 项目申报 方案计划实施 ； 5） 项目 100%按时完成 ； 6） 项目 验收合格 率 100%； 7） 预算执行率达到 90%以上 ； 8） 课程实现随时随处可学的目标 ； 9） 学生使用满意度达 100%； 10） 评 测 意见响应及时 11） 课程更新及时； 12） 项目 管理 可持续。 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 19 二、 绩效评价工作情况 （一） 绩效 评价目的 本次绩效评价目的是对 “ 上海开放大学理工学院 2017年度在线课 程资源建设项目 ” 的 制度建设及执行情况、项目 实施情况、资金使用情 况和项目取得的成效进行评价，总结经验，发现问题，提出改进的意见 和建议。 （二）评价依据 1.上海市预算绩效管理实施办法（沪财绩 201422号）； 2. 上海开放大学在线课程建设规范 ； 3.关于 公布 2017年度上海开放大学课程资源建设项目立项结果 的通知 （沪开大 20179号）； 4.上海开放大学理工学院 2017年项目支出预算明细表 5.项目绩效目标申报材料 6.上海开放大学在线课程项目教师团队建设经费预算与使用管理 意见（修订）（沪开大 201644号） 7.上海开放大学在线课程资源评审报告（ 2017年度）； 8. 与本项目相关的实施方案、合同、财务等其他资料。 （三） 绩效评价工作 方案制定过程 绩效评价小组（以下简称“评价小组”）针对项目进行前期调研， 研读了项目相关文件，安排了调研、访谈。经评价小组内部研讨后，初 拟了指标体系、访谈内容，并与项目单位沟通后根据相关意见，最终确 定本次绩效评价的指标体系及访谈内容。 （四） 绩效评价原则、评价方法 本次绩效评价采用方法是指标评价法、资料分析法、访谈调查法。 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 20 本评价组根据绩效评价的基本原理、原则和项目特点，结合绩效目 标，按照“结果导向、过程控制”的原则，参考财政部门的绩效评价指 标体系共性框架，独立设计指标体系。该项目绩效评价指标体系包括项 目决策、项目管理、 项目绩效三部分内容，主要围绕立项合理性、项目 组织管理有效性、资金使用合规性等方面，客观分析项目的产出和效果。 指标体系包括综合评价表和基础表两部分，综合评价表是评价的依 据，基础表是支持评价的基础数据，由被评价单位负责填报。指标体系 为评分所用，需要基础表、访谈支持。综合评价表中各指标的权重由评 价小组根据绩效评价原理和评价需求，在调研基础上依据指标的重要性 确定。 （五） 绩效评价实施情况 评价小组自 2017年 5月中旬起，开始执行现场调查、财务检查、 数据收集、访谈、数据分析等程序，并根据收集的信息进行了绩效评价 报告初稿的撰写。 1. 现场调查 2018年 5月中旬起，评价小组对项目实施方 开放大学 进行现场 调查。调查内容主要包括 “在线课程资源建设 项目 ” 立项的背景及目的、 项目管理情况、项目实施过程、计划完成情况、项目成效等。 2. 资金使用情况检查 2018年 5月 下 旬起，评价小组拟对 开放大学“在线课程资源建设 项 目” 进行资金使用情况检查，资金使用情况具体内容包括 ： 项目 预算 资 金到位情况、资金支付审批情况、资金支付所需材料齐备情况、支出范 围相关性和 按合同 支付进度合规性等；拟对财务内控机制情况检查，包 括是否实施专账核算、资金管理制度执行情况等。 上海开放大学理工学院 2017年度在线课程资源建设项目绩效评价报告 21 3. 访谈调查 2018年 6月 上 旬起，评价小组拟对 “在线课程资源建设 项目” 的利 益相关方 进行访谈。评价小组根据实际情况按照访谈提纲对被访谈人员 通过 面谈、邮件、电话 、即时通信工具 等形式的访谈，了解项目相关信 息，具体访谈调查情况详见附件四。 4. 撰写报告 2018年 6月 中 旬起，评价小组根据收集的相关资料，结合现场调研、 现场检查、访谈调查等方式取得的相关信