中国教育在线 中国教育网 加入收藏 设为首页


基于数据支持的教学质量常态监测体系的构建与实践——以上海电机学院为例

http://shanghai.eol.cn/  中国教育在线    2018-07-03    

  中国教育在线讯(作者:董雪静,贾欣歌等)摘要:“状态数据常态监测”是中国特色的“五位一体”的高等教育评估制度的重要组成部分,也是新建本科院校“自我评估”时代的重要建设任务之一。上海电机学院历时 8 年的探索与实践,对标教育部、上海市教委两级教学质量数据标准,研制符合校本特色的教学质量数据标准,逐步构建了基于数据支持的教学质量常态监测体系。文章着重介绍了这一体系建设的重要意义、主要建设内容,以及学校通过教学质量数据常态监测持续改进教学工作、提升人才培养质量的实施成效,以供同类院校借鉴。

  “教育评估监测是在现代治理理念指导下, 运用科学的方法采集和分析相关数据,进而对特定的教育事实做出精确判断,以服务于教育决策和实践的一种专业活动。 ” [1]当前,我国高等教育已进入以提高质量为核心的内涵式发展新阶段,《国家中长期教育改革和发展规划纲要(2010-2020 年)》明确要求:“建立以提高教育质量为导向的管理制度和工作机制。 ”《上海市中长期教育改革和发展规划纲要(2010-2020年)》要求:“建立教育质量评价和监测体系,实施教学质量综合评价改革试验。 ”

  在数据时代背景下,大学的管理思维开始逐渐改变,从传统的经验管理变为以数据、实证为依据的科学管理。 随着技术的发展,学校拥有可用的、高质量的海量数据逐渐成为现实,在教学质量常态监测领域发挥着日益重要的作用。 近年来,上海电机学院针对新建本科院校教学管理现状与特点,对标教育部、上海市教委两级质量标准,构建适应校本实际的“一个中心、二维评估、三大平台、四重改进”常态化教学质量监测体系,即以数据监测为中心,突出定量兼顾定性的二维评估方法,依托学校本科教学质量管理、专业教学质量管理、 教师教学综合评价管理三大数据平台,落实学校、二级学院、专业、师生四个方面的持续改进,逐步形成全过程管理、全员参与的质量闭合环,促进了办学效益、教师教学能力和人才培养质量的提升。

  一、数据支持对教学质量常态监测体系建设的意义

  1. 有利于满足管办评分离的高等教育评估要求

  随着高等教育发展的新形势、 新要求的变化,国家对教育评估监测工作越来重视,《国家中长期教育改革和发展规划纲要(2010-2020 年)》提出:“加快学校管理信息化进程,促进学校管理标准化、规范化。 推进政府教育管理信息化,积累基础资料,掌握总体情况,加强动态监测,提高管理效率。 ”《教育部关于深入推进教育管办评分离 促进政府职能转变的若干意见》提出:“依法对各级各类教育实施督导和评估监测……整合教育质量监测评估机构, 完善监测评估体系,定期发布监测评估报告。 ”这些要求实质上表明推进教育评估监测、实现管办评分离,是深化教育综合改革的重要内容,亦是推进依法治教的重要任务和有效抓手。“教育评估监测的根本任务是依据其占有的真实数据,对教育改革和发展的现状及其原因做出客观的诊断与分析,提出改进工作的对策建议,为教育决策服务,为教育实践提供指导,促进教育事业健康发展,促进学生健康发展。 ”[1]因此,建立数据支持的教学质量常态监测体系,一方面为满足上级“管办评”分离的评估监测工作要求提供了必备的基础; 另一方面,从学校内部来看,上海电机学院逐步建立了教务处、各二级学院、教学质量管理办公室“三位一体”的教学管理、人才培养、质量监测管理模式,并通过质量数据常态监测分析学校、二级学院、专业及师生的教学质量和学业水平,推进科学诊断和持续改进机制的建立。

  2. 有利于落实“五位一体”特色评估工作制度

  《教育部关于普通高等学校本科教学评估工作的意见》(以下简称《意见》)进行了中国特色“五位一体”评估制度的顶层设计, 其中“状态数据常态监测”是“五位一体”的评估制度的重要组成部分,也是“院校评估”“自我评估”“专业认证及评估”“国际评估”其他几项评估工作的重要基础。《意见》要求: “高等学校要充分利用信息技术, 采集反映教学状态的基本数据,建立高等学校本科教学基本状态数据库。 高等学校对数据库数据要及时更新, 及时分析本科教学状况,建立本科教学工作及其质量常态监控机制,对社会关注的核心教学数据须在一定范围内向社会发布。 ”《国务院关于印发促进大数据发展行动纲要的通知》亦指出:“探索发挥大数据对变革教育方式、 促进教育公平、提升教育质量的支撑作用。 ”利用信息技术和数据处理技术,对海量教学数据进行收集与挖掘、关联与研判,推动教育评估监测走上系统化、精准化、科学化轨道, 是当前教育评估监测的发展趋势和改革方向。上海电机学院 2011 年首批参加教育部本科教学基本状态数据采集试点,积累了从 2009 年到 2017 年完整的采集数据;2014 年始,学校参加上海市教委“本科教学质量核心状态数据”采集,增加了数据采集和利用工作的新经验,也为建立基于数据支持的教学质量常态监测体系奠定了坚实的工作基础。

  3. 有利于建立健全学校内部教学质量保障体系

  随着教育评估监测工作的不断完善与推进,高等学校的质量保障主体意识不断增强,《意见》强调:“高等学校应建立本科教学自我评估制度……要建立有效的校内教学质量监测和调控机制,建立健全学校本科教学质量保障体系。 ”《上海市教育委员会关于开展市属普通高校本科教学工作审核评估的通知》 提出“实行目标为导向,问题作引导,数据为依据,事实作判断的评估方法”。 要求参评学校在数据填报基础上形成《教学基本状态数据分析报告》,会同学校《自评报告》与近三年《本科教学质量报告》提交评审。 另外,《上海市教育委员会关于推进本市高校本科专业评估工作的若干意见》要求各高校“建立常态化的专业评估制度,不仅是高校本科教学质量保障体系的重要组成部分,也是促进专业建设向更高水平发展的需要”。2013 年起上海电机学院参加了上海市高校新一轮专业评估工作,建立起“五年一轮”的常态化专业自主评估制度,并且合理地设计、建设专业评估数据采集平台,实现评估指标体系中专业数据信息的收集、管理、校验、诊断、查询等功能。 实践表明,建设基于数据支持的教学质量常态监测体系,是进一步完善校内教学质量保障体系的重要举措,“实现数据库形势下的现代化信息监控,能够更高效、更全面地了解整个高校的教学动态,从而确保教学工作的顺利开展,最终保障高校的教育质量”。 [2]

  二、建设数据管理系统构建教学质量常态监测体系

  1. 建成运行学校教学质量管理数据平台

  第一,实现教学质量数据一库多用。“教学状态数据平台的建设是教育信息化的必由之路,也是高校内部质量保障体系建设的重要组成部分。 ” [3]学校着力于教学质量管理信息化、科学化建设,有效推进信息技术与质量常态工作的深度融合。 学校建成教学质量管理数据平台,教学质量管理数据库以数字化的方式呈现,形成系统化的、反映学校教学运行状态的数据集, 既能满足教育部“国家监测平台教学状态数据”“高等教育事业基层统计报表”、上海市教委“教学质量核心数据”的在线管理;又能支持审核评估、专业评估等多类评估,并生成相应的数据分析报告等。

  第二,建立学校特色教学质量数据库。 学校结合年度专业质量报告发布开发了“专业教学状态数据子系统”,结合教师教学激励计划实施开发了“教学团队绩效评价子系统”,结合教师教学质量测评开发了“教师教学综合评价子系统”, 建设适切校本实际及特色的数据系统和数据库。 系统支持多维度、多度量值的分析,通过雷达图、红绿灯、柱状图等多种可视化形式,监测学校教学工作中的各个环节,通过数据系统“用数据和事实说话”,为教学质量监控部门和各级管理者评估、决策提供客观依据。

  2. 实施本科教学基本状态数据常态监测

  第一,实施教育部国家监测平台教学状态数据监测。 教学基本状态数据采集是教育部实施高等学校教学质量常态监测的重要内容。 学校对标教育部普通高等学校办学条件指标,通过数据分析逐年监测学校办学基本情况,并结合教学工作合格评估整改和审核评估筹备, 有针对性地监测学校办学指标达成情况,同时结合上海市属同类院校同类数据,对比分析学校办学状态的优缺点并及时整改,有效落实“五位一体”的评估制度。

  第二,实施上海市教委本科教学质量核心状态数据监测。 学校对标教育部国家办学标准的同时,兼顾上海市教委办学质量要求。 教学质量核心状态数据是与《本科教学质量报告》配套的数据监测系统。 学校制定《本科教学质量报告支撑数据任务分解表》《本科教学质量报告支撑数据填报表》, 明确各数据项的指标内涵、计算方法和责任部门,确保质量核心状态数据与教育部国家监测平台教学状态数据、高等教育事业统计表数据的协调一致性。 并根据质量标准对数据信息进行纵向和横向的比较研究,以此来反映学校教学质量发展的动态趋势,做到常态监测、持续改进。

  3. 研制发布专业质量报告和状态白皮书

  第一, 施行特色化校本专业教学状态数据采集。学校以专业达标评估为契机,建立了“五年一轮”的制度化、常态化的专业评估制度,从专业设立到专业发展的全过程实施各阶段的质量监测与评估,建立专业质量档案。 学校积极落实上海市教委关于“定期发布专业质量报告”的要求,自 2013 起,连年发布专业质量报告,实施专业质量年检。 2015 年,学校以《上海高校本科专业评估指标体系》为基础,结合学校办学定位和办学实际,将其中可量化的指标研制成《专业教学状态数据采集表》,包括 6 项一级指标、14 项二级指标、33 个观测点和 65 个数据采集项,并在各专业质量报告编写过程中集中采集专业教学状态数据,逐步建立了“专业教学状态数据库”。

  第二,编制发布专业教学状态白皮书。 在完成专业教学状态数据采集的基础上,学校研制了《专业教学状态数据建模表》。 2016 至 2017 年,学校连续发布《本科专业教学状态白皮书》,以图表的形式呈现专业教学各个环节的状态, 在对各项量化数据进行统计、分析、挖掘的基础上,形成专业教学状态综合质量数据。 此外还应用标准差计算方法对各专业教学状态一级指标、二级指标得分情况进行离散程度分析,以判断各专业在某一教学状态指标中得分的差异和分布情况,并由此建立起一套以数据为基础、为支撑的常态化校内专业监测评估与改进机制。

  4. 强化教师教学数据评价的管理与激励

  第一,推进教师教学激励计划绩效数据评价。 学校非常关注上海市教委对教师教学激励计划核心数据的各项要求,自 2016 年获批计划伊始,便认真对标市教委相关指标要求,通过数据挖掘、结合教学团队建设,提出学校推进激励计划顺利开展的主要问题及改进举措。 学校出台《本科教学教师教学团队绩效评价指标体系》《二级学院教师教学激励计划绩效评价指标体系》,加强对激励计划实施的监管和指导,并将绩效考核结果作为重要依据之一,实施教学团队动态晋级、末尾降级以及绩效激励。

  第二,优化教师教学综合评价数据处理与利用。通过几年探索与实践,学校教师教学综合评价工作日趋完善,形成了多角度、多元化、多层次的综合评价指标体系,其中督导评教占 30%、同行评教占 20%、学生评教占 30%、学生课程评价占 20%。 督导评教为传统纸质方式,同行评教、学生评教为网络方式,学生课程评价为机读卡方式(分中英文版)进行测评。 学校建立了一人一档的教师教学综合评价数据档案,每学期初向教师进行反馈,促进教师有针对性地自我反思与教学改进。 同时,学校将评教结果作为职称评聘的重要依据,加大教师在教书育人方面的考核比重, 强化教师的岗位责任。 另外,学校建立了基于教学质量数据评价的荣誉体系,加大对潜心一线教学的团队及教师的激励力度。

  5. 完善学业监控质量标准提升培养质量

  第一,细化优化学业管理制度。 人才培养是高校办学之本,学生学业质量常态监测是学校教学质量管理中的重要环节。 通过学业监测数据的采集,学校逐步构建了激励学有余力的学生更快和更好成才的“快车道”、 引导大多数学生按常规标准顺利完成学业的“常规车道” 以及帮助遇到困难的学生尽可能完成学业的“慢车道”,实现各层次学生的共同成长。

  第二,制定和实施学生学业预警。 学校研究制定《学生学业警示及帮扶办法》,推行黄色(警告)、橙色(降级)、红色(退学)三级警示,警示与帮扶相结合,通过学业预审、 发放预警通知单及家校配合教育等方式,最大限度做到“以生为本、因材施教、因材施管”,督促和帮扶学习困难学生顺利完成学业。 同时,建立毕业生质量追踪反馈制度,定期对毕业生认同度和满意度进行调研评价,每年发布由第三方评估机构完成的学生成长报告和毕业生就业质量报告,关注在校生和毕业生成长质量数据,作为落实人才培养改进的有益借鉴。

  三、数据支持下的教学质量常态监测工作实施成效

  “在当今高等教育大众化时代下,实施全面教学质量监控已经成为一项系统工程,如何运用教学基本状态数据来探索有效的教学质量监控机制是高等院校长期面临的一个共同实践课题。 ” [4]作为新升本科院校, 学校自 2011 年起启动教学质量状态数据采集工作,基于数据支持的教学质量常态监测体系经历了从无到有、从粗到精的构建过程,并在院校数据监测、专业认证与评估、团队评价、综合评教、学业评价等工作中进行了持续实践,取得了较好成效。

  1. 系列校本教学质量数据标准逐步建立

  针对新建本科院校教学管理的现状与发展特点,学校在对标教育部、上海市教委相关教学质量标准的基础上,研制建立了符合学校办学实际的专业教学状态数据采集标准、建模标准,教学团队绩效评价标准、激励分配导向标准,教师教学综合评价标准、职称评聘教学评议标准,学生学业预警标准等等,建立了一系列具有校本特色的学校、专业、教学团队、师生等不同层面的若干教学质量数据标准。 通过教学质量管理数据平台,建立起互利互助的数据交流模式,通过数据跟踪与整合,形成针对性与整体性相结合的学校教学质量“数据仓库”,实现了质量数据标准从质保“工具”走向“系统”的内部质量保障体系构建。

  2. 教学质量数据监测发布制度建立实施

  一是落实年度质量报告发布制度。 学校每年发布《本科教学质量报告》《专业质量报告》《专业教学状态白皮书》《就业质量报告》, 增加教学质量数据的透明度,促进教学质量自我监测与自我评价;二是建立教学质量发布会制度。 学校自 2016 年起,建立了一年一度的教学质量发布会制度,向全校师生公开,进一步提高对教学质量数据的关注意识, 明确数据内涵、弥补数据短板,通过理性分析数据,查找不足;三是深化月度教学质量数据监测通报制度。 学校坚持教学例会制度,及时通报学校、二级学院教学日常检查以及教学评价情况,细化强化教学质量数据常态监测分析与诊断,及时发现问题并落实改进。

  3. 教学质量保障体系建设日益科学完善

  通过各项教学质量数据采集、审核、对标,学校逐步建立健全了教学质量“内部监控”机制。 同时,通过院校评估、专业认证、第三方评价等“外部评估”,学校进一步完善内外互融互动的教学质量保障体系建设。2017 年,学校委托上海市教育评估协会开展的第三方课堂教学督导与评价,是本市高校实施的首个本科第三方课堂督导项目,也是学校进一步完善教学质量保障体系的新尝试。 以教学质量数据为中心、依托数据平台建设,学校把与教学工作密切相关的数据按照一定的逻辑关系组织起来,形成系统化的、反映学校教学质量状态的数据集, 逐步形成“数据留存-数据采集-数据审核-数据分析-数据诊断-数据改进”循环往复的、多层的教学质量监控闭环循环,将质保体系的建设与完善建立在有效的数据积累之上,规范并推动学校教学质量管理工作良性运行。

  4. 自我评估与自主改进能力得到加强

  依据教育部、市教委和校本质量标准体系,把握学校应用型人才培养目标与市场的契合度,通过教学质量数据监测,借助督导评价、学生评价、第三方评价等手段,学校对办学指标、专业建设、教师教学、学生学习等进行客观评价,并及时通过《教学工作改进意见书》《教学情况反馈通知单》等方式反馈给相关职能部门和二级学院,建立起“诊断-反馈-整改-回访”的持续改进机制。 同时,充分调动二级学院的积极性和主观能动性, 处理好反馈环节与闭环信息通道中前向、后向若干环节的联系,进而产生良好的激励效应,实现教学工作自我约束、自主改进的教学质量良性循环,同时也为学校迎接教学工作审核评估奠定了良好的基础。 审核评估要求“建立在学校自我评估、校内教学质量保障体系建立及学校利用教学基本状态数据对教学质量实施常态监测的基础上”, [5 ]通过基于数据支持的教学质量常态监测体系的建设与实施,学校逐步实现从被动接受评估向主动迎接评估,从单纯教学质量评估向真正以评促建的转变。

  5. 内涵建设水平和人才培养质量持续提升

  学校“利用大数据的积累和分析进行教学质量管理,建设高校质量保障体系,实现教育思想、理念、方法和手段的全方位创新”, [6 ]确保内涵建设水平和人才培养质量持续提升。 一是专业质量意识不断增强。学校将专业建设与各项教学质量数据标准有机结合,增强专业建设的数据意识和质量意识, 引导专业从“要我评”到“我要评”的转变,激发“以评促建”专业内涵提升的内驱力。 截至目前,有毕业生的 22 个专业完成达标评估,27 个专业发布年度质量报告,3 个专业入选教育部“卓越计划”,9 个专业获批“上海市应用型本科试点专业”; 二是教师教学投入和教学质量切实改善。 通过教学综合评价改革和建立激励计划评价制度,师生对教学质量常态监测的重视度、参与度不断提高,各项评价结果呈现方向一致、稳中有升的趋势,监测数据表明学校近年立足教学一线,狠抓教学质量取得了切实的成效;三是学生学业水平不断提高。 通过利用教学质量数据管理平台,为教学和决策提供了有效的数据支持, 每个学习周期结束之后的学业审核, 促进了学生学业水平和专业实践能力的提升,毕业生就业率连年保持在 98%以上。

  参考文献

  [1] 尧逢品.大数据视野下的教育评估监测探微[J].上海教育评估研究,2016(1):20-24.

  [2] 张健,夏晓旭,张华春,等.大数据时代背景下本科教学质量动态监控系统的构建[J].教书育人,2016(2):48-49.

  [3] 李卓.基于内部质量评价的教学状态数据平台构建研究[J].教育现代化,2016(6):91-92.

  [4] 吴建国,吴海燕.教学基本状态数据在高校教学质量监控中的作用[J].高等建筑教育,2016(5):49-53.

  [5] 施建祥.管办评分离体制下我国高等教育评估转型研究[J].上海教育评估研究,2015(2):1-5.

  [6] 王新环.利用大数据保障教学质量提升[N].中国教育报,2017-04-08(03).

免责声明:

① 凡本站注明“稿件来源:中国教育在线”的所有文字、图片和音视频稿件,版权均属本网所有,任何媒体、网站或个人未经本网协议授权不得转载、链接、转贴或以其他方式复制发表。已经本站协议授权的媒体、网站,在下载使用时必须注明“稿件来源:中国教育在线”,违者本站将依法追究责任。

② 本站注明稿件来源为其他媒体的文/图等稿件均为转载稿,本站转载出于非商业性的教育和科研之目的,并不意味着赞同其观点或证实其内容的真实性。如转载稿涉及版权等问题,请作者在两周内速来电或来函联系。

学校查询

Ƽ
eol.cn简介 | 联系方式 | 网站声明 | 京ICP证140769号 | 京ICP备12045350号 | 京公网安备 11010802020236号
版权所有 北京中教双元科技集团有限公司 EOL Corporation
Mail to: webmaster@eol.cn