教育数据应用绩效评估框架研究.pdf

专题研究教育与技术 年第 期 教教育育数数据据应应用用绩绩效效评评估估框框架架研研究究 王 娟高 振娄方园孔婉婷摘 要:对教育数据深入应用进行有效的绩效评估已经成为教育数据开放共享的重要环节 我国的教育数据应用绩效评估在发展过程中遭遇了评估指标统一性、科学性、合理性等方面问题亟需进行改革与创新 为此从绩效评估的内涵、现状、理论基础等出发构建以教育数据战略、教育数据质量、教育数据安全、教育数据共享、教育数据治理和数据应用成果为核心指标的教育数据应用绩效评估框架并从基础支撑、平台服务和应用创新三个层面提出教育数据应用绩效评估的实践路径以期解决教育数据应用绩效评估问题提升教育数据应用效率促进我国教育大数据战略的深入推进关键词:大数据人工智能教育数字化教育数据应用绩效评估框架收稿日期:./.作者简介:王娟教育学博士江苏师范大学智慧教育学院教授主要研究教育大数据、在线教育、智慧教育高振、娄方园江苏师范大学智慧教育学院硕士研究生主要研究智慧教育、人工智能、教育大数据孔婉婷徐州市第一中学主要研究项目式学习基金项目:全国教育科学规划 年度课题“国家中小学智慧教育平台的区域规模化应用模式与实践成效研究”()一、引言教育数字化战略的不断推进加快了数据在教育中的深入应用 然而教育数据在受到越来越多关注的同时应用过程中出现了教育数据安全威胁、教育数据孤岛、教育数据误用滥用等问题严重阻碍了数据的开放与共享甚至造成了危害师生、社会和国家安全的严重后果为解决教育数据应用产生的诸多问题教育部、国务院办公厅等部门出台了多个政策文件 年教育部关于加强新时代教育管理信息化工作的通知强调要“建立数据质量评估制度强化教育数据质量保障打通数据孤岛”年国务院办公厅关于同意建立国务院参事建言献策成果外部评估机制的函强调“依据评估标准与参考指标对多个评估部门的评估职责和工作规则实施评估”在相关政策指引下建立全面、客观的绩效评估框架评估教育数据应用实效已成为教育数字化转型背景下推动教育数据应用共享的有效途径 目前已有学者依托“开放数据晴雨表”“开放数据指数”等国际评估标准构建了我国政府开放数据评估框架并从投入、产出、效果等 个维度对省市政府数据开放平台的服务绩效进行评估与分析同时对数据的评估指标体系开展研究 然而现有的绩效评估还存在评估标准不统一、绩效评估指标设计的科学性与合理性有待考量等问题致使绩效评估结果准确性不高 因此亟需设计较为完整的教育数据应用绩效评估框架全面、客观地评估教育数据应用在教育数据战略、教育数据质量、教育数据安全、教育数据共享和教育数据治理等方面存在的问题探寻教育数据应用改进和发展的方向更好地指导教育数据应用绩效评估工作的开展推动教育数据应用健康发展 年第 期专题研究教育与技术二、教育数据应用绩效评估分析.教育数据应用绩效评估的目的政府绩效评估可以提高政府的工作效率与管理能力促进政府的公共服务质量提升社会各方的满意度营造公众与政府互相信任的和谐局面美国学者阿尔蒙德()将绩效评估的发展目标概括为政治权力、民主化、经济增长、福利分配等 个维度丰富了政府绩效评估的价值取向在教育数据应用方面通过建立科学有效的教育数据应用绩效评估框架教育部门、各级各类学校、教育培训机构等评估主体依据新兴技术采取部门自评、监管督查、第三方评价和社会评议等综合评估方式对教育数据的数据战略、数据治理、数据共享、数据安全、数据质量等方面进行评估探寻教育数据应用过程中的症结所在提高教育数据的应用效率基于此对教育数据应用绩效中各主客体的评估可以充分把握主客体在教育数据应用过程中存在的问题以实现教育数据应用政策的科学化、区域发展的均衡化、学校教育质量的优质化、教学效果的显著化及学生个性化学习水平的提高.教育数据应用绩效评估的内涵作为政府向教育提供的公共服务教育数据通过在教育决策、教育评价等方面的应用在教育领域产生满意效果并提升学生综合素养水平从而产生绩效 当前对绩效的界定存在两种不同的观点一种是“结果的绩效观”即“在特定的时间里由特定的工作职能或活动产生的产出记录”一种是“过程的绩效观”即“与组织目标有关的行动或行为能够用个人的熟练程度来测量”“绩效不是行为后果或结果而是行为本身”此外研究者从不同角度剖析了教育数据应用绩效的评估主体 例如从利益相关者视角看其数据需求是目标达成的评估依据绩效评估的利益主体可分为政府组织、非政府组织和个人三大类 活动理论视角下的教育数据治理由多元利益主体共同参与因此研究认为教育数据应用绩效评估的利益主体包括政府、教育部门、学校和教育培训机构、合作单位、社会组织、教师、学生等综合借鉴上述两种不同的绩效观及评估主体相关研究研究将教育数据应用绩效定义为:各评估主体基于大数据分析等技术围绕相关政策、评估制度、法律法规依据评估指标采取综合评价法对教育部门、各级各类学校和校外教学组织的教育数据应用绩效进行评估以提升教育数据应用的效率和质量.教育数据应用绩效评估的现实困境教育数据应用绩效评估能够提高教育质量、提升教育数据的应用效率但仍存在诸多现实问题 第一绩效评估的理念与内容的价值导向偏离了教育规律部分评估指标设计不够健全导致评估结果可用性不强第二教育数据来源有限数据资源配置不合理教育数据应用绩效评估体系缺乏科学性难以全面反映真实的教育情况第三绩效评估视角单一多以政府或专家的视角为主评估多采用定量或定性研究这种评估方法不够全面第四目前运用较多的“投入/产出比”“(数据包络分析)”等评估模型并未考虑非线性的情况然而当下教育数据的投入与产出并不是完全线性关系致使结果不能精准反映现实情况三、教育数据应用绩效评估框架设计为突破现实困境实现教育数据应用绩效评估改革创新亟须对绩效评估的指标进行系统设计 研究以新公共理论、利益相关者理论和 理论为依据遵循科学性、真实性、迭代性、健壮性等原则基于数据管理能力成熟度评估模型()和 模型参考诸多相关研究从教育数据战略、教育数据质量、教育数据安全、教育数据共享、教育数据治理和数据成果等 个方面设计教育数据应用绩效评估框架以提高评估框架的适配性提升教育数据的应用水平.理论依据()新公共管理理论 主张通过考核目标绩效的方式对单位和个人进行有标准的评价追求经济、效益和效率以实现评估质量、评估效率、评估成本等方面的优化 基于新公共管理理论进行绩效评估框架设计有利于促进教育数据质量的改善、数据治理的组织和建设、数据开放共享等实现教育数据应用的多维度提升()利益相关者理论 利益相关者是能够影响组织目标实现或者被组织目标实现的过程所影响的所有个人和群体强调绩效评价和管理专题研究教育与技术 年第 期 中心不仅仅取决于领导者 在绩效评估过程中涉及多个群体和个体要充分考虑各群体和个体的意见改善评估主体单一性拓展绩效评估框架的设计思路促进教育数据战略的制定()理论 强调一项技术创新的应用主要受到技术()、组织()和环境()方面的影响 目前该理论已广泛应用到共享平台创新、政府数据开放等方面绩效评估框架设计涉及新兴技术、基本技术条件等技术因素财政资源供给、人力资源状况等组织因素和财政需求、社会环境等环境因素这与 理论的灵活性和适用性等特点相契合()模型 该模型主要包括背景、输入、过程和成果等 项评估活动要求所有的利益相关者参与解释和建立共识的过程以协助确定评估问题、明确价值和价值标准、提供必要信息并协助解释调查结果这与绩效评估中多元主体参与高度契合同时模型中的 项活动贯穿了评估的整个周期与数据的全生命周期相契合()模型 是我国数据管理领域首个正式的国家标准 模型中定义了 个数据管理能力域和 个能力项以协助企业应用先进的数据管理理念和方法建立和评估自身的数据管理能力不断完善数据管理组织、程序和制度并充分发挥数据在促进企业向信息化、数字化和智能化发展方面的价值研究从数据管理能力成熟度评估模型中的能力域中选取若干域形成绩效评估的一级指标具有一定的规范性和权威性.设计原则教育数据应用绩效评估框架设计应保障评估的真实性、准确性和可靠性需要遵循以下原则促使教育数据从多层面、多角度发挥作用()科学性原则 开展教育数据应用绩效评估工作应遵循客观规律依据评估目的获得经得起实践检验、科学有效的评估结果 绩效评估框架应科学、全面地反映教育数据应用中的诸多问题如指标可用性不强、教育数据来源不足、评估视角单一等()真实性原则 绩效评估框架设计过程中必须保障评估的真实性、准确性和可靠性及时剔除虚假信息并进行责任追溯避免因此导致的政策误判等问题()迭代性原则 建立数据评估体系需要遵循循环迭代检验机制绩效评估需要经历“战略规划数据质量数据安全管理数据共享数据治理新战略规划”的教育数据应用周期遵循迭代性原则以提高教育数据的应用效率实现教育数据评估的结构化、共享化和安全化()健壮性原则 绩效评估框架应在一定限度内避免操作人员的不当操作需要考虑绩效评估的容错性、稳定性和吞吐量 如因不稳定而影响教育数据应用绩效评估的正常运行这是极其不可取的且极度危险的.评估框架研究参考关于防范和惩治教育统计造假弄虚作假责任制规定(试行)教育部关于加强新时代教育管理信息化工作的通知国务院关于印发促进大数据发展行动纲要的通知等国家标准及政策文件借鉴 和 模型梳理教育数据应用评估的研究观点结合新公共管理理论、利益相关者理论、理论为教育数据应用绩效评估框架制定层层递进的纵向指标每个纵向指标又细分了一定的横向指标 在此基础上将一级指标具体化、情景化确定绩效评估的核心要素形成了教育数据应用绩效评估框架如图 所示图 教育数据应用绩效评估框架教育数据应用绩效评估应遵循其全生命周期经历战略规划、数据质量、数据安全管理、数据共享、数据治理和应用成果的教育数据应用 年第 期专题研究教育与技术周期如同生命体要经历从诞生到衰亡的生命周期 同时教育数据应用的前一阶段会对后续的应用产生重要影响表明绩效评估应贯穿教育数据应用从诞生到衰亡的全生命周期以一个周期作为评估节点通过不断循环、迭代、优化构建并维系一种有序稳定、持续发展的教育数据应用生态()教育数据应用绩效评估的指标体系构建目前已有学者对教育数据应用绩效评估提出了相关建议 李莎等认为对教育数据战略的及时性、实用性、客观性、完整性进行评估可以改善教育部门的数据生命周期的管理赵磊磊等认为教育数据质量面临可用性不强、准确性不高、一致性较弱等问题会引发一定的教育数据风险杨现民等认为教育数据安全已成为影响大数据发展的关键因素开放数据全球报告()从免费、可更新、可发现、可持续、批量获取、开放许可和机器可读等 个指标评估数据的开放程度李青等认为教育数据共享应注重数据开放的标准和隐私保护为此基于上述研究结合相关政策文件研究构建了教育数据应用绩效评估框架的一级指标包括教育数据战略、教育数据质量、教育数据安全、教育数据共享、教育数据治理、数据应用成果等 个方面同时参考 模型中的 项评估活动和相关指标进一步将确定的 个一级指标细化成 个二级指标并在此基础上进一步对核心要素评估内容进行细致描述其指标划分、指标说明和相应的评估内容见表 表 教育数据应用绩效评估指标的划分与内容一级指标二级指标二级指标说明评估内容教育数据战略教育数据战略规划所有利益相关者达成共识的结果包括时间、成本、效益、风险等可为教育数据应用提供指导对其评估可从源头规范数据应用实用性、完整性、识别能力、分析能力教育数据战略实施完成战略规划并实现教育数据职能框架的过程对其评估可了解教育数据应用对数据战略的落实程度应用现状、落实情况、监控能力教育数据战略评估使用结构化的语言将收集到的各种战略规划和决策中使用的数据需求进行综合分析评估并按照架构规范重新组织指导教育数据应用系统的建设及时性和客观性教育数据质量教育数据质量需求可对照各群体需求度量和管理数据质量的依据教育数据管理目标、行业的监管需求、教育数据质量需求的一致性教育数据质量检查对有关技术等实时监控和评估教育数据质量问题教育数据质量分析对质量检查过程中发现的问题及相关信息进行分析找出教育数据质量问题及分析相关信息的能力教育数据质量提升对质量分析的结果制定、实施改进方案及预防方案改进方案和预防方案教育数据安全教育数据安全策略结合监管需求、相关标准等统一制定功能稳固性、标准统一性教育数据安全管理对教育数据访问的授权、分类分级的控制、监控教育数据的访问等进行数据安全的管理工作教育数据的隐私性、利益相关者的诉求教育数据安全审计负责定期分析、验证、讨论、改进教育数据安全管理相关的政策、标准和活动教育数据的隐私性和准确性教育数据共享教育数据集成共享建立跨系统、跨部门的集成共享机制通过组织内部数据集成共享相关制度、标准、技术等方面的管理促进教育数据的互联互通改善数据孤岛现象教育数据孤岛现象、相关数据标准和制度教育数据开放共享按照统一规划对组织内部的数据有选择地对外开放同时引入外部数据供内部应用促进内外部数据的互通提升数据价值教育数据的批量获取、开放许可和机器可读教育数据治理教育数据治理组织包括组织架构、教育数据责任等内容教育数据的统一性和教育数据的完善性教育数据制度建设保障教育数据管理和教育数据应用的各项功能的规范化运行教育数据的规范性、是否定期检查更新、是否了解利益相关者的诉求教育数据治理沟通确保所有利益相关者都能及时了解相关政策、标准等教育数据的精确性和教育数据的有用性专题研究教育与技术 年第 期 续表一级指标二级指标二级指标说明评估内容数据应用成果学生成绩表现反映学生在教育数据应用后的具体学术表现不同学科、课程和任务下的学生学习成绩学生参与情况反映学生在教育数据应用过程中的参与程度课程完成率、课程参与率、问题解决率等系统使用频率学生和教师对教育数据的使用情况数据平台登录频率、活动完成率等指标学习策略使用学生应用教育数据过程中是否采用了有效的学习策略课程笔记、在线讨论、资源阅读等学习策略的使用情况教师教学效果反映教育数据应用在教学过程中的效果学生的评价、教学反馈、教学效果评估等 ()核心要素及其评估内容分析教育数据战略教育数据战略包括教育数据战略规划、教育数据战略实施和教育数据战略评估教育数据战略规划是在所有利益相关者之间达成共识的结果包括时间、成本、效益、风险等教育数据战略实施是指完成教育数据战略规划并实现教育数据职能框架的过程 教育数据战略评估指使用结构化的语言将收集到的战略规划和决策中应用的数据需求进行综合分析评估并按照架构规范重新组织 通过对教育数据战略的内容进行评估可以满足内外部监管与外部组织互联互通等教育数据需要明确利益相关者的需求分析教育数据战略落实情况确定与目标之间的差距以便及时对实施过程进行监控明确发展方向教育数据质量教育数据质量包括教育数据质量需求、教育数据质量检查、教育数据质量分析和教育数据质量提升 教育数据质量需求是度量和管理数据质量的依据 教育数据质量检查是对教育数据质量问题进行实时监控和评估并向教育数据管理人员反馈教育数据质量分析是对教育数据质量检查过程中发现的教育数据质量问题及相关信息进行分析并定义教育数据质量问题的优先级 教育数据质量评估应依据教育数据管理目标、行业的监管需求参考相关标准对教育数据质量需求的一致性进行评估并根据教育数据质量的分析结果制定、实施数据质量改进方案确保教育数据质量不断改进和提升教育数据安全教育数据安全包括教育数据安全策略、教育数据安全管理和教育数据安全审计 教育数据安全策略是教育数据安全的核心内容 教育数据安全管理是在教育数据安全标准与策略的指导下通过对教育数据访问的授权、分类分级的控制、监控教育数据的访问等进行教育数据安全的管理工作实现对教育数据全生命周期的安全管理教育数据安全审计负责定期分析、验证、讨论、改进教育数据安全管理相关的政策、标准和活动分析实施规程和实际做法确保教育数据安全的目标、策略等与预期结果相一致 教育数据安全评估需要结合监管需求、相关标准等制定统一的教育数据安全标准提供适用的教育数据安全策略制定教育数据安全管理的利益相关者清单对教育数据访问、控制权限进行授权保证教育数据在应用过程中的隐私性分析和改进数据安全方案确保教育数据安全的目标和预期结果相一致教育数据共享教育数据共享包括教育数据集成与共享、教育数据开放共享教育数据集成与共享是建立各应用系统、各部门之间的集成共享机制是对数据孤岛现象、相关数据标准和制度等的评估 教育数据开放共享是指按照统一的管理策略对教育数据进行有选择地对外开放是实现教育数据跨组织、跨行业流转的重要前提是教育数据价值最大化的基础 一方面建立教育数据集成共享环境将多种类型的教育数据整合在一起实现结构化和非结构化数据处理 另一方面建立统一的教育数据开放策略对开放共享的教育数据进行全面梳理保证教育数据开放共享满足安全、监管和法律法规等要求促进内外部数据的互通与教育数据价值的提升教育数据治理教育数据治理包括教育数据治理组织、教育数据制度建设和教育数据治理沟通教育数据治 年第 期专题研究教育与技术理组织包括组织架构、教育数据责任等内容是教育数据职能工作开展的前提 教育数据制度建设是教育数据管理和教育数据应用工作有序开展的基础是教育数据治理沟通和实施的依据 教育数据治理沟通旨在确保利益相关者能及时了解相关政策、标准等情况提高教育数据资产意识构建教育数据文化 为有效评估教育数据治理需从三方面着手:第一建立支撑教育数据管理和教育数据应用战略的绩效评估体系健全教育数据责任体系明确各方在教育数据管理中的职责第二遵循严格的发布流程并定期检查和更新将教育数据治理贯穿数据应用的全生命周期第三对数据的精确性和数据的有用性进行评估数据应用成果数据应用成果的评估阶段旨在了解教育数据应用后学生成绩、学生参与、数据使用率、学习策略应用和教学效果的具体表现以此评估数据绩效评估的整体成效是对教育数据应用绩效的总结性评估是对教育数据绩效评估整体效果的有效验证 通过评估学生的学习成绩、参与率和学习策略的使用情况可以促进学生学习和发展提高学习成效 通过评估教师的教学效果和反馈改善教师的教学能力提高教育数据应用的实际效果 数据应用成果涉及学生、教师、教学内容、教学过程和教学管理等方面需要通过不断的评估和改进以提高教育数据应用的效果和价值更好地服务于教育事业的发展四、教育数据应用绩效评估框架的实践路径教育数据应用绩效评估是一项复杂且需要反复迭代的工作有效实施可以更好地实现教育数据应用的价值促进政府、教育部门、学校、教育教学和师生协同发展 研究从多方面、多层次构建了教育数据应用绩效评估框架并从基础支撑、平台服务和应用创新等 个层面提出了实践路径具体如图 所示 基础支撑层作为整个绩效评估工作的基石需要通过顶层设计、技术赋能和工具开发来保障绩效评估的展开 平台服务层作为绩效评估的桥梁担负着数据采集、分析与结果反馈的一体化功能满足基础数据的传输与共享打通各利益相关者参与绩效评估的壁垒 应用创新层是评估工作的重要环节是在基础支撑层和平台服务层的基础上通过转变评估理念、改善评估方式和健全评估主体等创新性转变最终赋能教育数据应用绩效评估的有效实施.基础支撑层:奠定绩效评估基石()顶层掌舵设计:政策引领教育数据应用规范发展教育数据应用绩效评估涉及政府、教育主管部门、学校、教育机构、企业、社会公众等多方利益图 教育数据应用绩效评估框架实践路径专题研究教育与技术 年第 期 相关者需要多个主体共同参与评估以保障评估质量和真实性 然而当前的教育数据应用绩效评估仍以政府内部评估为主其他利益相关者参与评估的空间较少致使绩效评估工作较难全面开展 评估框架的实施需要明确利益相关者的权责归属和评估空间联合各主体共同管理与监督健全教育数据应用绩效评估体系形成规范统一的评估制度 如英国为了得到更加公平、客观的评估结论政府不介入教育数据应用绩效评估评估主体主要来自社会及学校为此一方面教育部等行政管理部门应发挥“掌舵者”的角色充分考虑我国的现状及时出台合适的政策文件以引导教育数据应用规范发展加强对绩效评估各要素、各主体、各环节的监管健全评估机制以有效推进绩效评估工作的顺利开展 如日本参考 创始人 提出通过五级索引制定评价指标制度以评估开放数据的实现程度另一方面教育数据应用绩效评估框架的有效实施需要相关法律法规的保驾护航可在法律法规中明确各利益相关者的权利和责任实施相应惩处措施 同时也要明确绩效评估框架指标如何落实做到有法可依进而保障绩效评估的效益和作用()技术赋能推进:智能技术促进绩效评估落实教育数据应用绩效评估需要各评估主体充分利用大数据、区块链等智能技术改善数据来源问题、评估视角问题、数据安全问题等 智能技术为绩效评估提供基础支撑赋能绩效评估的各环节实现高效、系统、全面的反馈与评估从而改善教育数据来源不足、评估视角单一、不能精确反映现实等问题促进绩效评估转型实现绩效评估动态化、常态化 提供绩效评估的技术支持构建具有特色的教育数据应用绩效评估平台、数字化管理机制和操作系统形成评估内容与方法整合、评估结果与绩效挂钩的教育数据应用绩效评估机制提高数据采集、应用的科学性提升教育管理人员的数据素养()打造螺旋服务:工具开发提高绩效评估效能教育数据应用绩效评估是教育数据开放共享的重要环节打造螺旋服务、开发评估工具能够提高绩效评估的效能促进教育数据开放共享 开发教育应用绩效评估工具需要从评估工具的成本效益是否最优、评估工具是否单一、能否提高评估工具的拓展性等 个层面考量 第一需要考虑工具、人员培训、时间等成本通过评估工具的选择与教育数据策略相结合有效提高教育数据的利用率 第二对于大规模、多线程、多指标的教育数据来说单一工具的使用很难有实效应使用多种评估工具对不同的指标从多个视角进行评估 第三不同评估工具可以用于对教育数据应用绩效进行监测和评估、数据收集及分析但收集不同来源教育数据时评估工具的拓展性会影响评估的绩效因此在开发绩效评估工具时应提高工具的拓展性.平台服务层:打造数据处理核心()伴随式全域数据采集:保障教育数据应用采集的全面性汇聚数据采集是教育数据应用绩效评估框架有效实施的重要环节避免因收集的教育数据片段化而忽略部分应该评价的内容减少因缺乏可靠的依据而过于依赖经验进行主观评价的事件发生设计教育数据应用绩效评估框架需要对教育数据进行全方位、全时段的采集所采集的教育数据主要包括非结构化教育数据、半结构化教育数据和结构化教育数据 非结构化教育数据和半结构化教育数据需要利用智能技术对全域教育数据进行汇聚采集包括教育主体的认知数据、情感数据和行为数据等 结构化教育数据主要包括教育主体的教育背景、基本信息等这部分数据可以直接调用数据库或者利用工具进行自动化采集 通过对教育数据的全域采集和智能终端伴随式采集将碎片化数据整合为系统化数据以保障数据采集的全面性解决数据难以全域采集、数据失真等问题()多维度数据分析处理:提高教育数据应用的质量数据分析处理是教育数据应用绩效评估框架有效实施的主体部分传统的教育数据分析处理存在一些不足 一方面纵向分析缺乏各机构、各单位的教育数据应用绩效对比横向分析缺少同类机构单位的应用绩效对比 另一方面传统的教育数据分析处理仅局限于绩效评估的现状分析缺少专业层面的多维度分析 为此评估时政府、教育部门等评估主体可以通过人工智能、大数据分析等技术等对采集的教育数据进行科学分析和处理并深 年第 期专题研究教育与技术度挖掘剖析绩效评估各方面的关系和特征揭示教育数据应用存在的问题与不足并预测其未来发展方向 此外对各单位机构在多方面进行横纵向对比分析以提高教育数据应用的质量()可视化反馈评估结果:提供精准化的诊断反馈信息反馈评估结果是教育数据应用绩效评估框架有效实施的重要保障 反馈评估结果并非是一个简单的统计结果的过程而是需要不断获取、管理、评估数据的复杂过程 可以通过大数据、学习分析等智能技术及评估工具根据教育数据应用处理分析的结果进行反馈将反馈的评估结果通过可视化工具输出提供精准化的诊断反馈信息保障教育数据反馈评估结果的可靠性和有效性实现评估框架的迭代优化助力绩效评估更加精准实现教育数据应用资源共享和实时反馈.应用创新层:赋能评估有效实施()转变评估理念:打造动态评估模式以往人们提出教育数据服务诉求后政府等部门被动地做出回应这使得教育数据应用绩效评估过程僵化、评估内容贫瘠随着技术与数据的融合、评估主体参与的多样性政府等部门可以及时了解教育诉求转变教育数据应用绩效评估的理念 技术的发展使绩效评估从静态走向动态改善了绩效评估视角单一等问题同时借助大数据技术转变评估理念对海量的教育数据进行收集、分析与处理从而发现其中的内在联系与发展规律并进行精准预测和评估()改善评估方式:内部评价与外部评价相结合以往的教育绩效评估主要通过抽样调查或试点实验等形式展开这种评估方式难以满足不同地区、不同群体的诉求 为了更真实、客观地评估教育数据应用绩效需围绕评估主体构建内外部评价相结合的绩效评估方式 内部评价包括部门自评和监管督查两种形式 外部评价是保证绩效评估结果客观公正的必要途径主要包括第三方评价和社会评价 利用新兴技术对教育数据应用绩效进行评价创新可以有效融合多种评价方式避免评估过程过分依赖经验的缺陷加强教育数据应用绩效的科学分析促进教育数据的识别、采集、整合、应用走向智能化与精准化增加教育数据产出效益完善绩效制度体系建设()健全评估主体:多元主体共同参与协作传统的教育数据应用绩效评估的主体较为单一没有充分考虑各利益相关者的权责 通过健全评估主体可以推动多元评估主体共同参与和协作解决绩效评估视角单一等问题 绩效评估不仅取决于政府的领导更需要以教育部门、学校和教育培训机构、合作单位、社会组织、教师、学生等所有参与的个体或群体为中心进行评估 智能时代教育数据应用绩效评估凸显“去中心化”趋势形成了“多中心”评估的结构使得个人和社会有了更多参与绩效评估的机会 在绩效评估中要充分考虑各群体和个体的意见明确利益相关者的需求健全评估主体提高评估的科学性促进教育数据战略的制定五、结语教育数据应用绩效评估已成为驱动教育数字化转型的引擎 加速应用绩效评估框架的设计与实施是优化教育数据要素市场、推进教育数字化转型的必由之路 研究设计了教育数据应用绩效评估框架从基础支撑、平台服务和应用创新等 个层面提出了绩效评估框架的实践路径 然而绩效评估仍面临着较多难题未来研究将需要在相关政策文件的支持下围绕如何精准落实绩效评估机制与框架在地方政府及部门的应用提高绩效评估框架的适配性推动教育数据应用绩效评估的有序开展助推新时代的教育数字化转型参考文献:陆根书.大数据在高等教育领域中的应用及面临的挑战.重庆高教研究():.吴雪萍任佳萍.美国纵向教育数据系统探究.比较教育研究():.赵磊磊陈祥梅.数智时代教育大数据风险:表征样态与化解路向.贵州师范大学学报(社会科学版)():.中华人民共和国教育部.教育部关于加强新时代教育管理信息化工作的通知/.().:./.国务院.国务院办公厅关于同意建立国务院参事建言献策成果外部评估机制的函/.()专题研究教育与技术 年第 期.:./.郑磊高丰.中国开放政府数据平台研究:框架、现状与建议.电子政务():.武琳伍诗瑜.城市开放政府数据平台服务绩效评估体系构建及应用.图书馆论坛():.郑磊关文雯.开放政府数据评估框架、指标与方法研究.图书情报工作():.张茂聪付晓彬.我国县级政府教育政策绩效评估存在的问题及对策研究.教育科学研究():./.().:./.阿尔蒙德.发展中的政治经济罗荣渠.现代化:理论与历史经验的再探讨.林华张彤译.上海:上海译文出版社:.:.:.:.董晓辉郑小斌彭义平.高校教育大数据治理的框架设计与实施.中国电化教育():.董晓辉.活动理论视角下高校教育数据治理体系构成要素研究.中国电化教育():.李刚辛涛.基础教育质量的内涵与监测评价理论模型.华东师范大学学报(教育科学版)():.吴彬镪魏震雷.习近平关于教育扶贫重要论述的科学意蕴与时代价值.福建师范大学学报(哲学社会科学版)():.唐检云龚婷.西方国家政府绩效管理及对我国的启示.江西社会科学():.董静.中国地方政府绩效评估模式研究 基于对 个实践案例的分析.东北大学学报(社会科学版)():.中华人民共和国国家质量监督检验检疫总局中国国家标准化管理委员会./数据管理能力成熟度评估模型/.北京:国家标准化管理委员会.().:/./?.何颖李思然.新公共管理理论方法论评析.中国行政管理():.:.:.杨现民米桥伟.基于 理论框架的教育政务数据开放共享影响因素分析.现代远距离教育():.:.:.王春晖.数据要素制度的基本要旨与合规启示.南京邮电大学学报(社会科学版)():.韦忻伶安小米李雪梅等.开放政府数据评估体系述评:特点分析.图书情报工作():.李莎程晋宽.教育数据安全与隐私保护的防治 基于美国联邦“教育隐私计划”的分析.比较教育研究():.赵磊磊张黎代蕊华.智能时代教育数据风险治理:实然困境与实践路径.湖南师范大学教育科学学报():.杨现民王英李怡斐等.教育政务数据开放共享体系的基本框架.中国电化教育():./.().:/./.李青王海兰.我国区域教育数据开放的现状、问题与对策.中国远程教育():.:.肖冬梅苏莹.我国政府数据开放中的安全风险及其防范对策.现代情报():.许晓东彭娴周可.美国通用教育数据标准对我国高等教育数据治理的启示.高等工程教育研究():.唐长乐.基于扎根理论的政府开放数据价值共创影响因素研究.图书馆杂志():.吴善鹏李萍张志飞.政务大数据环境下的数据治理框架设计.电子政务():.黄涛王一岩张浩等.数据驱动的区域教育质量分析模型与实现路径.中国电化教育():.年第 期专题研究教育与技术 李青韩俊红.数据治理:提升教育数据质量的方法和途径.中国远程教育():.():/.().:./.郑鸿.云背景下我国教育大数据安全策略的构建.新闻战线():.():.刘国城杨丽丽.大数据下“互联网 智慧教育”安全审计模式研究.东北师大学报(哲学社会科学版)():.?:.:.王娟王书瑶杨现民等.教育政务数据开放共享的保障框架与路径设计.电化教育研究():.():.任苗苗马燕李明勇.“智能 教育”变革中教育数据治理的价值与路径.基础教育():.:.王正青但金凤.如何构建教育数据治理体系:美国肯塔基州的成功经验.现代远程教育研究():.徐嘉莉周伟.地方政府绩效评估信息失真的表现、成因与防范.领导科学():.毛杰.新制度经济学视角下的第三方教育评估制度环境研究.中国大学教学():.情報通信技術()総合戦略室.才夕基本指針/.().:./.杨盼王沐阳.技术赋能时代高等教育治理的逻辑转向、核心要义与创新路径.黑龙江高教研究():./.:.:责任编辑 张军涛