新时代智能技术赋能的职业教育评价框架研究.pdf

2023年1 0 月第2 7 卷第5 期宁波职业技术学院学报Journal of Ningbo PolytechnicOctober,2023Vol.27 No.5新时代智能技术赋能的职业教育评价框架研究缪学梅（长沙南方职业学院，湖南长沙4 1 0 2 0 8）摘要：教育评价影响教育发展方向，引领学校的办学导向。当前职业教育评价过程中传统评价方式占主导、教育评价体系重“数量”轻“质量”、教育评价重“结果”轻“效果”、缺少技术赋能教育评价平台等问题始终存在。将具有多元化评价主体、智能化评价模型、分层化评价数据、精准化评价反馈等特征的智能技术应用于职业教育评价，有助于推动职业教育评价改革，尝试从评价主体、评价类型、智能评价、评价过程及评价输出五个层面，构建智能技术赋能职业教育评价体系的基本框架，以期深入研究技术赋能职业教育评价的机理与过程。关键词：智能技术；技术赋能；职业教育；评价框架中图分类号：G710文献标志码：A文章编号：1 6 7 1-2 1 5 3(2 0 2 3)0 5-0 0 3 7-0 6教育评价影响教育发展方向，犹如指挥棒引领办学导向。2 0 2 0 年1 0 月1 3 日，新时代第一个关于教育评价系统改革的文件深化新时代教育评价改革总体方案颁布，为新时代教育评价改革指明了方向。该方案明确指出：坚持科学有效，改进结果评价，强化过程评价，探索增值评价，健全综合评价，充分利用信息技术，提高教育评价的科学性、专业性、客观性。现代社会正迈人人工智能时代，新一代信息技术作为新一轮产业变革的核心驱动力正催生重构教育新生态，为教育评价改革带来新的挑战和机遇。要实现教育评价改革这种应然而未然之态，需要转变教育评价思想；拓展信息技术测评功能；夯实教育评价的支撑体系3。教育大数据与智能技术的“精准识材”,能够消除以往评价体系标准单一、手段趋同等端，探索新型教育评价模式已成为我国教育评价改革的必然趋势和教育高质量发展的要求 4 。如何充分利用智能技术，解决结果评价简单固化、过程评价数据分散粗放、增值评价低效单一、综合评价片面主观等问题，成为目前教育评价改革研究的热点话题。收稿日期：2 0 2 3-0 2-2 1基金项目：2 0 2 3 年湖南省社会科学成果评审委员会课题“智能技术赋能湖南职业教育评价改革研究”（XSP2023JYC275）作者简介：缪学梅（1 9 7 3 一），女，副教授，硕士，研究方向：教育评价、区块链技术、人才培养等。2023年第5 期37一、智能技术赋能的职业教育评价体系现状调研与分析随着职业教育“管办评分离”，相关评价主体也不断迭代创新，智能技术赋能教育评价，有利于促进教育高质量发展。为充分了解现阶段智能技术赋能职业教育评价现状，2 0 2 2 年1 2 月，课题组对社会民众、院校教师和学生进行了问卷调查，同时对教育主管部门、职业院校和行业企业进行了深度访谈，梳理出当前职业教育评价的现实状况。（一）信息新时代对智能技术的需求传统职业教育评价中，教师更多地借助纸笔记录学生学习情况，在当今瞬息万变的信息时代,纸笔记录明显滞后,面对海量数据，人工记录与人工计算既费时又难以快速准确地得出计算结果,智能技术能够使师生从某些重复工作中得以解脱，专注分析学生成长历程、个性特征、创新特质等内容。运用智能技术能够重点审视学生的认知频谱、多元智能、技能水平、情感特征等问题，精准的数字画像能够呈现被评价者立体的、全面的评价结果，因此智能技术赋能职业教育评价是宁波职业技术学院学报投稿邮箱：时代所需。价教师业绩，而如何运用智能技术构建精准高效(二)全过程评价对智能技术的需求的教师评价系统，也是未来职业院校教师评价改现代职业教育评价在关注学生学习效果的革需要面临的现实问题。同时，应更加关注学生的成长过程。思想教育、课(五)教育评价体系重“结果”轻“效果”堂教学、实践课程、毕业设计、“1+X培训考核、企根据调研样本结果，在当前传统职业教育评业见习、岗位实习、中国特色现代学徒制背景下价中，无论是对学校的评价、教师的评价还是对学生跟随企业导师学习的全过程等，需要有完整学生的评价，普遍比较重视静态评价“结果”,如：的数据记录,由此作出的对学校、教师、学生的评等级评定、排名排序、竞赛成绩等，而忽视“绩效价才是客观、真实和全面的。然而传统教育评价产出”“成长过程”“经验凝练”等“效果”，但这些静态的、单链式的过程记录难以多维度分析学生都是职业教育质量评价的关键要素，是推进教育成长成才的全过程。智能技术所拥有的数据存评价改革的重要指标，能够较好体现教育过程中储、数据分析、数据挖掘功能为职业教育过程评的“价值贡献”与“增量情况”。重“结果”轻“效价提供了强大的技术支撑。果”，会导致教育评价逐步走向片面化、功利化，(三)学习方式变化对智能技术的需求从而淡化了教育评价通过评价实现反馈、改进的随着科技不断进步，学生学习的时间与空间功能。限制将被打破，无边界的学习在未来有可能成为（六)教育评价体系重“报表 轻“平台”现实；同时，不可抗拒的因素存在也导致线上线在当今信息生态环境之下，人们的认知方式、下混合模式的学习方式可能会成为常态；甚至一生活方式及学习方式都发生了较大的变化，迫切些课程中可能会由智能机器人代替教师完成某需要传统职业教育评价理念、评价方式及评价工些特定的教学任务。当学习时间与学习空间的限具能够同步发生转变。近年来，智能技术已逐步制被打破，导致学生的学习方式与学习环境存在在教育评价领域中渗透应用，在教育教学中助力差异，教师对学生的针对性指导也受限，传统评教师及时获取学生学习数据、即时掌握学生学习价方式难以完成跨越时空的复杂评价，学习方式状态、快速调整教学计划；同时还可以追踪并记的变化对评价技术提出了更新、更高要求，智能录学生学习过程、成长轨迹，使评价更精准。然技术赋能职业教育的作用愈加凸显。而，当前智能技术赋能职业教育评价过程中，信（四)教育评价体系重“数量 轻“质量”息平台建设相对缺乏，存在信息传递的壁垒和通过对不同教育评价主体的调研可知，目前“数据断链”等问题，成为在职业教育评价中推广对学生的课程评价以日常考勤、平时作业、期末应用信息技术最大的障碍。考试成绩为主，相对于过程评价，大都趋于重视二、智能技术赋能的职业教育评价内涵及框结果评价，采用“分数”评价学生对知识的掌握情架况，对学生的素质评价主要采用定性评价，较少（一)智能技术赋能的职业教育评价内涵运用定量评价。对教师的评价涵盖教育教学和科智能技术赋能的职业教育评价是指以职业学研究两个维度。相对而言，教学评价的范围比教育的价值观为主导，运用数字化、数据化、模型较窄，较为关注教师获奖情况，对人才培养过程化、算法化、智能化的技术评价方法，对教育过程评价较少、评价方式较单一。对教师科学研究的中的各种教学活动、教育结果，进行全面、科学、评价维度主要包括项目立项和论文发表，研究报客观的智能分析与判定。职业教育评价是教育活告、政策咨询等未纳入评价范畴，同时传统职业动的关键环节之一，通过各种智能技术赋能的评教育评价重“数量”轻“质量”。总体上看，传统教价，可以智能反馈当前职业教育方式、教育成效、育评价过程简单直接、易理解且符合实际，学生人们对职业教育的态度以及存在的实际问题，从和教师均容易接受，在目前职业教育评价中占主而促使职业院校智能调整办学理念、改进人才培导地位。但时代在发展进步，职业教育在传统评养模式、完善评价标准与评价指标、提升人才培价的基础上更迫切需求精细化、精准化及精益化养质量，实现培养目标。评价，实现“以评促建”,形成良性循环，以促进人智能技术赋能的职业教育评价既具备教育才培养质量提升。智能技术能较为客观公正地评评价的所有内涵，也融入了信息技术。首先，智能38：2 0 2 3 年第5 期缪学梅：新时代智能技术赋能的职业教育评价框架研究技术赋能的职业教育评价具有智能导向性功能，通过判断教育现状与预定的目标差距，智能引导职业院校明确办学方向；其次，具有智能督导检查功能，通过各项评价标准智能发现现阶段存在的问题并加以改进；再次，具有智能诊断改进功能，通过评价，智能发现职业教育教学过程中存在的问题与不足，从而不断改进完善；最后，具有智能激励功能，通过评价找到差距，智能激励教师改进教学方法，促进职业院校提升办学质量。(二)智能技术赋能的职业教育评价特征智能技术赋能的职业教育评价主要具有多元化主体、智能化评价模型、分层化评价数据和精准化评价反馈等“四化”特征。1.多元化评价主体职业教育评价的主体涉及社会、教师、学生、用人单位等，每个主体对教育评价的视角不同，给出的评价结果也不同 5 。智能技术赋能的社会主体评价主要体现在社会对高职学生的接纳程度和认可度；教师主体可借助云班课、雨课堂、学习通等智慧教学模式展开教学形成高效、专业的评价信息；学生评价体现在通过学生间相互评价和自我评价，可有效地调动学生学习积极性，通过自我评价反思并发现自身的不足，在后续学习中得以提升；用人单位的评价则是通过对学生在岗工作态度、专业技能运用情况及职业操守等进行研判获得精准、客观的评价结果。智能技术赋能的多个评价主体运用一定的评价手段共同参与，使评价过程全面、综合，评价结果真实可靠。2.智能化评价模型智能技术赋能的职业教育评价核心是构建科学的评价模型。相比传统以定性为主的目标评价模式、CIPP评价模式、目标游离评价模式等，智能化评价模式倾向于运用智能技术手段构建定性与定量相结合的评价模式。围绕不同的评价对象、评价内容，科学构建评价指标体系、确定评价指标权重，是形成智能化评价模型的基本步骤。通过综合运用人工智能推理技术与计算机软件，构建职业教育评价模型，发挥不同主体的评价作用，获得比较客观、全面、真实的评价结果。3.分层化评价数据数据采集是智能技术赋能教育评价的关键环节之一，需综合运用多种技术，通过物联感知技术、在线学习与管理技术、图像识别技术、视频监控技术可分层获取评价数据。智能技术具有可存储巨量数据，可抓取、收集复杂数据，可快速计算数据等多种特点，极大地改变了传统评价采用人工采集数据的方式，大大提高了数据采集效率。依托数据采集平台和设备自动记录功能，智能技术能够全过程地自动记录评价对象在教育活动中的全部情况。当今线上教学成为现代教育教学的常态化方式，智能技术能够打破时空障碍，轻易获取线上学习数据，助力分析学生学习行为与学习效果。4.精准化评价反馈职业教育评价反馈是教育评价的应用价值所在，评价、反馈、改进是一个良性循环，智能技术赋能的职业教育评价最显著的特征是使评价数据更加精准。比如：使用机器学习等算法能够对数据进行图像分析、语音分析、文本分析及视频分析，对评价对象的特征进行精准画像；通过智能推荐引擎等技术传递评价结果，能够使评价对象快速感知学习效果，及时调整学习方法、学习策略等；精准的评价反馈，能够促使教师及时调整教学策略、整合教学资源，通过多种技术实时反馈，能够使教师精准教学与学生个性化学习得以实现。（三)智能技术赋能职业教育评价的体系框架职业教育不同于普通高等教育，普通高等教育侧重于学术性知识传授，倾向于培养学术型、理论型和研究型人才；职业教育侧重于知识的实用性与操作性和职业技能训练，倾向于培养工匠型、技师型及复合型人才。由此职业教育评价与普通高等教育评价有所区别。鉴于此，智能技术赋能职业教育评价具有更大的挑战。智能技术赋能新时代职业教育评价，不仅需要智能评价技术的发展，还需要教育理念与模式的更新。教育评价改革是一项系统工程，智能技术赋能职业教育评价创新，有助于构建政府主导，产、学、研等多元主体参与的智能教育评价体系，有利于推动职业教育高质量发展。随着互联网、物联网、人工智能、区块链与大数据等技术不断发展，教育场景数据正在深刻改变教与学，为职业教育智能评价提供了丰富的数据支撑。智能技术赋能职业教育评价框架主要包括评价主体、评价类型、智能技术、评价过程及评价输出等五个层级的评价框架，如图1 所示。1.评价主体2023年第5 期39宁波职业技术学院学报投稿邮箱:评价主体政府社会学校教师学生企业评价类型结果评价过程评价增值评价综合评价智能技术大数据物联网互联网工智能区块链评价指标体系结果性评价指标评价过程过程性评价指标获取数据增值性评价指标综合性评价指标指标权重设计评价数据获取处理问卷调查实时测评过程实录数据分析数据整理智能评价计算结果评价计算数据计算增计别算识别关键信息评价输出回视化报告形成结果分析综合评价报告图1 智能技术赋能职业教育评价体系基本框架政府、社会、企业、学校、教师、学生等既是评价主体也是评价结果的接收者，教育评价的目的是通过评价反馈了解教育教学过程中存在的问题，针对问题分析成因并不断改进。科技发展日新月异，智能技术助力教育评价能够使评价主体获得更精准的数据、更直观的信息和更全面的评价。政府能够通过数据全方位了解区域教育发展总体情况，优化教育资源配置，促使区域内教育均衡发展；企业能够通过学生的过程评价、结果评价及综合评价对学生质量有进一步认识，同时将学生在企业实习、工作的情况进行实时反馈，促使学校对专业建设、技术技能培养及时做出调整，有利于人才培养质量提升；学校能够通过教育评价对自身办学情况、人才质量有全面了解；教师则对教育教学过程中存在的细节问题进行全面把控，不断调整教学手段、教学方法及提高教学效果，促进教师教学能力提升；学生能够通过详细的数据资料了解自已在课堂讨论、小组活动、课后作业、随堂练习、课程设计、课程实训、企.402023年第5 期业实践等各种教学活动中的表现，针对薄弱项加以改进，促进自已全面发展。2.评价类型智能化职业教育评价是将智能技术有机融人评价全过程，是传统评价的升级版。在评价类型上包括体现最终成绩的结果评价、体现教学各环节的过程评价、体现输出与输入净增的增值评价及体现全方位考察的综合评价。在现代信息技术飞跃发展的今天,智能阅卷、智能评分、智能分析考试成绩成为实施结果评价的基本手段，借助数据分析强大的功能对职业教育过程中的教师教育、学生学习及教育工作者的管理等行为进行多层级诊断，可以发现教育教学过程中存在的问题,进而反思、调整与改进,实现智能化过程评价。增值评价更多地体现学校、教师、学生的进步情况，是一个动态的、过程性的、发展的评价方式，智能技术的融入能够快捷、高效、精准地获取评价主体的进步程度相关数据，同时通过对数据深度挖掘分析，能够更加全面地实现区域教育质缪学梅：新时代智能技术赋能的职业教育评价框架研究量综合评价、教师教学水平综合评价以及学生成长综合评价。3.智能技术随着人们对评价结果出现及时化、精准化、全面化等更高要求，智能技术成为教育评价过程中不可或缺的技术支撑。智能化教育评价技术包括大数据、物联网、互联网、人工智能及区块链等信息化技术。在传统统计分析方法中融入不同的智能技术,能够帮助教师在过程评价中摆脱人为主观经验制约，多维度获取教学活动中的信息数据；能够对海量数据实现自动筛选、过滤与分析，从而最大限度地挖掘数据价值，提高增值评价、综合评价的准确性与有效性，精准分析不同评价主体的评价活动。4.评价过程智能化职业教育评价在实施过程中主要包括评价指标体系构建、评价数据获取与处理、智能评价计算三个部分。在指标体系构建中涵盖结果性评价指标设计、过程性评价指标设计、增值性评价指标设计、综合性评价指标设计以及各类指标的权重确定。在评价数据获取与处理过程中主要涉及问卷调查、实时测评、过程实录、数据分析、数据整理等内容；各类指标的设置是职业教育评价体系构建的关键，也是评价工作效果的直接体现，需要结合不同主体、不同环境进行设计；评价数据的获取是教育评价分析、反馈、改进的基础，真实的数据是教育评价过程的体现。智能评价计算部分包括过程评价计算、结果评价计算、增值评价计算、综合评价计算、语音识别及图像识别等内容。5.评价输出智能化职业教育评价的核心是评价的输出，通过对数据结果进行深度分析，形成可视化综合评价报告，是智能技术赋能教育评价相较于传统教育评价的主要优势之一。相对而言，当今受评价主体青睐的是获得多维度多层次的评价结果，该结果从单纯的纸笔评价中解脱出来，以图、表、数据等多模态同步体现理论知识与实践技能的教学情况，立体展现学校、教师、学生在教学过程中的成长、变化和发展。智能技术赋能教育评价大大提高了评价结果的可信度和准确度。三、结束语随着政府深化新时代教育评价改革总体方案的出台，新时代教育评价改革也迈出了坚毅的步伐，职业教育评价主体要围绕“过程评价、结果评价、增值评价和综合评价”等四个维度，不断探索并改进与新时代相匹配的评价方式、评价模式、评价工具、评价机制 6-7 。区块链、人工智能、大数据等信息技术与教育评价有机融合，能够快捷获取数据信息，对被评价者进行精准画像，形成较为全面的评价结果。参考文献：1新华社中共中央国务院印发深化新时代教育评价改革总体方案 EB/0L（2 0 2 0-1 0-1 3)2 0 2 2-1 0-1 1 http:/ .中国考试,2 0 2 1(1 1):1 0-1 8,3 4.3彭波，王伟清，张进良，等.人工智能视域下教育评价改革何以可能 当代教育论坛，2 0 2 1(6)：1-1 5.4张琪,王丹.智能时代教育评价的意蕴、作用点与实现路径 J中国远程教育,2 0 2 1(2)：9-1 6,7 6.5刘邦奇，袁婷婷，纪玉超，等智能技术赋能教育评价：内涵、总体框架与实践路径.中国电化教育，2 0 2 1(8)：16-24.6缪学梅教育评价视域下学校体育工作评估体系与机制研究 J.顺德职业技术学院学报，2 0 2 2(4)：6-1 2.7缪学梅区块链视域下职业教育产教融合联盟及其治理机制研究 J成人教育，2 0 2 1(1 2)：7 3-7 9.2023 年第5 期41宁波职业技术学院学报Research on the Evaluation Framework of Vocational Education Enabled byIntelligent Technology in the New Era(Changsha Nanfang Vocational College,Changsha 410208,China)Abstract:Education evaluation affects the direction of education development and guides the direction ofschools.In the current process of vocational education evaluation,traditional evaluation methods still dominate,that is to say,the education evaluation system emphasizes“quantity over“quality,the education evaluationemphasizes“results over“effects,and the lack of technology-enabled education evaluation platforms hasalways existed.Intelligent technologies with diverse evaluation subjects,intelligent evaluation models,evaluation-leveled data and precise evaluation feedback can help promote the reform of vocational educationevaluation.We attempt to construct a basic framework for the evaluation system of vocational education enabledby intelligent technology from five aspects:evaluation subjects,evaluation types,intelligent evaluation,evaluation process,and evaluation output,in order to deeply study the mechanism and process of technology-enabled vocational education evaluation.Keywords:intelligent technology;vocational education;evaluation system;frame投稿邮箱：MIAo Xuemei（责任编辑：程勇）(上接第3 6 页)The Dilemma and Path of Cultivating Composite Abilities for UndergraduateVocational Education Students-Taking Applied Writing Skills as an ExampleLI Xiaofang(Guangdong Business and Technology University,Zhaoqing 526020,China)Abstract:Composite talents refer to people who have certain abilities in various aspects and excel in a specificaspect.Composite abilities include multiple aspects such as knowledge compounding,ability compounding,andthinking compounding.The characteristics of composite talents are one specialty with multiple abilities.Onespecialty refers to having a professional knowledge.Multi-ability refers to having multiple abilities which isbased on one specialty.Composite talents are currently one of the scarce talent types in society and one of thetalents that enterprises need.Applied writing ability is a general vocational ability,which is one of thecomposite abilities that undergraduate vocational education students should possess.This study takesundergraduate students from Guangdong Business and Technology University as the research object,carries outthe teaching reform based on the survey and research data,and explores the path of cultivating studentscomposite abilities.The measures of teaching reform include introducing application scenarios to mobilizeenthusiasm,project-based teaching to enhance participation,relying on positions to highlight practical value,and enhancing self-confidence by correcting non-technical assignments.It will fully integrate the enhancementof classroom learning interest and the enhancement of learning confidence,and make them promote each other,so as to achieve teaching objectives,strengthen teaching effectiveness,and promote the development ofcomposite abilities of undergraduate vocational education students.Keywords:undergraduate vocational education;applied writing;composite abilities;path（责任编辑：程勇）.422023年第5 期