基于PDCA优化新高考命题培训机制.pdf

2023 年第 5 期（总第 100 期）考试研究EXAMINATIONSRESEARCHNo.5，2023General No.100基于PDCA优化新高考命题培训机制张思佩 王晓红摘要培训是命题队伍建设的关键一环，目前新高考命题培训存在碎片化、单一性和效果不可测等问题。基于TQM理论中的PDCA循环方法，构建适合新高考命题培训机制的模型，优化培训机制：一是P阶段从风险管理和预案管理角度整合培训行动的系统性方案；二是D阶段联动省内高校分类分层分次承担培训任务；三是CA阶段针对培训效果进行实时量化评估；四是复盘总结循环AP阶段进行全流程研讨优化培训蓝图。关键词PDCA方法；命题队伍建设；命题培训中图分类号G424.74文献标识码A文章编号16731654（2023）05094007一、前言根据党中央、国务院关于深化考试招生制度改革的决策部署，2014年教育部启动高考综合改革。本轮改革是恢复高考以来考试招生领域最为全面、系统、深刻的一次改革，思想政治、历史、地理、物理、化学、生物学6个科目由各省组织实施命题。此次改革涉及变量多且复杂，各省新高考命题工作将面临巨大的挑战。高质量的命题队伍是做好命题工作的关键。各省份如果能在高考综合改革方案实施前2年或者更早就开始组织命题专家团队开展培训，并在低利害考试中提前试用，必定能为做好分省命题工作打下基础1。目前教育部教育考试院以线上新教材培训和全国试题分析评价会的方式进行命题队伍的建设。已经进入改革的14个省份中，上海教育考试院每年以研讨会的形式探索教育考试机构专业化建设的路径与策略；浙江和广东委托高校承办命题培训业务；其他省份则均以线下短期会议或入闱的方式进行命题队伍培训。目前命题队伍培训存在诸多问题和困难。一是命题教师的培训效果有限：短暂的新高考命题启动会无法完全传达命题思想，无法帮助专家们尽快熟悉了解中学各方面情况，包括中国高考评价体系、新课程方案、新课程标准、新教材、省内教情学情等。二是对学科秘书的培训不够重视：学科秘书岗位要求高、责任重大，新进学科秘书无法在短时间内适应入闱多、时间长的工作性质，能力上也需要通过“引进来”与“走出去”的方式加强培训。教育考试机构对从业人员没有实行分类管理、定向培养，没有制定系统的考试职业能力培训计划和职业能力提升方案。即使有考务人员、技术人员的培训，也往往是针对某项考试进行的零星碎片式的培训，没有构建完作者简介 张思佩，湖北省教育考试院；王晓红，湖北省教育考试院。湖北武汉，430077。基金项目 本文系湖北省教育厅科学研究计划指导性项目课题“基于学科核心素养的学考选择考化学命题质量评估标准体系研究”（B2022637）的部分成果。94基于PDCA优化新高考命题培训机制整的教育考试职业能力培训体系2。新高考命题培训主要呈现培训内容碎片化、培训对象单一和培训效果不可测等问题。为了建立系统、全面、可测评的命题培训机制，培养、遴选、组建一支高素质、高水平、多元化的命题队伍，提升命题水平，本文基于PDCA循环方法，尝试构建命题培训的回圈机制模型，为分省命题培训提供理论支撑。二、学考分省命题培训机制的探索（一）理论基础PDCA（Plan、Do、Check、Action）循环方法是全面质量管理（Total Quality Management，TQM）理论的核心理念，即按照计划、执行、检查、处理四个阶段的顺序进行管理工作，这种工作程序，反映了开展管理活动的一般规律性3。与传统质量管理相比，TQM理论具有以下几个特点：从以事后检验和把关为主转变为预防为主，即从管结果转变为管因素；从就事论事、分散管理转变为以系统的观点为指导进行全面的综合治理；突出以质量为中心，围绕质量开展全员的工作；由单纯符合标准转变为满足顾客需要，并以满足目标群体需求作为质量管理的基本出发点；强调持续改进，以获得长期成功和发展4。这种全面质量管理理论的特点恰好能对应优化目前学考命题培训普遍存在的碎片化、单一性及培训结果评价不可测等问题。（二）培训机制的模型建构基于PDCA循环方法构建培训机制的模型如图1所示。图1命题培训机制模型整个培训过程分为预设阶段P、实施阶段D、检查阶段C和处理阶段A四个阶段。事前预设准备P阶段包括风险管理和预案管理。风险管理即考试不可预测的特殊性事件（如疫情常态化防控等），预案管理即不同学科培训内容的平衡统一。事中协调实施D阶段包括命题队伍选聘、政策法规管理等。命题队伍选聘包括专家队伍和保障队伍，分别为教师队伍遴选、学科秘书公开招聘、录入绘图人员借调等。政策法规管理即确保培训经费预算和培训项目招标的合法合规等。事后评估校正CA阶段包括培训满意度问卷调查、参训人员评估和培训评价报告等，重点在评价诊断，助力培训不断优化，保证培训的可持续稳定进行。复盘总结循环AP阶段包括各学科全流程研讨，进一步完善优化命题培训蓝图。（三）培训机制的优化路径1.事前预控准备P阶段整合培训行动开展的系统性方案为解决零星碎片化的培训方式，运用 PDCA 循环模型，将每年1次的2天6科集中培训转换为全年多次分学科开展；将培训对象只针对命题专家，转换 95考试研究 2023年第5期（总第100期）为不仅面向命题专家，还包括管理人员、绘图人员等；将新高考政策解读、保密教育、教育测量学、录入绘图、各学科实操部分的培训内容，由原来教育考试机构这单一的行政管理方，转换为主办与承办相结合的组织管理方式。在整合方案时，主要考虑特殊情况和不同学科培训内容的平衡统一。一是精准化防疫。常态化疫情防控期间，短期集中培训已经不仅仅是考试组织机构“唱独角戏”，各级行政机构、高校、中学、街道社区、宾馆酒店等社会各个方面都需要协调研判组织培训带来的风险。面对复杂多变的形势，主要通过强化系统思维、部门协力联动、行业统筹协调、主体精准落实等措施，专门制定了省级教育考试机构入闱防疫工作方案，确保培训稳步推进。方案内容包括精准摸排参训人员信息，如基本情况调研、培训前14天健康登记、行程记录等；培训时突发情况的紧急处理预案，如遇核心参训人员封控如何正常到达会场，参训期间出现发热情况的隔离措施等。协调联动省疫情防控指挥部门，函请处理特殊情况，上报省教育厅备案。二是不同学科培训的平衡与统一。2023年大部分改革省份将首次迎来“四新”（新课程方案、新课标、新高考、新教材）背景下的学考选考6科命题。为了做好新教材背景下的命题，更好地落实“立德树人、五育并举”，更准确地体现新课标尤其是新教材的整体理念，各省基于本省命题背景需进行培训内容的平衡与统一。第一，兼顾不同学科培训内容的差异。思想政治、历史、地理这三个学科新教材的变化较大，尤其是思想政治学科，具有实时性，新课标新教材的解读是这三科培训的重点。物理、化学、生物学相对教材的变化，命题实操更为必要，这三个学科培训重点在于试命题和试题研磨等工序。因此，培训分学科开展，并在前期做好培训内容的需求调研。第二，统一培训内容深度。政策解读、教育考试测量学通识以及保密规定等，在初级培训中，内容涉及面广，旨在让教师熟悉命题的基本理念，随着培训轮数的递进，培训内容的深度将不断递增，在最后一阶段实战培训时，才涉及命题核心思路。第三，统筹落实培训效果。各学科秘书在组织管理时，因分学科独立开展，培训的方式和进度不一，因此，通过形成样题样卷和考试标准的研制为目标导向，有效统筹把控不同学科培训的效果。这种方式加强了相关改革精神、新教材的研究和培训，确保所有学科的命题与时俱进、科学有效，又保持了各学科的特点和性质。2.事中协调实施D阶段联动省内高校分类分层分次承担培训任务高考改革分省命题后，省内高校是命题行政管理部门遴选组建队伍的主阵地，培训协调联动高校承办，可发挥高校优势，整合高校资源，提升培训质量。一是政策法规管理，协调承办方职权。考虑培训承办合法性和保密性，培训项目实行政府购买服务，择优选择项目承接方，确保与承办单位签订协议的合法合规性和管控保密性。承接方资质要求为财政部定点培训机构，“211工程”“985工程优势学科创新平台”项目重点建设高校，教育部人文社会科学重点研究基地、部属财经类高等院校、省内财经领域最高学府；立足高考综合改革和热点前沿专业问题研究、科研实力雄厚、专业优质、教育培训资源丰富、较强的组训和保障能力，且具有长期以来承担全省大规模系统培训项目实施任务的经验等；财政状况良好；无违法记录。培训项目经费标准按照各省 党政机关培训费管理办法 执行。承办方应配合完成培训班教学实施、日常管理和生活保障等，确保培训项目顺利完成。培训内容按照省级教育考试机构的要求，协调沟通制定，并签订相关保密协议和委托协议，厘清各方职权。二是依照不同培训对象，分类分层分次开展培训。培训对象包括命题专家队伍和学科秘书队伍。关于针对命题专家的培训，第一，规避命题保密风险。培训须控制命题核心思想的涉及范围，参与核心培训环节的人员均须签订具有法律效应的相关保密协议。第二，实行晋级遴选制度。通过考核将命题教师分层分次培训，新进命题教师共经历至少三个环节三次培训，原核心骨干命题教师需参与至少两个环节两次培训。面向新进教师承办方培训内容主要包括保密要求及规定、政策解读、课程标准及教材解读、教育测量考试基本理论等命题通识，培训评价由委托单位颁发合格证书；承办方评价合格的新进教师和原队伍的骨干教师参加省级教育考试机构组织的命题目标项目的专业培训、试命题及试题研磨等实操训练，从新进合格教师中遴选优秀教师；由 96基于PDCA优化新高考命题培训机制省级教育考试机构选聘出的优秀新进教师和原队伍的核心骨干教师，进入命题实战入闱队伍。另一方面，针对学科秘书的培训。通过多种途径组织开展专项培训，以专家授课、专题研讨、专项研究、协同入闱等形式提高学科秘书的业务能力。此外，借鉴美国教育考试服务中心（Educational TestingService，ETS）通过实习培养命题专家的做法，有计划地把学科秘书外派实习，如外派学科秘书到具有高水平命题团队的省市教育考试机构进行现场实习，让学科秘书具备命题能力，体验命题技术与方法。实习的内容包括：如何根据课程标准编写考试内容标准，如何编写试题内容代码和能力层次代码，如何研制命题多维细目表，如何编写试卷方案，题目筛选的原则和技术，组卷的内容要求和测量学要求，从可靠性、有效性和公平性3个角度评价考试质量的方法等1。3.事后评估校正CA阶段针对培训效果进行实时量化评估量化评估C阶段包括培训组织的满意度调查问卷、参训教师评估表和培训评价报告三个部分。处理阶段A包括建立动态档案管理库等。一是培训满意度调查问卷。问卷维度包括组织管理、理论知识、命题技能，具体内容见表1。问卷一级维度对应的题项内容按照非常满意、基本满意、不确定、基本不满意、非常不满意Likert五分法来设置选项。同时增加“您对本次培训或省级教育考试机构命题能力培训的意见与建议有哪些”这一开放性问答题，收集反馈信息，积累一手资料。根据对满意度调查问卷的分析，逐步优化培训全流程。表1命题培训满意度调查问卷结构表一级维度组织管理理论知识命题技能题项内容培训时长培训方式培训专家培训后勤保障国务院、教育部、省教育考试院发布的政策文件精神的解读最新保密法规，各项考试的密级、功能和性质等的讲解信度、效度、难度、区分度等教育考试测量学知识的讲解新课标、新教材的解读学情、教情、考情的介绍和分析学科专业知识前沿的介绍命题指南的详细说明命题蓝图的介绍政治性、科学性、公平性、规范性等命题要求的阐释试命题的分析、研磨及讨论等实操过程二是参训教师评估表。根据回收的专家意见进行汇总整理，评估表参考ETS考试研究内容5设计，对不符合省情的部分予以删除，将同类内容进行整合，修订后的评估表见表2。例如，ETS“管理要求”中“能为开发特殊项目努力工作”，命题专家在学考选考中暂不需要具备此项要求，将其删除；将 ETS“其他要求”中“对相关领域具有全面了解，研发的试题、试卷和测评产品能与相关学科的课程标准达到一致”和“在题目研发过程中具有整合课程标准中多个维度要求的能力”整合到“学科要求”中，因为内容与学科标准联系更紧密。培训结束后，比对评估表题项内容，按照“优良中差”四个等级赋分，由4分到1分依次递减，学科组长和学科秘书分别对参训教师公平客观评分，评分结果作为选聘命题教师的参考。通过参训教师评估表，改变培训评价不可测的情况。三是培训评价报告。报告主要分为以下部分：引言、培训概况、培训成果和培训建议，附件内容包括培训满意度问卷调查表和命题教师人员培训评估 97考试研究 2023年第5期（总第100期）表，其中培训成果包括满意度结果分析、教师评估结果和各学科样题样卷。同时，依据命题人员评估表，跟踪管理培训对象，A阶段整理教师动态管理档案，培训评价实施动态管理模式。培训评价结果是命题教师队伍遴选的主要证据支撑，以往命题教师信息库的建设仅停留在 Excel 表格的基本信息录入阶段，其作用非常单一，仅起到汇总作用，并不能高效地为遴选优秀教师工作提供实质性依据。培训机制的优化施行评价动态管理模式，主要侧重于教师档案中考察阶段的动态更新。其管理具体流程包括前期考察、实操过程和后期跟踪三个阶段。前期考察：如参与任务动机调查，填写基本信息表，侧面了解和个人谈话等。实操过程：如自我评价及感想，骨干专家、学科秘书对其表现的评估表。后期跟踪：如参与核心命题任务后，学科命题组长对其评价，团队内其他人员对其评价，本职工作岗位的领导对其业务工作的评价。所有实际情况记录表归入每位教师的档案，形成立体动态的模式，供后期参考调用，不断积累扩充优质命题教师库。表2命题参训教师评估表维度5基本要求专业要求管理要求学科要求修订后题项内容1.能与考试管理部门研讨明确本学科考试的命题多维细目表2.具有很强学科背景知识，能在题目编写、题目评审和考试组卷方面，以及在考试相关研讨会上提出有价值的建议3.对课程标准及其发展趋势具有深刻的认识4.在考试研发的所有环节，包括题目编写、题目评审、考试组卷、阅卷评分等方面能表现出较高的知识和技能水平5.既能独立工作，又能作为团队中的一员与他人合作，包括与本单位之外专家的合作6.能定期向经验不足的新进人员提供指导和培训7.能收集各方关于题目质量的反馈信息，并在题目实测后评估题目的可接受性；能根据相关专家的反馈意见，改进题目质量8.参与并管理开放式题目的评分工作，提出改进评分质量的建议9.能判断可用于正式考试的题目，并评估题目内容及其测量学特性，获得测量学家关于题目和试卷参数方面的签名认可10.改进外部命题人员所命试题质量的方案；编写命题人员培训材料；计划和主导命题人员培训会议；培训有关人员运用题目统计量进行组卷的工作11.能与团队成员一起研制新的考试蓝图和题目类型；计划并实施考试项目的信度、效度或可比性研究12.能对教育部的自评报告和考生信访问题做出准确恰当的回应；能预判考试安全事件并提出妥当的问题解决建议13.能够推荐团队成员14.能参加命题工作启动会、工作计划会议和工作进展会议15.能计划和实施考试项目本身及其备考材料解读的出版工作16.命题专家在积极参与正式或非正式团队工作，以及理解团队成员各种兴趣方面，具有为团队增值的成长记录17.能努力与单位内外同事建立相互尊重的关系18.命题过程中能够考虑考试院和其他利益相关者，能顾及自身行为对下游工作环节的影响19.具有关于本行业的标准工作流程和最新发展趋势的丰富的知识20.能胜任新的测评项目工作，能创新开发新题型，能用新方式开展工作，能成功处理有关争议21.为提升个人素质和改善本单位的工作绩效，学习欲望强烈，乐意发展新的技能和能力22.能为测评项目的发展方向提供协助23.能帮助落实题目研发计划24.对自身承担的工作任务能表现出高水准的工作效率和责任心25.对相关领域具有全面了解，研发的试题、试卷和测评产品能与相关学科的课程标准达到一致26.在题目研发过程中具有整合课程标准中多个维度要求的能力 98基于PDCA优化新高考命题培训机制4.复盘总结循环AP阶段进行全流程研讨优化培训蓝图全流程研讨内容聚焦培训出现的问题和困惑，实现每一个周期循环的动态清零，以厅级联席会的形式主动加强与相关省份业务部门的沟通协调，以研讨会的形式强化战线内部的学习交流。例如，是否需要纳入第三方评估机构，因为与本单位的自我主观评价相比，第三方机构的参与更加客观，确保了评价的公平公正，但是需要考虑与第三方机构合作的保密性；再如，如何保障培训时的学习资料供应，为了改变命题教师只是听讲座的被动接受式培训模式，需要采用工作坊等模拟命题模式提升教师的参与感，那么图书资料的供应需要充足，但对于承办单位经费只能承受食宿等费用的开支情况，很难做到预算充分满足命题资料的供应。该阶段旨在反思改进，在全流程各环节中复盘总结、明确方向、优化蓝图。每一周期循环结束后，各学科汇总整理相关材料，探讨解决问题的方案措施，不断优化完善命题培训蓝图，确保培训蓝图的科学性和可操作性。（四）实践特色湖北省作为新高考分省考试点，在各种压力下，准确识变、科学应变，扎实做好考试命题工作，初步探索出精准化风险管理、系统化管理、精细化组织、全员参与的PDCA循环培训模式。PDCA循环培训模式具有三个特点。一是系统化：培训机制的系统化有助于提升培训效果，开展命题基本技术及内容规范的培训，有助于帮助新推荐的命题教师和新进学科秘书尽快转变角色，适应命题工作的专业化要求。且培训时间跨度全年循环进行，可促进省级教育考试机构建立大容量的命题教师库，不断充容更新，为学考选考命题的顺利开展奠定了人员方面量与质的基础。二是多元化：全员参与的培训有利于建设能力多元化的命题队伍，包括命题专家队伍、命题管理队伍和命题保障队伍等，提升综合素质，促进命题高效化。三是评价结果可测：充分运用命题教师评估表，助力省级教育考试机构选聘有学术造诣、命题水平高的教师，合理处理教师库“存量”与“增量”的问题；充分利用满意度调查问卷，不断校正优化方案，逐步形成各省特色培训机制。三、展望与建议（一）培训方式融合信息化数字化教育部2022年工作要点将“实施教育数字化战略行动，加快推进教育数字化转型和智能升级”列为重点工作6。二十大报告指出，要“推进教育数字化，实施国家文化数字化战略”7。教育数字化是国家级的教育战略行动，教育考试数字化是必然趋势。数字化技术在改进培训方式、加强各环节各方面信息共享和协调联动以及通过大数据分析深度挖掘培训内容、保障考试的质量和公平方面具有不可替代的优势和作用。实现信息技术赋能考试命题，既可以开辟命题新时空，又可以塑造考试发展的新动能和新优势，是教育考试数字化现代化的必由之路。建议各省教育考试机构尽快建立信息化培训云平台，与国家题库2.0战略同步接轨。平台系统应包括涉密培训系统，类似国家教育考试指挥系统、国家题库2.0涉密场景的应用系统；和非涉密的官方培训网站，类似湖北省干部在线学习中心平台、国家题库2.0非涉密场景的应用平台等。培训内容要实时更新，不断汲取专家力量，探索考试专业化建设路径。（二）培训内容的标准化建设培训内容须聚焦命题，不可泛泛而谈，应加强学科命题质量标准建设，并形成成果，这既是加强学科命题能力建设的应有之义，也是队伍建设的重要环节。目前湖北省已有专项课题研究申报的契机，下一步将整合学科专家、命题专家、学科秘书的优势，重点对政、史、地、理、化、生等6科命题中遇到的疑难问题进行研究。在新高考改革背景下，学考选考命题工作面临重大挑战，如选择考再选科目成绩的难度控制，其具体目标和调控方法都需要扎实的理论支撑和客观的数据验证；国家题库建设需要将现代信息技术引入学考命题，探索和推进学考题库建设，为机考、多次考试奠定基础等。为了应对这些挑战，应将培训标准建设纳入命题研究，教育考试机构要整合学科专家、教育测量专家、专业技术人员等资源和力量，通过培训的途径，开展深入的研讨和实操，提升考试行业专业化建设水平。99考试研究 2023年第5期（总第100期）（三）培训激励机制的健全培训学员身上潜藏着丰富的教育资源，这些资源有待开发和利用，有待优化与放大8。在促进教学评一体化的背景下，为了充分挖掘培训学员的经验资源，鼓励优秀的教师积极参加命题培训工作，确保培训的长期良性循环，建议各省教育考试机构出台相关培训激励机制政策文件。所有行政管理程序只有获得上位政策的依据才能推动业务工作的高效开展，该类政策文件涵盖的内容应包括：各级各类学校要提高政治站位，重视并积极选派优秀教师参与国家教育考试培训工作；明确量化在培训期间教学任务量的核定标准；将培训成果纳入各级教学成果奖、教育科研成果奖、人文社会科学奖等评选范围，作为绩效考核、职称评聘等方面的考核依据等。参考文献：1 杨志明，姜孔桥.新高考改革分省命题之测量学挑战与对策J.中国考试，2020，（1）：14.2 王志武.教育考试职业能力建设探析J.中国考试，2020，（5）：58.3 TQM.EB/OL.https：/ 李世伟.TQM理论指导下的自学考试命题管理实践转变J.中国考试，2008，（4）：28.5 杨志明，杨笑颖，孔淑仪.国外考试机构关键岗位的素质要求及其对我国考试行业专业化建设的启示J.教育测量与评价，2020，（2）：3-10.6 教育部 2022 年工作要点EB/OL.（2022-02-09）http：/ 习近平：高举中国特色社会主义伟大旗帜 为全面建设社会主义现代化国家而团结奋斗在中国共产党第二十次全国代表大会上的报告 http：/ 潘洪建.教师培训的美国经验与中国借鉴以SIU项目为例J.中小学教师培训，2019，（10）：77.Optimize the New College Entrance Examination Proposition TrainingMechanism Based on PDCAZhang Sipei Wang XiaohongHubei Provincial Education Examination Institute，Wuhan，Hubei，430077Abstract：Training is a key link in the construction of proposition team.At present，the new college entranceexamination proposition training has such major problems as fragmentation，singleness and unmeasurable effect.Based on the PDCA cycle method in TQM theory，a suitable model for the new college entrance examinationproposition training mechanism is constructed.The first is the systematic plan to integrate training actions from theperspective of risk management and plan management in stage P.The second is the linkage of colleges in theprovince to undertake training tasks by classification and stratification in stage D.The third is the real-timequantitative evaluation of training effects in stage CA.The fourth is the review and summary cycle to optimize thetraining blueprint of the whole process in stage AP.Key words：PDCA Method，Proposition Team Construction，Proposition Training（责任编辑：陈畅）100