基于理科专业认证标准的元评估方案设计_代昭.pdf

科技视界Science&Technology Vision工程教育认证是我国目前最早研究，也是最早推行的专业类标准化认证，通过建立符合我国实际情况的工程教育认证标准以及相应的认证考核机制，形成了一套对工科专业可量化的、可移植性的、持续监督与改进的有力评价手段。这逐渐在工科类高校的建设中形成对专业建设水平衡量的重要指标，也促使高校回归本科教学核心任务，形成“以评促建、评建一体”的完整评价与持续改进机制，从根本上确保了专业以学生的“毕业要求”为建设核心，获得处理“复杂工程问题”能力，为提高学生培养质量奠定了良好的基础以及可评价的手段与持续改进的机制。2020 年，共257 所高校的 1600 个本科专业通过专业认证，约为全国工程教育布点数的 10%1。而在专业建设与评价中，理科专业并未有一套类似于中国工程教育认证的体系与体制来衡量和促进专业建设的改进，确保专业毕业生在毕业能力的获取，这导致专业建设只能过度依靠科研成果来量化评价标准，失去以学生能力培养为核心的本科教育初心，也无法形成类似工程教育认证所带动的良性专业建设氛围。因此，如何建立一套科学的非工程专业认证与评估体系是目前衡量专业水平，规范专业建设模式的基本需求。本文拟从中国工程教育认证标准中的核心内容“毕业要求”入手，针对理科教育特点制定相应的“毕业要求”，并引入“元评估”的方法，建立相应的元评估方案，以期为理科专业认证标准的整体内容建立奠定良好基础。1非工程教育认证随着工程教育认证的推行，其标准化、持续改进与监督等对高校内部整合教学资源，形成良性竞争等方面起到了良好的促进作用。虽然工程教育是高校专业中的重要部分，但理学、师范、医学等专业受限于非工科，因此无法参加工程教育认证。因此，国家以工程教育认证全面铺开为契机，开始推行师范、医学等非工科专业认证2-3。受工程教育认证启发，东北大学自 2017 年率先启动了非工科专业校内认证试点，随后浙江大学、东华大学等也建立了非工科专业校内认证。2017 年该校的行政管理、视觉传达设计、信息与计算科学、工商管理四个专业通过非工科认证；2018 年工业工程，2019年应用化学、应用物理学、公共事业管理先后通过认基 金项 目：天津 市普通高 等 学 校 本科 教 学质 量 与教 学 改 革 研 究计划 项 目（B201005808）。作 者 简介：代 昭，博士，教授，研 究 方向为 生物 纳 米材 料。DOI：10.19694/ki.issn2095-2457.2022.31.37基于理科专业认证标准的元评估方案设计代昭1纪妍妍1马明2李楠1李颖1（1.天津工业大学化学工程与技术学院，天津300387；2.天津工业大学生命科学学院，天津300387）【摘要】由 于目 前国 内缺乏 统 一的 理科 专 业认 证 体 系，导 致目 前 在 高 等 学 校 的 专 业 建 设 中，理 科 类 专 业 没 有 像 工科 类专 业依 托 工 程 专 业认证形 成良 好 的专业 建设 条 件，因 此 也 无 法形 成 以评 促 建，持 续改 进 的 良 好 专 业 建 设 氛 围。因此，本 论 文 以 元 评 估 方 法 结 合 对 工 程 专 业 认 证 研 究 成 果，推 出 了 理 科 类 专 业 认 证 标 准 的 核 心 内 容“毕 业 要 求”，并 按 照元 评估 方 法 建 立 了 元 评 估 方 案、11项 元 评 估 指 标 与 相 应 的 评 估 方 案，为 理 科 专 业 认 证 标 准 的 整 体 内 容 建 立 和 持 续 改进 奠定 了良 好 的 基 础。【关 键词】理 科 专 业；认证标 准；毕 业要 求；元评 估科学课堂132Science&Technology Vision科技视界证；东华大学自 2018 年起在校内推行非工科认证，日语、金融学获得校内认证。2元评估“元”英文为“meta”，可以有两种中文解释，“在之后”和“超越”，代表逻辑上的更深层次，“meta-evaluation”则翻译为元评估，其内涵意义是对已有评估进行再评估，为应对美国繁多的评估与认证标准，Scriven 提出了元评估概念，用于衡量这些评估与认证标准的有效性与优劣4-5，他设计出了元评估的四大指标：实用性、可行性、合理性和准确性。随着教育认证的元评估领域的发展，Stufflebeam 提出了 11项指标来衡量认证标准的评估结果6：2.1内部效度主要是考察认证或评估标准调查结果的真实程度，既认证标准的设计是否满足认证标准设计的初衷，回答了认证设计时想要知道的问题，并获得了相应的回答，且认证的结果是否准确而明确。2.2外部效度是指认证或评估标准的普遍性和可移植性，也就是认证标准的适用范围和对象有多大，认证标准是否具有时效性或可持续性。基本上，满足外部有效性标准意味着这个认证标准可以安全地推广到其他领域或环境，这对建立统一规范的大认证体系至关重要。2.3可靠性是指认证标准所获取的数据准确性，重点关注评估数据的内部一致性和在重测条件下的一致性，认证标准所获取的数据必须拥有良好的精确性和可重复性。2.4客观性是指标准数据信息的公开性与公正性，是否能够获得普通大众、从业者、主管部门、行政部门、甚至司法部门的认可。认证或评估结果是否高度依赖于评估者的独特经验、看法和个人喜好。因此，为保证认证或评估报告的客观性与实用性，认证或评估报告必须为从业者提供必要信息，并且必须能够对从业者的工作产生积极的影响外，还需考虑认证或评估结果与隐形受众之间的显式或隐式交互影响。2.5关联性是指该标准所涉及的调查结果是否符合评估的目的，认证或评估的受众是谁，他们需要什么信息，认证或评估标准的设计在多大程度上响应了认证的目的和受众的信息要求。2.6重要性这涉及应收集哪些特定数据，在任何评估或认证中，都会面临海量的数据收集工作，但实际上可能只有一部分数据为最为关联的核心数据，因此，评估者需要评估每个潜在相关数据的重要性，并且需要匹配受众与各种数据之间的优先级。2.7范围范围是评估认证标准有效性的一个重要条件，这要求是认证信息的采集要有足够的范围，否则有些重要的信息可能无法获取，导致认证或评估结果缺乏有效性，甚至对从业者或管理者产生误导。2.8可信度该标准涉及大众是否信任评估者并假设他在进行评估时没有偏见，这是由于普通大众通常缺乏对认证标准与评估的了解，因此，对认证标准的可信度进行评估非常重要，而对认证标准进行评估的元评估者也需要保证大众对其的信任程度。2.9时效性这是衡量认证标准的一个非常重要的指标，也就是评估的目的、数据、结论应该与当下或从当下到未来的一段时间内具有有效性，这也是很多认证标准在制定时有可能忽略的地方。对认证标准与评估结论的时效性进行考量，适当增加时效性指标，也是增加评估可信度的重要途径。2.10普遍性是衡量认证标准或评估结果是否能够拥有最终的有效性，这是由于如果评估结果不具备普遍性，那么其受众、可信度、重要性方面都会受到质疑，因此必须保证所有受众都能接收和使用评估结果，最终衡量评估是否有效，这就要求标准与评估结果必须拥有可传播性。对评估人员来说，评估报告的相关性、重要性、范围、可信度、及时性和普遍性方面经常会遭受质疑，也促使认证标准制定者与标准评估者能从普遍性和大众的角度制定或评估认证标准。2.11成本效益是指认证与评估需在不牺牲质量的条件下尽可能降低成本，因此需正确衡量相关性、范围、重要性和时效性等指标的使用，这里面的成本包括时间与效率成本，在经济高度发展的今天，时间成本成为最关键科学课堂133科技视界Science&Technology Vision的成本，因此，数据采集，处理，从业者实施认证或评估的时间消耗等都对成本效益产生巨大的影响。元评估者应在充分性、实用性和成本/效益标准方面取得最佳平衡，而不是坚持优化任何一个标准，因此评估时必须做出许多妥协。3理科专业认证标准的毕业要求与元评估量表经对课题组在本专业内调研，将专业认证最复杂且最核心的“毕业要求”，拟定了 6 个一级能力，9 个二级能力，23 个三级能力，如表 1 所示：依据 Stufflebeam 教授的 11 项元评估指标，设计的理科专业认证标准的元评估方案如图 1 所示：图1理科专业认证标准的元评估方案整体来说，若要使用元评估对认证标准形成有效评估，还应该对认证标准形成良好的持续改进，因此，所设计的认证标准流程与元评估具体方案中，将整体分为设计、评估、分析与反馈、持续改进四个阶段，这四个阶段形成对理科专业认证标准的制定与评估的有效循环。为保证评估的指标的客观性、普遍性与范围等指标有效，专家须由单位内外的多名专家组成元评估专家团实施评估，在对评估指标打分时采用 10 分制。将评价分为极差、很差、差、不满意、最低标准线、基本合格、良好、好、很好、非常好十个等级，并依次对应 110 分。4结语针对目前国内没有理科教育认证体系与标准的情况，本文通过认真研究中国工程教育认证标准体系，按照理科教育特点制定了认证标准的核心内容“毕业要求”，并使用“元评估”理论建立相应的元评估方案，可为理科专业认证标准的整体内容建立奠定良好基础与指导作用。【参考文献】1中国工程教育专业认证协会.关于发布已通过工程教育认证专业名单的通告OL.https：/ M S.An introduction to meta-evaluationJ.Educational ProductsReport，1969，2（5）：36-38.5Scriven M S.Bias and bias control in evaluation R.Kalamazoo，MI：Western Michigan University Evaluation Center.1975.6StufflebeamDL.Meta-evaluationJ.JournalofMultiDisciplinaryEvaluation，2011，7（15）：100-158一级能力二级能力三级能力1.构思1.1 科学基础自然科学基础、专业基础1.2 信息提取问题分析、文献查阅、信息综合2.设计2.1 设计能力方案设计、合理性评估、流程设计3.操作3.1 操作实验操作、分析数据3.2 使用现代工具选取现代工具、结果分析4.实施4.1 研究科学问题分析、科学方案设计科学方案实施、科学数据分析5.1 科学社会观通识教育、人文素养5.2 个人和团队跨学科交流、跨文化交流、团队合作6.1 终身学习自主学习、终身学习5.交流6.发展表1认证标准中的“毕业要求”能力分解科学课堂134