期刊政策影响力评价方法研究_张义川.pdf

第 卷 第 期 年 月期刊政策影响力评价方法研究张义川，赵聪聪，伍军红，肖宏，中国学术期刊（光盘版）电子杂志社有限公司 北京 同方知网（北京）技术有限公司 北京 摘 要：目的 意义基于文献数据对期刊政策影响力定量评价方法开展系统研究，以便客观揭示和彰显期刊在决策、管理、公众等层面所产生的政策影响力。方法 过程采用将政策文件、政策相关者分别与期刊刊载成果建立证据关联以评估其影响效果的定量评价方法，构建包含政策研究指数、政策传播指数、吸引政策相关者参与度指数等 个一级、个二级和 个三级指标的期刊政策影响力定量评价指标体系，并结合中国知网文献数据，对期刊开展政策影响力定量统计。结果 结论初步研究结果显示，该方法能有效揭示期刊尤其是政策型期刊的政策影响力，可为进一步改进完善期刊评价体系、客观评价各类不同定位期刊的综合作用提供有益参考。关键词：期刊评价 期刊政策影响力评价 定量评价方法 文献数据分类号：作者简介：张义川，编辑；赵聪聪，硕士研究生；伍军红，主任编辑；肖宏，编审，通信作者，-：。收稿日期：修回日期：本文起止页码：本文责任编辑：易飞 党的十八大以来，党中央、国务院高度重视科学民主依法决策，要求大力推动科学研究与决策咨询相互促进、协同发展。年 月，十九届四中全会审议通过中共中央关于坚持和完善中国特色社会主义制度、推进国家治理体系和治理能力现代化若干重大问题的决定，提出要“健全决策机制，加强重大决策的调查研究、科学论证、风险评估，强化决策执行、评估、监督”。实际上，期刊作为科研成果展示与交流的重要载体，其承载的知识、观点除了引发学术圈关注和讨论、推动学术交流与发展外，对于政策的研究、传播和实施也担负着重要的责任和功能。年 月，中宣部、教育部、科技部印发关于推动学术期刊繁荣发展的意见，明确指出“要改进完善学术期刊评价体系，以内容质量评价为中心，坚持分类评价和多元评价”。规范的、良性的期刊评价是全面揭示和评估期刊质量和影响力、促进期刊繁荣发展的重要抓手。因此，改变以往仅考量学术影响力的单一期刊评价导向，探索面向不同定位期刊的分类评价无疑是大势所趋。当前国内外所开展的期刊计量评价，如科睿唯安期刊引证报告（）、北京大学中文核心期刊要目总览和中国知网中国学术期刊影响因子年报等，均主要考量期刊的学术影响力。关于期刊的政策影响力评价研究，仅有政策类金融期刊的政策影响力与提升路径探索一文明确提出应综合考虑学术、应用和大众各个层次，构建一套专属于政策类金融期刊的评价体系，并建议从受众的角色定位区分、期刊的作用力区分以及参考该期刊是否具有前瞻性等方面分析期刊的政策影响力。政策影响力则多用于智库评价，如美国宾夕法尼亚大学全球智库报告、中国社会科学院中国社会科学评价研究院中国智库 综合评价研究报告、上海社会科学院智库研究中心中国智库报告等，主要以承接政府部门委托研究项目、提交咨询报告、获得批示的级别和数量等指标评价智库的政策影响力。可见，目前还缺乏较为系统化的期刊政策影响力评价方法研究和详细的基于文献的期刊政策影响力定量评价指标体系。笔者在一篇笔谈文章中简要介绍了期刊政策影响力的定义及其评价理论方法（该方法雏形曾于 年 月 日在“中国学术期刊未来论坛”会上报告交流），本文在此基础上进一步研究期刊政策影响力的评价方法及其实现路径，设计较为详细的定量评价指标体系，并结合中国知网文献数据对其进行初步的结果统计和方法验证，期望为期刊分类评价提供一种方法参考。第 卷 第 期 年 月 期刊政策影响力的定量评价方法 学界对智库政策影响力的定义和内涵已有较多研究，如朱旭峰和苏钰将智库的政策影响力定义为智库通过可被观测到的具体行动，直接或间接的途径，使政策决策者或其他政策过程参与者的政策观点发生改变，从而达到影响政策产出的目标；陈燕等认为高校智库的政策影响力是指高校智库通过各种渠道和方式向政策制定者宣传其观点和政策主张，从而影响政策制定者决策的能力；王传奇等认为智库的政策影响力可以解释为智库有意识、有目的地以直接或间接的方式作用于政策制定者，促使政策选择或政策制定过程发生改变，从而影响公共政策的能力。笔者认为，期刊的政策影响力是指期刊以其刊载的具有思想性、前瞻性、独创性、知识性的成果内容，为政策相关者提供有效的信息参考，在政策的研究、制定、传播和实施过程中，影响读者的思想、决策乃至行为的能力。其中，政策相关者是指能直接或间接、有形或无形影响某项政策的社会群体，如党政机关领导人、党政机关人员和智库单位人员等。期刊主要通过与政策相关者的互动关系进而对政策产生影响，是一种相对隐性且双向的知识传播和运用过程。如图 所示，这种影响主要表现在两个方面：期刊及其刊载的相关研究成果被包括政策相关者在内的读者关注和使用，进而为政策的研究、制定提供决策参考价值；期刊通过发表包括政策相关者在内的作者的观点和研究成果，对政策的传播、实施起到解读宣传作用。鉴于政策文件一般不列出参考资料、期刊文献被政府采纳信息难以获取等客观条件限制，笔者主要采用反向推理，即将政策文件、政策相关者分别与期刊刊载成果建立证据关联，评估其影响效果的定量评价方法，以提高期刊政策影响力定量评价的可操作性。期刊政策影响力评价指标体系 为了客观揭示和评估期刊通过与政策相关者的互动关系，对政策的研究、制定、传播和实施产生的影响效果，笔者依据期刊政策影响力模型，从期刊在政策发布前对政策研究成果的报道能力、在政策发布后对政策研究成果的传播能力以及吸引政策相关者参与和关注的能力 个维度，设计了包含政策研究指数（，）、政策传播指数（，）、吸引政策相关者参与度指数（，）等 个一图 期刊政策影响力模型级指标、个二级指标和 个三级指标的期刊政策影响力定量评价指标体系，见表。政策研究指数（）政策制定过程包含议程设置和政策形成两大环节，前者是公共问题进入政策议程、转变为政策问题的过程，后者是为政策问题寻求解决方案的过程。在这两大环节中，期刊刊载文献的研究对象、问题以及提出的对策建议等研究结果，均可能对政策问题或问题解决方案的形成起到推动或参考作用。政策研究指数表征了某项政策发布前，期刊刊载的相关前瞻性研究内容获得政策制定的决策主体或智库关注，并可能引发其思考甚至影响其决策行为的潜在能力程度。这种能力主要表现在某项政策发布前，期刊刊载相关内容的文章数量以及文章是否有被采纳到政策中的内容。因此，期刊政策研究文献可分为前瞻性研究文献和主题相关研究文献两类。前瞻性研究文献是指在政策发布日之前，就有与政策文本存在吻合内容的期刊文献，直接体现出期刊文献与政策内容的“强相关”关系。主题相关研究文献是指在政策发布日之前，文献主题词与政策主题词存在对应关系的期刊文献，间接体现期刊文献与政策问题的相关性。期刊的政策研究文献数量与其总发文量密切相关，研究文献占比是指某期刊的政策研究文献数量占其相应时间范围内总发文量的比例，反映期刊刊载政策研究文献的相对强度。并且还对同一政策对应一组研究文献的提前发表时间和组内被引频次进行统计，以考量研究文献对政策制定产生“贡献”的先后和大小。其中，研究文献提前发表时间指标是通过计算研究文献发表日期早于相应政策发布日期的时间间隔，以反映期刊发表政策研究文献的先进性。其计算方法张义川，赵聪聪，伍军红，等 期刊政策影响力评价方法研究 图书情报工作，（）：表 期刊政策影响力定量评价指标体系总指标一级指标二级指标三级指标单位政策影响力指数 政策研究指数 政策研究前瞻度 前瞻性研究文献占比 主题相关研究文献占比 研究文献提前发表时间年 研究文献组内被引频次次研究参考度 研究文献总被引频次次 研究文献篇均被引频次次研究关注度 研究文献总下载频次次 研究文献篇均下载频次次政策传播指数 政策研究传播度 传播文献占比 传播文献提前发表时间天 传播文献组内被引频次次传播参考度 传播文献总被引频次次 传播文献篇均被引频次次传播关注度 传播文献总下载频次次 传播文献篇均下载频次次吸引政策相关者参与度指数 政策相关者直接参与度 党政机关领导人发文占比 党政机关人员发文占比 智库单位人员发文占比政策相关者参考度 党政机关人员引用频次次 智库单位人员引用频次次政策相关者关注度 党政机关人员下载频次次 智库单位人员下载频次次为：设共有 项政策文件，限定每项政策发布时间前 年内发表的文献作为研究文献（为固定值），第 项政策文件发布年为，某期刊发表第 项政策文件对应的最早一篇研究文献的发表年为，则该期刊第 项政策的研究文献提前发表时间为。取值范围为 至，越接近 表明先进性越高，其计算公式如下所示：公式（）期刊的研究文献提前发表时间用 表示，为该期刊 项政策对应的研究文献提前发表时间的平均值，其计算公式如下所示：公式（）此外，政策研究指数还分别从被引频次、篇均被引频次和下载频次、篇均下载频次 个三级指标反映研究文献发表后被参考和关注的程度，以考量其本身的研究水平。政策传播指数（）期刊是学术前沿思想的汇聚地和科研成果交流的平台，因具备严谨性、科学性、专业性和权威性的特征，故而可以成为国家政策传播的重要载体和有效媒介。政策发布后，期刊刊载文献会通过提及政策、引用政策等方式，对政策内容进行宣传解读或对政策涉及的相关问题进行研究，并对文献阅读者、期刊使用者起到传播该项政策的正向推动作用。政策传播指数表征了某项政策发布后，期刊刊载的相关研究成果体现出对该项政策的宣传报道、解读评论和舆论引导的传播能力程度。这种能力主要表现在某项政策发布后，期刊刊载相关内容的文章数量。期刊政策传播文献需满足两个条件：期刊文献发表时间为政策发布日之后；期刊文献全文中（含文后参考文献）明确提及或引用政策。同样，也对同一政策对应一组传播文献的提前发表时间和组内被引频次进行统计，以考量传播文献对政策传播产生“贡献”的先后和大小。其中，传播文献提前发表时间指标是通过计算传播文献发表日期晚于相应政策发布日期的时间间隔，以反映期刊发表政策传播文献的时效性。其计算方法为：设共有 项政策文件，限定每项政策发布时间后 天内发表的文献作为传播文献（为固定值），第 项政策文件发布日为，某期刊发表第 项政策文件对第 卷 第 期 年 月应的最早一篇传播文献的发表日为，则该期刊第 项政策的传播文献提前发表时间为。取值范围为 至，越接近 表明时效性越强，其计算公式如下所示：（）公式（）期刊的传播文献提前发表时间用 表示，为该期刊 项政策对应的传播文献提前发表时间的平均值，其计算公式如下所示：公式（）同理，政策传播指数也分别从被引频次、篇均被引频次和下载频次、篇均下载频次 个三级指标反映传播文献发表后被参考和关注的程度，以考量其本身的研究水平。吸引政策相关者参与度指数（）在政策尤其是重大政策发布前后，期刊会通过策划选题、针对性向政策相关者组稿约稿、宣传推广等方式，发表和报道该政策领域相关理论和实践问题的研究成果，在一定程度上实现其引导舆论、解读政策和辅助决策的作用。部分期刊可能是被“选择”作为某些政策及相关研究成果的发布窗口和平台，但从另一角度来看，这种“选择”本身就代表了政策相关者对其特殊地位和作用的认可，也应该是期刊政策影响力的一种表现。吸引政策相关者参与度指数表征了期刊吸引政策相关者在本刊发表观点，或关注、参考本刊刊载相关研究成果的能力程度。影响政策形成的不只有政策决策者，社会各阶层都有参与政策、影响政策或推动社会变革的能力。不同社会群体会对政策决策产生不同的影响力，例如在政策制定过程中，党政机关领导层主要负责对政策的宏观方向进行把控，具体的政策制定一般由党政机关人员负责完成，智库单位人员主要为政策制定提供决策咨询服务。因此，笔者统计的政策相关者分为党政机关领导人、党政机关人员和智库单位人员 类。该指数既包括各类政策相关者在期刊署名发表的文献数量占比，也包括党政机关人员、智库单位人员引用和下载期刊文献的次数等指标，以考量期刊对不同政策相关者的吸引力程度。期刊政策影响力指数（）为了对期刊的政策影响力进行综合评估，笔者进一步设计了期刊政策影响力指数（，），并采用当量准值法对其进行客观计算，以避免人为主观因素影响。当量准