请仔细阅读本报告末页声明证券研究报告|行业周报2023年02月26日计算机ChatGPT技术篇:智能背后的秘密ChatGPT表现惊艳,网站流量一路狂飙式成长。根据数据统计机构Similarweb的估计,chat.openai.com网站(即ChatGPT官网)在2023/1/27-2023/2/3这一周吸引的每日访客数量高达约2500万,在1月31日的流量高峰日,该网站吸引了2800万次访问。并且在1/3-2/3这一个月里,该网站的流量平均每天增长3.4%,增速惊人。从Transformer到ChatGPT,有哪些历史性突破?ChatGPT用户数高速增长的根本原因,来源于其突破性的表现,其中最突出的有两点体现:1)ChatGPT与人类“对齐”了偏好,其应答更适应人类习惯,并且能驳回一些反道德的提问,展现出显著优于前代的智能度。2)ChatGPT具备了思维链(Chain-of-Thought,CoT)能力,能够处理一定程度的复杂思维逻辑。3)ChatGPT在算数、国际音标转写、单词解读、问答、事实性问答、基础概念映射、多任务自然语义理解、上下文单词理解等8个指标上表现出全面综合的能力。量变到质变,规模超过特定阈值后模型性能陡增。根据谷歌发布的论文《EmergentAbilitiesofLargeLanguageModels》,可以看到多个NLP任务随着模型规模扩大的性能变化曲线:前期性能和模型规模大致呈线性关系;然而当模型规模大到一定程度时,任务性能有了明显的“飞升”。海量代码训练,模型习得代码背后隐含的逻辑能力。根据熵简科技介绍,“代码”可以理解为一种具备高度逻辑性的文本语料,不具备强逻辑性的代码会无法执行,而不像普通文本语料那样有着较高的逻辑自由度。模型从对大量代码的学习过程中,逐渐掌握了隐藏在代码背后的抽象能力与逻辑能力,进而涌现出我们在ChatGPT上感受到的“智能”。训练过程加入了人类反馈,模型偏好向人类看齐。通过有人类反馈的加强学习(RLHF)训练,人类手动对AI给出的回复进行排名,让AI模型理解人类偏好。由于训练过程中加入了人类反馈,有别于前代GPT-3单纯使用海量数据的训练方法,ChatGPT能够更好地理解用户指令,并作出反应。投资建议。建议关注:1)应用型公司:金山办公、光云科技、当虹科技、同花顺、万兴科技、立方数科、云赛智联、神思电子、宇信科技、360、高伟达、寺库、知乎、汉王科技等;2)算力公司:浪潮信息、中科曙光、海光信息、寒武纪、景嘉微、世纪华通、光通信产业链公司;3)相关技术公司:科大讯飞、云从科技、拓尔思、海天瑞声、海康威视、萤石网络、百度、阿里、腾讯;4)软件开发效率...