从ChatGPT发布到国产大模型密集上线,人工智能行业经历的关键拐点可以概括为三条主线:技术路线从专用小模型转向通用大模型,能力重心从感知理解转向生成创造,产业格局从海外引领走向国内外密集布局。其中最具标志性的节点,是2022年11月底ChatGPT的出现引发社会各界广泛关注,随后国内百度、阿里等公司陆续发布自有大模型,行业正式进入大模型爆发期。

技术拐点:从BERT、GPT到ChatGPT的范式转换

在2018年以前,自然语言处理(NLP)长期受限于标注数据稀缺,机器理解语言面临高度抽象性、语义组合性等难题。2018年以来,以BERT和GPT为代表的语言大模型,通过自监督学习在海量语料库中预训练,让模型逐步掌握上下文语境,弥补了NLP标注数据的短板。

从2019年谷歌T5到OpenAI GPT系列,参数量爆炸的大模型不断涌现。2022年11月底ChatGPT的出现,是行业从“感知”走向“生成”的关键拐点——它让AI从识别与分类,跃迁为具备语言理解和生成能力的通用工具,并引发社会各界的广泛关注。

产业拐点:国产大模型密集上线

ChatGPT引爆行业后,国内厂商迅速跟进。2022年11月底之后,国内的百度、阿里等公司陆续发布了自己的大模型,形成了国产大模型的密集上线潮。

在国产阵营中,技术储备丰富、进展靠前的代表是百度文心一言、腾讯混元和华为盘古。三家落地思路相近,区别主要在生态:百度和腾讯作为互联网厂商,在数据入口的样本收集方面具备优势;华为则凭借对行业的深入理解,更多面向To B端应用。

从整体格局看,国内大多数AI企业的产品仍以小模型为主,即主要为某个细分领域提供智能解决方案,这一商业模式已比较成熟。而大模型层面,国产厂商与海外头部仍存在代际差距,后续迭代速度是观察重点。

技术路线分化:NLP、CV与多模态

大模型主要分为三大类:NLP(自然语言处理)、CV(计算机视觉)和多模态。现阶段大模型主要面向NLP领域,ChatGPT背后的GPT-3即属于NLP大模型。

  • NLP大模型:当前主要发展方向,以BERT、GPT系列为代表
  • CV大模型:受有效训练数据不足、学习方法待突破、通用模型未建立等制约,短期难现大爆发
  • 多模态模型:热门方向为文本-图像模型,OpenAI发布的GPT4支持图像和文本输入并生成文本输出,是这一方向的代表

常见问题

国产大模型与ChatGPT的差距有多大?

从公开信息来看,国产大模型与OpenAI系列存在代际差距。以百度文心一言为例,发布初期的体验大致相当于GPT-2.5的水平。不过国产厂商具备快速迭代的潜力,后续能否像GPT系列一样实现快速升级,是决定差距缩小的关键。

为什么说CV大模型短期难有大爆发?

CV大模型面临四重挑战:可用于训练的有效数据比NLP领域少、学习方法仍需突破、不同视觉应用依赖不同模型导致通用模型未建立、图像尺寸增大带来计算量压力。综合来看,CV大模型短期还很难出现大的爆发。

国内哪些厂商在大模型领域进展最快?

百度、腾讯和华为三家技术储备丰富、进展靠前。百度文心一言在国内进展最快,已开放网页公测;腾讯混元大模型立项较早并已获得自营业务支持;华为盘古大模型落地应用场景较多,覆盖文旅、金融、交通、电力等行业。

延伸阅读