当前位置:首页 > 杂谈 > 正文内容

百度官宣:文心一言即将问世,或将比ChatGPT更强!-文心是什么意思是什么

2023-07-04 07:38:48TONY杂谈131

原标题:百度官宣:文心一言即将问世,或将比ChatGPT更强!

作者 | 徐杰承

百度官宣:文心一言即将问世,或将比ChatGPT更强!-文心是什么意思是什么

2月7日,百度官方公众号发布了一条极为简短的通告——《官宣:文心一言》。据了解,文心一言正是百度内部所研发的类ChatGPT聊天机器人,其英文名称则为ERNIE Bot。

据百度内部人员表示:文心一言由基于百度提出的知识增强大模型(Ernie)扩展而成的一系列高级大模型构成,可以执行广泛的任务,包括语言理解、语言生成(ERNIE 3.0 Titan)以及根据文本生成图像(ERNIE-ViLG)等。与其他语言模型相比,文心一言能够将广泛的知识与海量数据相结合,从而产生非凡的理解与生成能力。公司计划在3月完成文心一言的内部测试,然后向公众正式开放使用。

虽然对于文心一言的实际表现我们暂且不得而知,但通过百度此前所发布的名为《ERNIE 3.0 Titan: Exploring Larger-scale Knowledge Enhanced Pre-training for Language Understanding and Generation》的论文,目前我们可以大致了解到一些有关其所应用的语言模型ERNIE 3.0 Titan的相关信息。

据论文显示:ERNIE 3.0 Titan是百度于PaddlePaddle平台上所训练的千亿参数模型,其中包含多达2600亿个参数(ChatGPT使用1750亿参数的GPT3.5模型)。此外,百度还设计了一个自我监督的对抗性损失和一个可控的语言建模损失,使ERNIE 3.0 Titan生成可信和可控的文本。

为了减少计算开销和碳排放,百度还为ERNIE 3.0 Titan提出了一个在线蒸馏框架,其中教师模型将同时教授学生和训练自己。ERNIE 3.0Titan是迄今为止最大的中国密集预训模型。相关实验结果表明,ERNIE 3.0 Titan在68个NLP数据集上的性能已优于现阶段最先进的语言模型,包括ChatGPT所应用的GPT3.5模型。

ERNIE 3.0 Titan模型架构图

据悉,目前文心一言已进入上线前的最接冲刺阶段,而相关消息的曝出,也使百度港股一度暴涨超17%,市值增长约700亿港元。据部分业内人士推测,百度文心一言项目或早在2022年9月便已启动研发,彼时百度CEO李彦宏在世界人工智能大会上就曾表示:无论在技术层面还是商业应用层面,人工智能都有了巨大的进展,有些甚至是方向性的改变。

考虑到目前由ChatGPT所带来的生成式AI的火爆,未来觊觎这一领域市场的国内企业,势必不止百度一家。就市场角度而言,目前类ChatGPT聊天机器人最明显的价值与落地场景,正是百度主营的搜索业务。如此看来,如果下一次科技革命真的爆发在该领域,那么百度无疑已拔得头筹。此外,不少业内人士认为,考虑到谷歌和微软的推进节奏,文心一言开放内测的进度还有可能继续提前。返回搜狐,查看更多

责任编辑:

“百度官宣:文心一言即将问世,或将比ChatGPT更强!-文心是什么意思是什么” 的相关文章

微软IE浏览器下月退役

微软IE浏览器下月退役

微软IE浏览器下月退役 本文转载自央广网 5月16日,微软官方消息称,6月16日,IE(Internet Explorer)浏览器正式退役,此后由Edge(Microsoft Edge)接力。 消息一出,引发网友热议。其中,部分用户对于IE浏览器即将退役表...

你还在用pubmed搜文献?一个网址搜索下载翻译全搞定!

你还在用pubmed搜文献?一个网址搜索下载翻译全搞定!

说到搜索英文文献,最常用的应该就是Pubmed了,但很多文献不提供免费全文,还需要去别的免费网站搜索下载。所以今天就给医生大大们安利一个相对更有优势的英文文献搜索引擎——Geenmedical,一起来看看吧! 网址:https://www.geenmedical.com/...

研究生必备科研软件和学习工具

研究生必备科研软件和学习工具

作为研究生,搞科研、写论文已成为研究生生活必不可少的一部分。如果学习并能熟练运用一些必备的科研工具,就肯定能够大大地帮助自己开展科研、写好论文,更早地发表出论文。那么有哪些软件是读研期间必备的呢?介绍如下: 1、基础软件 office三件套(Word、Excel、PPT)、...

搞一个属于自己的云盘

搞一个属于自己的云盘

#每个人都有自己的云盘##我有# 前几年云还是企业的事,说到云,只有企业才有资格用这个东西,数字化的时代来了,个人也可以用云了! 今天给大家介绍一款性价比很高的云盘。 如今中国移动开放了云盘,还是针对个人的,使用用户覆盖到了9亿。 在线手机登录...

引入360亿方云,浙江工贸职业技术学院校园云盘顺利上线

引入360亿方云,浙江工贸职业技术学院校园云盘顺利上线

原标题:引入360亿方云,浙江工贸职业技术学院校园云盘顺利上线 近期,浙江工贸职业技术学院就向360亿方云发来致谢信,对项目顺利交付表示感谢,并对双方未来的合作表达了由衷的期待。 关于浙江工贸职业技术学院 浙江工贸职业技术学院是省属公办全日制高等院校,地...

夜间救援也及时,领克24小时免费道路救援yyds!

夜间救援也及时,领克24小时免费道路救援yyds!

开车这么多年,一次经历如此惊心动魄的事情。感谢领克24小时免费道路救援服务,晚上救援也依然如此及时,让我在夜间行车也无后顾之忧,再次感谢领克对车主们的贴心守护。 今天因为一些急事,晚上也不得不驾车到很远的地方去。那段路程虽然平时也走过几次...