新京报客户端

好新闻 无止境

立即打开
百度王海峰:大语言模型为通用人工智能带来曙光
新京报 记者 罗亦丹 编辑 岳彩周
2023-08-16 20:53


新京报贝壳财经讯(记者罗亦丹)8月16日,由深度学习技术及应用国家工程研究中心主办的WAVE SUMMIT深度学习开发者大会2023在北京举行。百度首席技术官、深度学习技术及应用国家工程研究中心主任王海峰首次对外表示,大语言模型具备了理解、生成、逻辑、记忆等人工智能的核心基础能力,为通用人工智能带来曙光。


据了解,得益于飞桨产业级深度学习开源开放平台和文心大模型的互相促进,飞桨生态愈加繁荣,已凝聚800万开发者,服务22万家企事业单位,基于飞桨创建了80万个模型。王海峰阐释了飞桨开发者社区AI Studio中文名“星河社区”的隽永含义,“文心加飞桨,翩然赴星河”。


王海峰表示,人工智能具有多种典型能力,理解、生成、逻辑、记忆是其中的核心基础能力,这四项能力越强,越接近通用人工智能。


“具体而言,人工智能的典型能力如创作、编程、解题、规划等都依赖于理解、生成、逻辑、记忆等核心基础能力,依赖程度有所不同。以解题为例,从读懂题目、解答题目到最后写出答案,需要理解、记忆、逻辑及生成能力的综合运用。”王海峰说。


他以文心一言举例,首先从数万亿数据和数千亿知识中融合学习得到预训练大模型,在此基础上采用有监督精调、人类反馈的强化学习和提示等技术,并具备知识增强、检索增强和对话增强等技术优势。


进一步地,通过多种策略优化数据源及数据分布、基础模型长文建模、多类型多阶段有监督精调、多任务自适应有监督精调、多层次多粒度奖励模型等技术创新,全面提升基础通用能力。在检索增强和知识增强的基础上,通过知识点增强,提升对世界知识的掌握和运用;通过大规模逻辑数据构建、逻辑知识建模、多粒度语义知识组合以及符号神经网络,提升逻辑能力;通过构建数据、内容、模型和系统安全的全面安全体系,保障大模型的安全性。


王海峰表示,以大语言模型为代表的人工智能正在深入千行百业,加速产业升级和经济增长。在这个进程中,技术创新和应用落地形成良性循环,理解、生成、逻辑、记忆等能力持续提升,产业应用的广度和深度持续拓展。


编辑 岳彩周

校对 柳宝庆


来阅读我的更多文章吧
罗亦丹
新京报记者
记者主页
相关专题

多款大模型向公众开放!安全、数据、监管,你应该知道的都在这儿

相关推荐
智源发布“悟界”系列大模型 重塑AI交互边界
科技
北京设立23家人工智能领域重点实验室,多项成果涌现
北京
AI浪潮录丨王晟:谋求窗口期,AI初创公司不要跟巨头抢地盘
科技
大语言模型直接模拟人类语言能力,是一条靠谱的进路吗?
文化
中国高等教育 | 龚旗煌:从理念到实践:人工智能赋能下的高等教育创新探索
新京号
AI浪潮录丨对话刘知远:通往AGI不易,长跑要顶住资本寒冬
科技
集体学习+实地调研,人工智能发展和监管为何被高度重视
科技
最新研究表明:给人工智能适当压力能使其更好解决问题
时事
聚焦北京新质生产力 “京彩不设限·经济热力站”活动成功举办
财经
全球首个通用智能人“通通”2.0升级亮相
北京

新京报报料邮箱:67106710@bjnews.com.cn