百度产业级知识增强大模型文心全景图首次亮相
责任编辑:安远 来源:IT之家 发布时间:2021-12-12 22:35 阅读量:6061
,昨日,鹏城实验室与百度联合召开发布会,正式发布双方共同研发的全球首个知识增强千亿大模型 —— 鹏城—百度文心
据介绍,该模型参数规模达到 2600 亿,是目前全球最大中文单体模型,在 60 多项任务上取得最好效果同时,百度产业级知识增强大模型文心全景图首次亮相
文心全景图
本站了解到,百度首席技术官王海峰指出,从 2019 年 3 月发布文心 ERNIE 1.0,到最新的产业级知识增强大模型文心全景图,既包含基础通用的大模型,也包含面向重点领域,重点任务的大模型,以及丰富的工具与平台。
百度表示,此次发布的鹏城—百度文心是全球首个知识增强千亿大模型,在机器阅读理解,文本分类,语义相似度计算等 60 多项任务取得最好效果,并在 30 余项小样本和零样本任务上刷新基准
鹏城-百度middot;文心成功发布的背后,得益于鹏城实验室的算力系统;鹏城云脑Ⅱ;和飞桨深度学习平台的强强联手,解决了超大模型训练的多个公认技术难题,使鹏城-百度middot;文心训练效率大幅提升,模型效果更优。;鹏城云脑Ⅱ;是国产自主的首个E级AI算力平台,曾在多个国际性能测试上获得冠军。飞桨是我国首个自主研发的深度学习开源开放平台,研制了端到端自适应分布式训练框架,实现多硬件支持,并行效率高达90%,有效支持鹏城-百度middot;文心千亿大模型高效,稳定地训练。
郑重声明:此文内容为本网站转载企业宣传资讯,目的在于传播更多信息,与本站立场无关。仅供读者参考,并请自行核实相关内容。