文心大模型融入光荣MagicOS!打造大模型“端云配合”创新样板

2024年1月10日,在光荣MagicOS 8.0发布会及开发者大会上,光荣终端有限公司CEO赵明宣布了“百模生态计划”,并与baidu集团执行副总裁、baidu智能云事业群总裁沈抖共同宣布,baidu智能云成为光荣大模型生态战略合作伙伴。沈抖在现场演讲中表示,“端云配合”是大模型到端侧运用的创新范式。端侧大模型更懂用户企图,云侧大模型擅长处理复杂问题,满足用户深层次需求,端侧、云侧能力互补、相互结合,将为用户带来卓越的体验。大模型将驱动挪动运用二次爆发,不止现有的800万挪动运用会鉴于大模型加速升级、重构,未来还将诞生更多全新的A

2024年1月10日,在光荣MagicOS 8.0发布会及开发者大会上,光荣终端有限公司CEO赵明宣布了“百模生态计划”,并与baidu集团执行副总裁、baidu智能云事业群总裁沈抖共同宣布,baidu智能云成为光荣大模型生态战略合作伙伴。

沈抖在现场演讲中表示,“端云配合”是大模型到端侧运用的创新范式。端侧大模型更懂用户企图,云侧大模型擅长处理复杂问题,满足用户深层次需求,端侧、云侧能力互补、相互结合,将为用户带来卓越的体验。大模型将驱动挪动运用二次爆发,不止现有的800万挪动运用会鉴于大模型加速升级、重构,未来还将诞生更多全新的AI原生运用。 文心大模型融入光荣MagicOS!打造大模型“端云配合”创新样板

(baidu集团执行副总裁、baidu智能云事业群总裁沈抖)

文心大模型接入光荣MagicOS百模生态计划 

端云配合成大模型端侧运用新范式

大模型的竞争格局已逐渐从技术之争演变为运用落地和生态之争,让大模型进入千家万户才是真正价值所在。

在光荣MagicOS8.0的发布会上,光荣发布了“百模生态计划”,致力于携手合作伙伴共同打造端云配合的大模型效劳“新生态”,光荣将为百大模型供给入口,让云侧通用大模型和各种行业垂域大模型可以通过货架化方式融入到MagicOS中,端侧平台级AI大模型作为中控,理解用户企图,拆解编排任务,高效安全地连接云侧大模型,分发、融合、调度原子化效劳,完成复杂任务闭环。

沈抖表示,“从2023年下半年开始,基础大模型的竞争就已经进入到优胜劣汰的阶段。今年再去卷基础大模型,已经没有意义。现在大家真正关心的,是怎么把大模型‘用起来’ 。大模型时代,真正给企业带来价值的,是使用大模型的深度和打磨AI原生运用的速度。

随着大模型落地不断深化,大模型到端侧运用成趋势。端侧运用是指大模型直接利用端侧芯片的算力生成结果。但动辄千百亿级参数的大模型所需的庞大算力、存储和能耗对端侧芯片提出了高要求,此外端侧用户对高性能、低时延、数据隐私等存在特别需求。因此,云侧部署的大模型加端侧运用的大模型是综合平衡性能、成本、功耗、隐私、速度之下的最佳选择。

baidu智能云与光荣一起在MagicOS上做了一次端、云配合的创新尝试。云侧通用大模型baidu文心大模型赋能光荣YOYO助理打造更专业的用户效劳,带来本地化的文本创作、知识问答、生活建议等。此外,将云上的“文心大模型”与光荣平台级端侧AI大模型“邪术大模型”相结合。

邪术大模型负责理解用户企图,在后台将用户的简单提示转化为更专业的提示,再由文心大模型供给知识问答、生活建议等专业效劳。比如,当用户要求“帮我制定健康计划”时,邪术大模型会分析用户健康信息,自动生成具象化提示词,再调度文心大模型,生成更全面的个人定制健身计划。过程中,邪术大模型通过端侧防护网,滤掉敏感信息,并确保个人隐私不上云,守护安全。本次合作展现了终端厂商与云效劳厂商的全新生态合作模式,也是光荣与baidu技术生态的完美契合。

沈抖表示,“端侧大模型更懂用户,可鉴于端侧对用户个人的学习深入理解用户企图,进而为用户带来个性化效劳。云侧的基础大模型参数量更大,能力更广,能应对更复杂的问题。当用户在手机端提出一个需求,端侧模型能够准确理解其企图,并给出及时的、个性化的回应。用户如果需要了解更多,就会被引导到云侧的基础大模型,得到更深入、全面的解答。端侧、云侧能力互补、相互结合,为用户带来卓越的体验”。文心大模型融入光荣MagicOS!打造大模型“端云配合”创新样板

800万挪动运用将被大模型重构

2024年将是AI原生运用爆发元年

大模型也将为挪动运用带来变革。

挪动互联网时代有800多万挪动运用,近几年挪动运用的上架数量、下载量逐渐趋于平缓,但去年由大模型驱动的AI原生运用的兴起,拉开了新一轮增长势头。据统计,2023年生成式AI挪动运用下载量翻了9倍,其中,AI聊天机器人增⻓了72倍。

在沈抖看来,大模型会是推动操作系统和挪动运用进入下一个增长浪潮的关键力量,一定会带来挪动运用的二次爆发。随着大模型使用门槛不断降低,不仅现有的800万挪动运用会鉴于大模型加速升级、重构,未来还会有更多全新的“AI原生运用”诞生。

做重构运用的智能助手: “Copilot for Building Copilots” 

沈抖表示,做好一个AI原生运用,有两个关键步骤。

首先,做一个运用,找到合适的模型至关重要。文心大模型在理解、生成、推理和记忆等通用能力上很强,多数情况下,可以直接在千帆大模型平台调用它。在一些考虑个性化、行业知识和效率的场景,特定的公用模型会起到不可或缺的作用。未来,我们更多地会看到baidu“文心大模型”这样的基础大模型和光荣“邪术大模型”这样的平台级端侧AI大模型,还有一些鉴于大模型精调出来的公用模型搭配起来用,即“MoE”。公用模型融入了专业知识,更懂场景,它们负责处理特定领域的专业任务;基础大模型更智能,负责解决更全面、复杂的问题。

沈抖判断,未来会有数以百万计的公用模型。baidu智能云千帆大模型平台上供给了一整套大模型开发的工具链,即千帆“ModelBuilder”,用户在上面就可以很经济、很简单地精调公用模型。目前千帆“ModelBuilder”已累计精调了10000个模型。

有了好的模型之后,下一步是开发AI原生运用。大模型正在重构挪动运用的整个技术栈、数据流和业务流,这对AI原生运用的开发提出了新的挑战。baidu智能云AI原生运用工作台千帆AppBuilder为开发者供给了更专业、更便捷的AI开发套件和资源环境,降低AI原生运用开发门槛。

沈抖判断,“2024年将会是中国AI原生运用爆发的元年。这些运用不仅仅是工具,它们会成为人们工作、生活上的智能助手,成为不可或缺的‘Copilot’。在这个过程中,千帆ModelBuilder和千帆AppBuilder会成为大家重构运用的‘智能助手’,也就是Copilot for Building Copilots,帮助大家为用户带来革命性的美好体验”。

据了解,baidu智能云面向客户落地大模型的五类需求(异构算力、模型调用、模型精调、AI原生运用开发、选购AI原生运用),分别给出了业界最优的效劳方案。

除模型和AI原生运用层面之外,baidu智能云通过“百舸”异构计算平台为用户供给极致可靠和性价比的异构算力效劳,目前“百舸”在大模型训练、推理各个纬度的评估指标上全部达到业界领先水平,能够在保障大模型训练、推理容错能力、稳定性的同时,助力客户大模型训、推效率飞升,加速业务智能化升级。

近期,baidu智能云还宣布了,鉴于“云智一体”战略重构云计算效劳,且已完成从底层基础设施—大模型开发与运用—AI原生运用开发的端到端升级重构。为促进AI原生运用生态的全面繁荣按下加速键。

“MagicOS是最具创新活力和影响力的挪动运用生态之一,我相信,在大模型时代,它会为开发者供给更广阔的机会,为用户供给前所未有的智能体验,持续推动行业向前发展。baidu智能云作为光荣邪术大模型生态战略合作伙伴,会和光荣一起,持续聚焦端、云大模型的深度融合,共同推动生态繁荣。”沈抖表示。

给TA打赏
共{{data.count}}人
人已打赏
应用

baidu智能云与唐山市签订战略单干和谈,共推人工智能家产生长

2024-1-11 11:52:00

应用

搭载卫星通信:光荣Magic6系列发布,还有保时捷设计折叠屏

2024-1-11 22:05:00

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
今日签到
搜索