论坛
潜水/灌水快乐,沉淀知识,认识更多同行。
ToB圈子
加入IT圈,遇到更多同好之人。
朋友圈
看朋友圈动态,了解ToB世界。
ToB门户
了解全球最新的ToB事件
博客
Blog
排行榜
Ranklist
文库
业界最专业的IT文库,上传资料也可以赚钱
下载
分享
Share
导读
Guide
相册
Album
记录
Doing
搜索
本版
文章
帖子
ToB圈子
用户
免费入驻
产品入驻
解决方案入驻
公司入驻
案例入驻
登录
·
注册
只需一步,快速开始
账号登录
立即注册
找回密码
用户名
Email
自动登录
找回密码
密码
登录
立即注册
首页
找靠谱产品
找解决方案
找靠谱公司
找案例
找对的人
专家智库
悬赏任务
圈子
SAAS
ToB企服应用市场:ToB评测及商务社交产业平台
»
论坛
›
虚拟化.超融合.云计算
›
虚拟化与私有云
›
以大模型重构云计算,百度智能云为繁荣AI原生应用生态操 ...
以大模型重构云计算,百度智能云为繁荣AI原生应用生态操碎了心 ...
滴水恩情
金牌会员
|
2024-6-13 20:24:17
|
显示全部楼层
|
阅读模式
楼主
主题
677
|
帖子
677
|
积分
2031
临近2024年关,也到了2023年的总结时候。
假如要问AI范畴,2023年最不缺的是什么?“大模型”当仁不让。
那AI范畴,2023年最缺的又是什么?一个答案可能是“卡”,但“卡”的问题,毕竟已有多种解决办法或者替代方案;另一个答案便是“应用”了,特别是基于大模型的AI原生应用。
而AI原生应用之所以匮乏,很大程度上一方面在于AI应用场景有待进一步激发,另一方面在于支持AI原生应用开发的资源和工具能否给力。
如何让开发者更专注于探寻AI创新应用场景,而不必焦虑于开发AI原生应用技术自己?
12月20日,在主题为“重构云计算·CLOUD FOR AI”为主题的2023百度云智大会·智算大会上,百度智能云给出了它的AI原生应用开发解法——百度智能云正在基于“云智一体”战略重构云计算服务,现在已完成从底层基础办法—大模型开发与应用—AI原生应用开发的端到端升级重构:全面升级百舸等20多个云计算基础办法、千帆大模型平台再升级、AI原生应用开发工作台“千帆AppBuilder ”全面开放。
大模型
:
正在重构云计算
“AI原生期间开启,大模型正在驱动云计算产业创新变革。”百度团体副总裁侯震宇表示:“大模型重构云计算重要表现在三个层面:AI原生云将改变云计算的格局,模型即服务(MaaS )会成为新的基础服务,AI原生应用催生新的研发范式 。”
百度团体副总裁侯震宇
在云基础办法层,移动互联网期间的应用,底层大多依赖CPU算力,而AI应用对GPU或异构计算的需求大幅增长,云市场的底层算力需求将逐渐转向以GPU为主。
在模型层,大模型正在成为通用的服务本领,即MaaS。MaaS将大幅低落Al落地的门槛,实现真正的Al普惠。
在应用层,应用开发的范式已经被彻底颠覆。大模型明白、生成、逻辑、影象的独特本领会催生A原生应用研发新范式,整个应用技术栈、数据流和业务流都将被改变。
侯震宇表示,总体来说,构建繁荣的A原生应用生态,必要大模型、智能算力、AI原生应用研发新范式三要素相辅相成。大模型是AI原生应用的“大脑”,智能计算则为A原生应用运行提供坚实支持,新研发范式助力开发者高效基于大模型本领开发应用。数据飞轮是成功的AI原生应用的充分必要条件,让大模型本领高速迭代,产物体验持续进步。
以大模型重构云计算基础办法
,
为开发者提供坚实底座
AI原生期间,面向大模型的云计算基础办法体系将全面重构。大会现场,百度智能云密集发布和升级了20多款云计算产物,涵盖智能计算、通用计算、数据基础办法、分布式云等范畴。
在智能计算
方面
,发布百度百舸·AI异构计算平台3.0,针对AI原生应用以及大模型的练习、推理等环节举行了专项优化。百舸3.0在稳定、高效、易运维三个方面大幅升级产物本领,实现万卡级别任务有用练习时长达到98%以上,带宽有用性可达 95%。相比自建智算基础办法,可以实现模型训、推吞吐分别最高提升30%和60%。
百度百舸3.0发布
同时,针对AI原生期间智能算力的供给均衡问题,百度智能云发布智算网络平台。在算力资源层面,智算网络平台支持将百度及第三方建设的智算中心、超算中心、边缘节点等智算节点举行全域接入,将分散和异构的算力资源毗连起来,形成统一的算力网络资源池,再通过百度自主研发的算力调治算法,智能分析各类算力资源的状态、性能和使用率等指标,统一调治算力,让智算资源灵活、稳定、高效地交付给有需求的用户,实现智算资源的“南水北调”。
在通用计算
方面
,计算、存储、网络等云原生基础办法也必要面向AI原生期间重构升级,提供更具弹性、高性能和智能化的运维本领。本次大会,百度太行·计算新增了三款计算实例:全新推出第7代(通用计算型)云服务器实例G7,综合性能较上一代产物提升10%;发布昆仑芯弹性裸金属实例NKL5,搭载了百度自研的昆仑芯R300加速处理处罚器,在大模型推理场景综合性能较业界主流加速卡可提升达50%;发布基于昇腾910B加速处理处罚器打造的弹性高性能计算实例NH6T,在大模型练习场景中,综合性能较业界主流加速卡提升可达40%。同时,高性能计算平台CHPC(Cloud HPC)正式发布,为用户提供的一站式公共云 HPC 服务。在资源使用层面,CHPC支持用户一键创建高性能计算环境,并根据业务变化灵活使用云上资源;在业务应用层面,CHPC支持集成药物研发、基因测序等行业的应用。此外,结合集成在 VPC 内的百度网盘等服务,用户可以轻松实现HPC源文件从提交、上传、处理处罚、效果回传,到分发的数据全链路买通,助力研发提效。
在数据基础办法范畴
,正式发布百度沧海·存储,统一技术底座,能够支持各类存储产物,同时满足AI原生期间的大规模、高性能、低成本的存储要求。全新升级的对象存储BOS、云磁盘CDS、并行文件存储PFS等产物,面向数据湖存储和AI存储本领举行了全面增强,加速智能计算,开释数据代价。同时,正式发布云原生数据库GaiaDB 4.0,增强并行查询本领,突破单机计算瓶颈,实现跨机多核并行查询,在混合负载和实时分析业务场景中性能提升凌驾10倍;针对差异的工作负载推出列存索引和列存引擎,提升差异规模数据的查询速度,其中列存引擎最大可支持 PB 级数据的复杂分析,并且与事务处理处罚业务严格复杂隔离;通过共识协议优化、链路优化、自顺应动态回放存储多版本等一些列数据流深度优化,大幅提升GaiaDB整体性能60%以上。
在分布式云
方面
,升级边缘计算节点BEC产物本领,打造全球统一的边缘计算网络和产物体验,打造AI原生应用期间本领最完善的“云边一体”;发布专有云ABC Stack新本领,支持本地摆设百度智能云千帆大模型平台;发布本地计算集群LCC新本领,支持全新一代CPU/GPU实例以及完整的百度智能云AI&HPC集群管理本领,进一步丰富完善基础办法与云产物支持本领矩阵。
以千帆大模型平台
,
模型即服务(MaaS):千帆大模型平台再升级
在AI原生期间,大模型将作为新的通用服务本领,由模型即服务(MaaS)平台提供给广大用户。百度智能云千帆大模型平台(以下简称“千帆平台”)作为业界领先的MaaS服务平台,预置了包括百度文心大模型在内的、国内最多的54个主流基础大模型和行业大模型,还为大模型的持续预练习、精调、评估、压缩和摆设等环节提供最完善易用的工具链,帮助客户针对自身业务场景快速定制专属大模型。
相较于自建系统练习大模型,使用千帆平台练习的成本最高可以下降90%。
百度智能云千帆大模型平台
现在,千帆平台已经累计服务凌驾40000家企业用户,精调近10000个大模型。本次智算大会,针对客户应用大模型最关心的“提效”和“降本”两大核心诉求,千帆平台发布一系列全新功能。
在数据方面,千帆平台提供完善、高效的大模型数据管理工具链,包括数据采集,洗濯、自动标注、自动增强与推理数据多位评估等功能,助力用户快速构建自身业务“数据飞轮”,实现反馈驱动增长。全新发布的数据统计分析、数据质量查抄等功能,支持用户获取全方位的数据洞察信息,结合数据洗濯可视化Pipeline,能够构建出面向大模型场景的高质量数据燃料,为大模型练习“保驾护航”,千帆也因此成为国内首个支持大模型多方位数据分析的MaaS服务平台。
作为模型摆设上线前的“末了一公里”,模型评估能够对大模型的输出效果、计算性能等举行全方位评估,确保大模型上线后AI原生应用的效果稳定可靠。千帆平台创新性地引入自动化与人工结合的双重评估机制,充分发挥双方优势,大幅提升模型评估效率与质量。一方面,百度文心大模型作为AI裁判员,能够对被评估模型的回答举行自动化打分,极大程度地减少海量重复性人工作业;另一方面,由数据标注员/业务专家对大模型回答举行打分,则能够实现对大模型回答质量的精细化权衡。
此外,千帆平台灵活的计价方式,如Tokens(适用灵活性要求较高的业务)、TPM(Tokens per Minute,适用于较大并发量业务)、批量计算(适用于离线内容生产等对实时性要求较低,吞吐较大的任务)、算力单位(适用于必要专享硬件摆设模型的客户)等,可以轻松满足客户的多种业务场景必要,助力企业低成本用好大模型。
以AppBuilder开放服务,帮开发者加速AI原生应用开发
为了满足企业灵敏、高效地举行AI原生应用开发的需求,低落AI原生应用开发门槛,百度智能云千帆AppBuilder正式开放服务。
AppBuilder将大模型开发AI原生应用的常见模式、工具、流程,沉淀成一个工作台,帮助开发者聚焦业务自己,而无需为开发过程牵扯多余精神。详细来讲,AppBuilder重要由组件、框架两层服务构成。
“
组件
”
服务
由多模态的AI本领组件(如笔墨识别、文生图等)、基于大语言模型的本领组件(如长文总结、nl2sql等)、基础组件(如向量数据库、对象存储等)三部分构成,是对底层服务本领的组件化封装,让每个组件完成一个特定的功能。
“
框架
”
服务
则是通过将上述这些组件有选择地串联、组合起来,让它们能够比较完整地完成一个特定场景的任务。现在,AppBuilder提供的检索增强生成(RAG)、智能体(Agent)、智能数据分析(GBI)就是常用的AI原生应用框架。
AppBuilder提供两种产物形态,代码态与低代码态。对于有深度AI原生应用开发需求的用户,AppBuilder代码态提供包括SDK、开发环境、调试工具、应用示例代码等各种开发套件和应用组件;而AppBuilder低码态则提供可视化工具,用户只需简朴点选,即可快速定制、上线AI原生应用。
百度智能云千帆AppBuilder
百度创始人、董事长兼首席执行官李彦宏认为,繁荣的AI原生应用生态,会驱动经济增长。本年10月,百度智能云推出了国内首个大模型全链路生态支持体系,为合作伙伴提供包括赋能培训、AI原生应用孵化、销售商机、市场营销等全方位的支持,致力于繁荣AI原生应用生态。
侯震宇预判:“真正非常闪耀的AI原生应用会在2024年诞生,2024年将成为AI原生应用的元年,迎来AI原生应用的发作式增长。百度智能云将持续推出有竞争力的产物方案,与伙伴一起深耕客户应用场景,让更多的AI原生应用创新涌现。”
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。
本帖子中包含更多资源
您需要
登录
才可以下载或查看,没有账号?
立即注册
x
回复
使用道具
举报
0 个回复
正序浏览
返回列表
快速回复
高级模式
B
Color
Image
Link
Quote
Code
Smilies
您需要登录后才可以回帖
登录
or
立即注册
本版积分规则
发表回复
回帖并转播
发新帖
回复
滴水恩情
金牌会员
这个人很懒什么都没写!
楼主热帖
体系集成商重返黄金年代
ubuntu 20.04 安装好搜狗输入法无法输 ...
使用扩展函数方式,在Winform界面中快 ...
「年终总结」写了 3 年文章的我,昨天 ...
【C++】STL——vector模拟实现
GIS数据获取:景象数据免费下载网站 ...
读SQL进阶教程笔记03_自连接
《深入理解Java虚拟机》笔记:垃圾收集 ...
一次服务器被入侵的处理过程分享 ...
Bootstrap Blazor 开源UI库介绍-Table ...
标签云
挺好的
服务器
快速回复
返回顶部
返回列表