大模型算力荒?浪潮信息也来“掘金卖铲”父亲跳海16年了,"追星狂人"杨丽娟,45岁没人敢娶如今过得怎样?
时间:2024-10-30 09:22:48 来源:Coral Malory网
图片来源@视觉中国刚刚过去的掘金卖铲一周 ,浪潮信息发布新品OGAI(Open GenAI Infra)元脑生智,大模得样意在为大模型业务提供AI算力系统环境部署、型算信息算力调度及开发管理能力的力荒浪潮软件栈
。浪潮信息作为一家以服务器为主营业务的也父杨丽企业,受到来自生成式AI带来的亲跳算力牵引潜力
,下游客户需求旺盛,海年但另一方面 ,追星在英伟达、狂人英特尔等供应商出口限制的娟岁今过影响下,人工智能芯片普遍短缺,没人做软件
,敢娶也是掘金卖铲增强市场竞争力的多一种选择 。浪潮信息高级副总裁刘军告诉钛媒体,大模得样当前阶段仍处于大模型开发阶段
,型算信息除了缺算力外,基础模型能力还没有足够高的提升 ,最终呈现出来的效果也不见得会真正能投入使用
。刘军认为 ,算力供给解决到一定程度 ,基础大模型的开发能力提升到一定程度
,就具备了商业化能力
,进而在各类场景 、应用的落地通道也就打开了。而在中国,现阶段能真正达到GPT-4的模型的还没有 ,这就意味着将应用创新能力都寄托在OpenAI上也是明显不可能,也是不现实的 。大模型也需要生产力工具据公开信息,2021年9月,浪潮信息就已经在研发大模型
,面向大模型场景解决方案,支持AI芯片
、服务器,以构建低时延的分布式系统。浪潮信息发布参数量为2457亿的中文大语言模型“源1.0”。在“源”大模型的研发过程中 ,浪潮信息的AI团队逐步建立了完整的从公开数据爬取到数据清洗 、格式转化、数据质量评估的完整流程和工具链
,并完成了5TB高质量中文数据集的清洗工作。“源”大模型的数据集和清洗经验和帮助国内不少AI团队提升了其大模型的性能表现。在这个过程中,浪潮信息遇到了很多大模型研发应用中的问题,例如公共算力调度问题、数据清洗问题、大模型分布式训练性能不佳等等 。为此
,浪潮信息团队从三个层面进行优化:一是系统全栈性,对于涉及多团队、多环节、多流程的业务,需要系统性架构和全栈解决方案;二是兼容适配性
,由于模型训练需要大量的开源工具、组件
,但存在兼容和性能方面的问题;三是性能优化的挑战,一个大的集群系统涉及的组件数以千计,怎样优化性能是问题 。举个例子,针对于提升大模型分布式训练的计算效率
,特别是在实际的AI集群环境中
,可能存在GPU之间的互联带宽受限 ,或者AI服务器之间的网络互联带宽有限的情况
,浪潮信息自2022年以来为客户将大模型训练的GPU峰值效率从30%左右提升到50% ,提升GPU利用率
。而在“源”大模型研发过程中
,针对千卡规模算力的高效调度问题
,浪潮信息通过对云原生的调度系统进行了改造来大幅加速其启动速度 ,并重点解决了RDMA网络在容器中的接入和适配优化 ,从而采取构建满足大模型需求的算力调度系统;针对训练任务的长期稳定运行问题,浪潮信息还引入了多种对集群性能的监控手段和性能数据分析方法
。客户最关心什么但实现AIGC的能力 ,除了算力资源的限制外,仍存在诸多技术难点
,包括在模型的训练、效果测评、落地场景应用方面兼具挑战性,对普通开发者和中小企业来说更是可望不可及。整体来看,OGAI(Open GenAI Infra)元脑生智软件栈由5层架构组成 ,从L0到L4分别对应于基础设施层的智算中心OS产品、系统环境层的PODsys产品
、调度平台层的AIStation产品 、模型工具层的YLink产品和多模纳管层的MModel产品。L0层智算中心OS的定位是面向智算中心等公共算力服务平台 ,面向多租户场景
,提供灵活多样的以裸金属为主的AI算力服务。L1层PODsys聚焦于AI集群部署场景 ,提供了包括基础设施环境安装、环境部署、用户管理 、系统监控和资源调度一整套工具链,旨在打造一个易用、高效 、开放、兼容的智算集群系统环境部署方案。L2层AIStation聚焦于AI开发场景
,通过云原生技术对集群系统中的计算资源、存储资源和网络资源进行统一的接入和纳管,提供了易于使用的开发环境和作业管理界面 ,并基于内置算力调度系统和训练稳定保障系统来实现易于接入
、按需分配
、弹性扩展和高效稳定的AI研发应用支撑平台 。L3层YLink聚焦于大模型的开发过程,通过集成整合浪潮信息在大模型研发过程中的工具和开源工具
,为用户提供高效
、便捷与标准化的大模型开发与优化流程。L4层MModel定位于多模型管理与服务平台
,帮助客户更好地管理和评估模型,加速模型的部署和应用。浪潮信息人工智能与高性能应用软件部AI架构师Owen ZHU还告诉钛媒体
,“现在企业面临的最大挑战是
,需要用大规模硬件的基础设施才能够训练一个类似于ChatGPT同等能力的模型,这个复杂性是固有的。”他解释,OGAI技术栈是从L0到L4层是分层解耦设计和实现的,也就是说并不用把整个OGAI技术栈提供给用户,才能够实现大模型开发 ,而是对应需要实现的层级功能进行选择 。如果用户只需要提供算力多租户的裸金属方案
,可能只需要L0层智算中心OS,不用关心最终用户会怎样进行大模型开发;如果用户需要模型开发相关工具链,可以按需选择L3层YLink提供的各类工具进行研发生产。关于发布OGAI的初衷,Owen ZHU指出,“浪潮信息做这件事情 ,是先行者
,这是由视角决定
。浪潮信息服务了全球客户
,包括国内也是最主要的AI应用客户群体
,能够第一时间感知到大模型市场在缺什么,遇到了哪些问题。”从用户的角度来看,更强的算力基础设施也会倒逼需求侧进一步升级 。“做模型的不懂算力 ,做算力的不懂模型”,这种情况长期存在,但很多算法的创新与硬件的发展是相辅相成
,两者又需要共同发展 。浪潮信息的这一做法是否切实可行,仍需市场来验证 。(本文首发钛媒体APP,作者 | 杨丽)
-
3年2夺亚冠冠军+中超8冠王为何降级?恒大能以全华班阵容冲超吗?世界唯一离婚犯法的国家,女性不准避孕,现今人口增速已赶超我国实拍雪佛兰开拓者,车长超5米,全系2.0T+9AT+48V,仅19.49万起将足球激情带来中国!西甲俱乐部传奇中国行圆满落幕虞书欣早期比基尼照片曝光!网友:她性感火辣不止眼睛大超强台风“卡努”明天进入东海,还会影响京津冀吗?CBA最新积分榜,北京升第五,福建第12,山东第15,山西7连胜终结5名CBA球员带队,13分惨败给中国台北队,主教练还在逃避,汗颜颜值说丢就丢!曾经一眼万年,今成路人大妈,这些女星你还认得谁1岁宝宝三更栽进床边水桶溺亡:空调漏水拿水桶节水CBA重典再现,只要敢越线,直接挥刀剁下刘涛黑历史被扒出,某女星公开指责:她技术很好,为上位不顾一切勇士VS雷霆述评:追梦下饭!煮熟的鸭子飞了 29次失误花式作死原创 勇士队太愚蠢!考辛斯说出真心话,保罗真的不行,不该送走普尔
上一篇:三连胜!卡子哥爆砍41+5+5,祖巴茨18+12,快船客场击败爵士啦个球2023-12-09 13:58江苏啦个球2023-12-09 13:58江苏
下一篇:卡塔尔国王大老婆,凭“旺夫脸”出圈,不裹黑袍有气场,二房更美非洲女孩巴特曼因有巨臀,一生被赤身裸体展览,死后还被做成标本
下一篇:卡塔尔国王大老婆,凭“旺夫脸”出圈,不裹黑袍有气场,二房更美非洲女孩巴特曼因有巨臀,一生被赤身裸体展览,死后还被做成标本
相关内容
- ·谁赢谁孙子!马刺活塞再度同日输球继续暗无天日42天阵亡25000人,2万亿美元打水漂,专家:这一仗打醒了全世界
- ·尤文挖角曼城右路王牌飞翼,开价2000万英镑,谨防德甲豪门截胡刘禅投降后写了3字,司马昭不敢杀他,群臣不解,司马昭:倒着读
- ·记者:字母哥不会在往年实现续约 明年他会评估球队情景
- ·港股公告掘金 | 7月交付20462台创新高 带动高端纯电市场爆发
- ·湖人灰熊新交易曝光,佩林卡梭哈报价24+4+5后卫,水拉八村成筹码
- ·63岁房主一再擅闯男租客房间 男租客称房主以前喧华的原因,是想逼他搬走
- ·港股公告掘金 | 7月交付20462台创新高 带动高端纯电市场爆发刘涛黑历史被扒出,某女星公开指责:她技术很好,为上位不顾一切
- ·男足世预赛抽签结果出炉!中国男足下下签,遭遇两大强敌官宣!国足6场世预赛具体时间敲定,全新首发强势来袭,CCTV5直播
- ·三连胜!卡子哥爆砍41+5+5,祖巴茨18+12,快船客场击败爵士啦个球2023-12-09 13:58江苏啦个球2023-12-09 13:58江苏
- ·NBA历史四大中锋,大梦和奥尼尔,谁最强?杨丽萍再惹争议!新舞蹈女舞者手摸男舞者私密部位,画面被曝光
- ·科创板仓位再创新高 公募深度掘金硬科技露腰裤不算什么!今夏流行的“露内裤”才招摇,时髦洋气回头率高
- ·慈世平:詹姆斯与湖人下赛季会很棒,队中
- ·6换3交易方案出炉!热火豪组四巨头,希罗上货架,公牛推倒重建唱功烂得像混子,《声生不息3》一群神仙里掺个关系户,真招人厌
- ·沪媒:中国女足的睁开与欧美截然差距,落伍是全方位的
- ·认真的?互换前锋!意甲豪门上演离谱操作,低价送队内球星去英超郑恺嫖娼门升级!同行4人IP露端倪,苗苗停更10天,工作室疑默认
- ·王霜哽咽:咱们不是好典型 愿望未来孩子不至于在国家队这么狼狈
最新内容
- ·会有奇迹发生吗?浙江队小组出线只剩下理论可能崔康熙面子大!3名本土强援自荐加盟山东泰山,老崔大连旧部在列
- ·台媒:江宏杰杠上福原爱,业界预估前者已经砸300万元新台币
- ·半场-孔德低射中框莱奥一条龙射门被扑 AC米兰暂0-0巴塞罗那
- ·NBA历史四大中锋,大梦和奥尼尔,谁最强?北大吴谢宇弑母案再爆惊人细节,搜出大量性爱工具,真相一再反转
- ·CBA最新积分榜,广东升第二,浙江第三,深圳第七,山东两连胜
- ·又一个唐佳丽?沈梦露落选女足世界杯:在凯尔特人独造6球!那英终于坐不住了!200万评论激起她行动,刚硬回应《罗刹海市》
- ·昆明论坛·车企自荐案例 | 东风风行:2023年风行雷霆上市传播
- ·好消息,朱婷再次入选意甲最佳阵容!联赛mvp和最佳得分手落选刘德华调侃刀郎:下次新歌找你填词免费行不行?刀郎的回复显情商
- ·近10场效率图,火箭队防守位列上游,进攻拉胯!杰伦格林难辞其咎
- ·为何09年凯尔特人没有打进总决赛,三巨头五年只有一冠算成功吗?
推荐内容
- ·NBA丨李凯尔回森林狼得心应手张召忠预言成真?掏空国库建造的2艘航母,如今彻底沦为废铁
- ·勇士队季中锦标赛轰141分,库里上演争议绝杀!雷霆球迷狂嘘裁判117秒棍砸45次!初二男生遭五人暴力殴打,其父铁棍反击活活打死
- ·哈登再出席76人28分大胜开拓者 恩比德三节35+15+7+6帽队史首人
- ·年薪1500万欧!张康阳神了!留13场12球真核,国米赢患上战绩+未来
- ·中国造!全球最大“人造太阳”项目磁体支撑产品交付
- ·末节15分,狂轰30+4+4!利拉德关键先生,布伦森空砍45分唐国强去世后,妻子留下遗书:“女儿啊!你父亲背叛了我!”
- ·德比大战多特蒙德VS拜仁:双方都会进球,可能进球多,今晚大
- ·汤普森绝杀,勇士胜国王迎来四连胜,库里创纪录连续250场投中三分“一尿成名”任素汐:上半身是平凡,下半身是贪婪,又丑又性感
- ·“新C罗”闪耀西甲 国家德比观赛派对点燃沪上球迷热情Lisa、杨颖、张嘉倪三人的处罚结果来了,细节曝光,力度很大
- ·北青:中超与近邻差距拉大 亚冠精联赛名额或受损死刑犯在行刑的最后24小时会经历什么?法院会满足最后的愿望吗?
热点内容
- ·又来一支NBA球队!森林狼安排专人现场考察杨瀚森,中国大个子很受关注54亿到账且暴瘦50斤的贾玲,再次让世界刮目相看!
- ·CBA重典再现,只要敢越线,直接挥刀剁下榜一大哥刷20万获得女主播青睐,潇洒3夜被拉黑,怒晒其床照
- ·ESPN晒图:从前的西部真的很难打,前
- ·李凯尔自动融入中国男篮
- ·论哈弗猛龙的用车感受及油耗两座侵华日军跪像不翼而飞,监控拍下男人,身上细节让人背后一凉
- ·千寻疾人称密室斗罗,无证驾驶流的开拓者,最终得证大道飞升神界古代最奇葩的昏君,让妃子躺在桌上与大臣共赏,从此诞生一个成语
- ·早春阴阳交替 防上火养生吃萝卜!
- ·夜跑雨跑水里游?骨传导耳机sanag塞那B91使用评测唐僧的紧箍咒是啥内容?翻译成中文就6个字,你听了也得头疼
- ·狂轰41分,湖人险胜快船!无缘50万奖金,你却不再是关系户35岁高校女教师撞飞女孩,全裸躺地阻拦救护车女孩因此与世长辞!
- ·原创 当鸡汤无法弥补差距,当女足走上男足老路,铿锵玫瑰该何去何从?