新闻资讯
关于我们 产品中心 解决方案 新闻资讯 客户案例 知识专区 售后服务 联系我们
新闻资讯:华为发布大模型时代AI存储新品
2023-7-28    点击关注我们

飞象网讯  今日,华为发布大模型时代AI存储新品,为基础模型训练、行业模型训练,细分场景模型训练推理提供存储最优解,释放AI新动能。

企业在开发及实施大模型应用过程中,面临四大挑战:

首先,数据准备时间长,数据来源分散,归集慢,预处理百TB数据需10天左右;其次,多模态大模型以海量文本、图片为训练集,当前海量小文件的加载速度不足100MB/s,训练集加载效率低;第三,大模型参数频繁调优,训练平台不稳定,平均约2天出现一次训练中断,需要Checkpoint机制恢复训练,故障恢复耗时超过一天;最后,大模型实施门槛高,系统搭建繁杂,资源调度难,GPU资源利用率通常不到40%。

华为顺应大模型时代AI发展趋势,针对不同行业、不同场景大模型应用,推出OceanStor A310深度学习数据湖存储与FusionCube A3000训/推超融合一体机。

 

华为数据存储产品线总裁 周跃峰

OceanStor A310深度学习数据湖存储,面向基础/行业大模型数据湖场景,实现从数据归集、预处理到模型训练、推理应用的AI全流程海量数据管理。OceanStor A310单框5U支持业界最高的400GB/s带宽以及1200万IOPS的最高性能,可线性扩展至4096节点,实现多协议无损互通。全局文件系统GFS实现跨地域智能数据编织,简化数据归集流程;通过近存计算实现近数据预处理,减少数据搬移,预处理效率提升30 %。

FusionCube A3000训/推超融合一体机,面向行业大模型训练/推理场景,针对百亿级模型应用,集成OceanStor A300高性能存储节点、训/推节点、交换设备、AI平台软件与管理运维软件,为大模型伙伴提供拎包入住式的部署体验,实现一站式交付。开箱即用,2小时内即可完成部署。训/推节点与存储节点均可独立水平扩展,以匹配不同规模的模型需求。同时FusionCube A3000通过高性能容器实现多个模型训练推理任务共享GPU,将资源利用率从40%提升到70%以上。FusionCube A3000支持两种灵活的商业模式,包括华为昇腾一站式方案,以及开放计算、网络、AI平台软件的第三方伙伴一站式方案。

华为数据存储产品线总裁周跃峰表示:“大模型时代,数据决定AI智能的高度。作为数据的载体,数据存储成为AI大模型的关键基础设施。华为数据存储未来将持续创新,面向AI大模型时代提供多样化的方案与产品,携手伙伴共同推进AI赋能千行百业。”

编 辑:章芳
阅读:578
制造业人工智能的场景应用落地现状、难点和建议
制造业人工智能的场景应用落地现状、难点和建议
华为空出的高端市场,被苹果吃了
华为空出的高端市场,被苹果吃了
人工智能成两会热词,发展速度“让硅谷震惊”,中国科技热潮刷新外媒印象
人工智能成两会热词,发展速度“让硅谷震惊”,中国科技热潮刷新外媒印象
AI大模型加速金融业落地 提质增效成果几何?
AI大模型加速金融业落地 提质增效成果几何?
从“百模”到“千体” 人工智能加快商用规模进程
从“百模”到“千体” 人工智能加快商用规模进程
七部门发布《终端设备直连卫星服务管理规定》
七部门发布《终端设备直连卫星服务管理规定》
中国北斗白皮书发布,攻克星间链路等多项核心关键技术
中国北斗白皮书发布,攻克星间链路等多项核心关键技术
疫情令需求生变,蓝牙设备出货量持续增长自有诀窍
疫情令需求生变,蓝牙设备出货量持续增长自有诀窍
被做空的中通,会不会成为下一个瑞幸?
被做空的中通,会不会成为下一个瑞幸?
让5G“轻”下来,政策加持RedCap一触即发?
让5G“轻”下来,政策加持RedCap一触即发?
上一篇:数字世界未来十年 不止大模型
下一篇:解读ARM帝国:芯片最上游的霸权
关于我们 产品中心 解决方案 新闻资讯 客户案例 知识专区 售后服务 联系我们
我们的联系方式
100元上门4个小时服务电话-初中生100元3小时二维码联系方式是同城约茶联系方式,人到付款,找服务,不限次数,附近约茶联系方式,怎么,如何,00元3小时上门服务电话,上门服务电话号码、叫小妹服务,100/200/300/400/500/6789、本地同城附近服务,品茶,喝茶,过夜,酒店宾馆,qq,微信,会所,同城包小妹
点击拨打 100元上门4个小时服务电 咨询我们
长按指纹即可关注我们
微网站由云港互联设计开发  点击进入
【版权声明】本站部分内容由互联网用户自行发布,著作权或版权归原作者所有。如果侵犯到您的权益请发邮件致info@ynjwz.com,我们会第一时间进行删除并表示歉意。