华为发布AI存储新品,助力释放AI新动能
飞象网讯2023年7月14日,华为发布大模型时代AI存储新品,为基础模型训练、行业模型训练、细分场景模型训练推理提供存储解决方案,助力释放AI新动能。
数据决定智能的高度,数据存储当作先锋
从互联网到移动化,从云计算到智能化,每一轮技术变革都为千行百业带来深远影响。而从通用大模型到行业大模型,AI大模型的持续迭代也将助推新一轮的科技革命。在从0到1构建AI大模型创新应用的同时,企业应该找到适配自身发展需求的数据底座,将数据存储建设作为AI建设的下一个加速点。
(资料图)
当前,企业在开发及实施大模型应用过程中,面临四大挑战:
第一,数据准备时间长,数据来源分散,归集慢,预处理百TB数据需10天左右;第二,多模态大模型以海量文本、图片为训练集,当前海量小文件的加载速度不足100MB/s,训练集加载效率低;第三,大模型参数频繁调优,训练平台不稳定,平均约2天将出现一次训练中断,需要Checkpoint机制恢复训练,故障恢复耗时超过一天;第四,大模型实施门槛高,系统搭建繁杂,资源调度难,GPU资源利用率通常不到40%。
构建数据新范式,释放AI新动能
作为数据的载体,数据存储成为AI大模型的关键基础设施。顺应AI发展趋势,针对不同行业、不同场景大模型应用,华为推出OceanStor A310深度学习数据湖存储与FusionCube A3000训/推超融合一体机,帮助解决企业开发及实施大模型应用难题。
OceanStor A310深度学习数据湖存储,面向基础/行业大模型数据湖场景,实现从数据归集、预处理到模型训练、推理应用的AI全流程海量数据管理。OceanStor A310单框5U支持400GB/s带宽以及1200万IOPS的性能,可线性扩展至4096节点,实现多协议无损互通。全局文件系统GFS实现跨地域智能数据编织,简化数据归集流程;通过近存计算实现近数据预处理,减少数据搬移,预处理效率可提升30 %。
FusionCube A3000训/推超融合一体机,面向行业大模型训练/推理场景,针对百亿级模型应用,集成OceanStor A300高性能存储节点、训/推节点、交换设备、AI平台软件与管理运维软件,为大模型伙伴提供拎包入住式的部署体验,实现一站式交付。开箱即用,2小时内即可完成部署。训/推节点与存储节点均可独立水平扩展,以匹配不同规模的模型需求。同时,FusionCube A3000通过高性能容器实现多个模型训练推理任务共享GPU,将资源利用率从40%提升到70%以上。FusionCube A3000支持两种灵活的商业模式,包括华为昇腾一站式方案以及开放计算、网络、AI平台软件的第三方伙伴一站式方案。
合作开放,推动“产学研”同频共振
本次发布会上,华为数据存储产品线总裁周跃峰博士对话华为苏黎世研究所存储首席科学家张霁,就数据安全流转、企业数据接入大模型等话题展开探讨。张霁在2020年通过“华为天才少年项目”加入华为后,扎根AI存储架构研究,发表多篇顶级论文与专利,并已在华为数据存储产品中全面落地。
目前,张霁与其团队正在瑞士苏黎世研究所与苏黎世联邦理工大学Onur Mutlu教授等顶尖科学家们开展研究与合作。张霁是华为众多新生代技术青年的代表,还有更多的华为员工在遍布全球的研究所开展前沿研究,一起挑战难题、创造价值、推动科技发展。
截至目前,华为数据存储在全球拥有12个研发中心、4000多名研发人员、3000多项专利授权,并且与超过25所中国高校、30所海外高校建立合作关系,并成立8个联合实验室。华为自2019年起设置奥林帕斯奖,以激励全球科研工作者,突破存储领域关键技术难题。到2023年,已有来自于清华大学舒继武教授、华中科技大学冯丹教授、苏黎世联邦理工大学Onur Mutlu教授等来自全球顶尖高校与科研机构的专家获奖,他们在存储创新架构、创新算法等课题上取得了技术性突破,加速了科研成果产业化,实现产学研合作共赢。
在本次发布会上,中国科学院自动化研究所紫东大模型中心、武汉人工智能研究院的专家及科大讯飞、智谱AI等企业相关负责人分别就AI大模型的应用实践以及基于华为AI存储的联合创新进行探讨,并对未来同华为在数据存储领域的合作进行展望。
标签:
您可能也感兴趣:
为您推荐
企业如何做软文营销? 软文营销的形式有哪些?
艾诗摩尔射频健发梳:到底谁在收割"智商税"
美联储又降息 全球货币政策进入新一轮“降息周期”?
排行
精彩推送
- 华为发布AI存储新品,助力释放AI新动能
- 在争夺南安普顿中场特鲁姆普的比赛中,阿森纳有一件关键的事...
- 完成“自我升级”,飞书如何为海底捞提供全方位数字化方案?
- 每日鲜语推出4.0娟姗鲜奶,树立高端鲜奶新标杆,美团买菜独家首发
- 我国首个高海拔光氢储项目投产发电
- 贵州省财政厅原党组成员、副厅长、一级巡视员王瑰接受纪律审...
- 伊利携手英国剑桥大学制造业研究院、荷兰StartLife举办开放创...
- 祁连镇:“小民宿”带动乡村“大经济”
- 方大炭素板块召开二季度降本增效经验交流研讨会
- 金昌河西750千伏变电站第三台主变扩建工程开工
- 太平人寿立足“小窗口”服务“大民生”
- 宗国明到方大炭素考察调研
- 三峡旅游上半年预盈5500万同比扭亏 行业回暖核心产品游客接...
- 广汽丰田迈进百万俱乐部,威飒能否成为下一个爆款?
- 中超联赛展开第16轮争夺 山东泰山主场战胜上海申花
- 国家金融监管总局发布风险提示 防范冒用金融监管名义实施诈骗
- 时评:淄博烧烤与其说“凉”,不如说是回归常态
- 交通运输部:截至6月全国318家网约车平台公司取得经营许可 ...
- 国家税务总局:今年上半年税务部门助困难企业实现购销超100亿元
- 明珠公司与江苏为恒智能科技有限公司交流研讨
- 兰州税务:服务兰洽会 税惠千万家
- 华亭市博物馆组织学子开展“一起去探险”矿区体验研学活动
- 国网兰州供电公司圆满完成兰洽会保电任务
- 甘肃建投安装公司三家党支部联合开展企业管理主题座谈会
- 遛狗内急,把哈士奇留在垃圾桶里,回来看二哈被围观!
- 2023年上半年我国造船三大指标全面增长 国际市场份额继续领先
- 国家发改委:支持平台企业在引领发展、创造就业和国际竞争中...
- 无创血糖监测技术取得突破
- 累计成交额超109亿 全国碳市场运行两年总体平稳
- 美联储还要继续加息?
- 兰州高新区:壮大支柱产业 赋能经济发展
- 兰州高新区“百千万”创业引领工程新锐创客创业能力提升培训...
- 国网庆阳供电公司:严明工作纪律 促进作风转变
- 刚刚,南昌市2023年城区第二批次普通高中统招投档分数线公布!
- 上半年汽车工业多项经济指标创新高
- 31省份6月CPI出炉:17地物价降了!有你家乡吗
- 业绩预增遭遇终止定增 亿晶光电喜忧参半
- 股市早8点丨负面数据不应绑架股市
- 统一电力市场体系建设取得重要进展
- 制冷更好耗电更少 这种新型空调受欢迎
- Ferragamo 2023秋冬系列再现好莱坞美学 adidas Originals...
- 配送服务选择权应交给消费者
- 破解新能源汽车充电难关
- 写字楼市场谋求多元化发展
- 有效缓解房企融资压力 房企将获持续稳定金融支持
- 高价雪糕还有生命力吗
- 上海电力预计上半年同比扭亏为盈
- 推进港口资源整合 水运服务能力持续提升
- 汽车轮胎气压多少合适(汽车轮胎气压多少是正常?)
- 今日全球央行最新动态:美债回落美联储或再次加息 欧洲央行...
- 上半年中国社会融资规模增量比上年同期多4754亿元
- (高质量发展调研行)北京打造地下东六环 “缝合”城市空间
- 中国6月末M2同比增长11.3% 信贷投放回升
- 广州力争3年新增境内外上市公司75家
- 北京昌平区委书记甘靖中:抓好“两谷一园”建设 打造国际一...
- 中国人民财产保险股份有限公司海南省分公司原党委书记、总经...
- 民航华东地区2023年上半年共完成旅客吞吐量1.64亿人次
- 中国碳市场整体运行平稳有序 交易价格稳中有升
- 瑞再报告:预计今年新兴市场经济增速为发达市场的3.3倍
- 电气化助力新疆特色产业发展
- 丽江至曼谷国际航线复航
- “卖一只亏一只”高温冲击下散户想“跑路”?规模黄鸡企业继...
- 乡约福建:客家祖地水稻制种插秧忙
- 二季度中国汽车产业正常区间运行 未来趋势向好
- “超长待机”高温天气带火中原“冷经济”
- 中国首次实现二氧化碳长距离密相管输
- 北京昌平科技服务业晋升为支柱产业之一 占GDP比重首超10%
- 甘肃新东方高级技工学校着眼未来砥砺前行
- 因向不符合条件的借款人发放贷款、信贷资金被挪用,农业银行...
- 越南河内—中国南宁国际直达客运线路恢复通车
- 乡约福建:上杭早稻迎丰收
- 山西上半年外送电量超900亿千瓦时 同比增近两成
- 数字人民币上线新功能 无电支付范围扩大
- 多方代表齐聚宁夏 按下城乡供水一体化“加速键”
- 加大知识产权保护 打造更优营商环境
- 轿车径直撞进人群 轿车被打砸后径直冲向人群 基本情况讲解
- 我国对RCEP其他成员国进出口稳定增长
- 江苏铁路2023上半年发送旅客1.28亿人次 已超去年全年
- 经济回升将为财政收入增长提供支撑
- 重庆做好迎峰度夏电力保供 公用发电机组装机容量达2906万千瓦
- 上海多方合力推进高校毕业生就业
- 央行发布2023年上半年金融统计数据报告
- 《2022中国航运发展报告》发布
- 车市上半年:产销增长近一成,出口持续“狂飙”
- 中汽协:6月汽车销量同比增长4.8% 新能源汽车销量增长35.2%
- 央行:上半年人民币贷款增加15.73万亿元
- 酒钢集团多举措提高资源利用效率与效益
- 邮储银行定西市分行赋能“专精特新”企业高质量发展
- 埃索凯:突击置出子公司“增厚”上市砝码 收购标的价格上演...
- 视频 | 高台税务:税收法治风正举
- 邮储银行张掖市分行:助农发展“贷”去幸福
- 宁波市残联参观考察甘肃省康复中心新区院区
- 《温室气体自愿减排交易管理办法(试行)》征求意见 推动实...
- 张兰败诉,4亿元没了!因她做了这事
- 车市上半年:产销增长近一成,出口持续“狂飙”
- 浙江发布“亚运碳中和—减污降碳协同”数字化管理平台
- “探索医药创新 助力高质量发展”研讨会在山西芮城举行
- 邀请郭麒麟帮用户省钱 去哪儿“比价”策略进入下半场
- 环保咨询服务公司经营范围(咨询服务公司经营范围)
- 瓜州梁湖乡:健全基层治理体系赋能乡村振兴