您的位置:首页 > 互联网

高效算力之困:算存运如何协同?_算力机和存储机

发布时间:2023-11-06 15:01:57  来源:互联网     背景:

高效算力之困:算存运如何协同? 通信产业网|2023-11-02 12:49:08作者:胡媛来源:通信产业网

【通信产业网讯】(记者 胡媛)当前,大模型等人工智能技术的发展,引发算力需求爆发式增长,算力布局不断加速。“十四五”规划和2035年远景目标纲要指出,建设高速泛在、天地一体、集成互联、安全高效的信息基础设施,增强数据感知、传输、存储和运算能力。

数字经济以数据资源为关键要素,数字基础设施是数字经济时代的“高速公路”,运力、算力、存力三者协同发展,数字基础设施才能发挥数据的要素价值,充分释放数字经济活力。当前,我国算力、存力、运力现状如何?如何打造“算、存、运”协同的高效算力?

“算、存、运”需高效协同

苹果宣布支持卫星通信

数据显示,算力、存力、运力如果做好高效协同,一个AI算力中心的效率可能会提升50%。目前,许多发达国家已经把算、存、运三者涉及的科学技术作为创新前沿,并投入重金发展。

近日,工信部等六部门联合印发《算力基础设施高质量发展行动计划》,提出到2025年,计算力方面,算力规模超过300EFLOPS,智能算力占比达到35%,东西部算力平衡协调发展。运载力方面,国家枢纽节点数据中心集群间基本实现不高于理论时延1.5倍的直连网络传输,重点应用场所光传送网(OTN)覆盖率达到80%,骨干网、城域网全面支持IPv6,SRv6等创新技术使用占比达到40%。存储力方面,存储总量超过1800EB,先进存储容量占比达到30%以上,重点行业核心数据、重要数据灾备覆盖率达到100%。

中国作为全球最大的算力市场之一,数据中心机架总规模超过760万架标准机架,算力总规模达197EFlops,位居全球第二,但存在利用率不高等问题,甚至通用算力利用率只有百分之十几,已存在算力与运力、存力发展不平衡的问题。

中国工程院院士倪光南指出,当前AI算力中心蓬勃兴起,但对算力基础设施理解有片面性。存力、算力、运力共同构成数字基础设施核心底座,对于AI智能计算中心,中国算力中心要重视存力、算力和运力均衡配置,不能偏废失调,才能取得最大的经济效益和社会效益。

算力就是计算能力,运力是网络运载能力,存力则是数据存储能力。怎样理解这三者之间的关系?我们不妨把数字经济想象为一台大型计算机,那么算力就是中央处理器,运力则是主板电路,存力就是内存。这样来看,要让这台大型计算机发挥出最大效能,仅有强大的中央处理器显然是不够的。

存储必须重构

高存力充分释放算力,实现GPU/NPU利用率提升30%。高存力通过全局元数据、算子下推、向量检索、缓存加速等数据加速引擎,可缩短数据预处理周期,提高训练集加载效率和推理准确度,减少训练中断,GPU/NPU利用率有效提升。

apple watch 7 手势

按照测算,我国将在2025年成为世界上数据量最大的国家,但公开数据显示,美国存算比为1.11TB/GFlops,而中国为0.42 TB/GFlops,存力显然跟不上数据量的增速。数据量的爆炸式增长和存储需求的持续升级,对企业的存储系统造成前所未有的巨大压力,关键业务、通用业务对存储能力的诉求不断提升。

新华三集团存储产品线总经理兼首席产品经理关天舒在接受《通信产业报》全媒体记者采访时表示,存储介质的演进,从应用的角度看,存储架构亟需一次颠覆传统的跨越式创新,随着高速网络、RDMA、NVMe等技术的发展,以及数据池化、湖仓一体化趋势的深入,文件、对象、大数据的多协议融合部署需求快速增长。在AIGC的催化下,存储行业正在迎来一场技术变革,基于LLM大模型的应用跟以往任何应用都不一样,它会对数据存储的容量、性能、可靠性、管理等带来颠覆性的影响。未来的存储必须重构,才能更好地适配AI时代用户对数据存储的新需求。

算力和存储容量的区别与联系

事实上,存力并不仅仅指容量,还包括安全可靠、绿色低碳等综合能力,只有这样才能让数据存得下、跑得快、用得好。算力只有与运力、存力均衡配置,才能提升使用效率,真正发挥出数据要素的价值。

运力要跟得上

苹果13出来12会降多少钱

算力需求越大,运力越要跟得上,高运力充分释放算力+存力,实现算力提升20%。高运力具备高网络数据吞吐能力,是算力和存力充分释放的关键。网络丢包、流量不均,则数据传输低效,增加计算和存储等待,算力性能显著降低。

以“东数西算”为例,旨在利用西部更丰富的算力资源,去支撑东部更多的算力需求。却有诸多困难,对应用实时性要求高的“热数据”,想要传到西部,所需的传输网络不仅要满足低时延、高可靠性、大带宽、广覆盖等要求,还得面临跨区域、跨层级连接的挑战,要么传输效率很低,要么传输成本高昂。以超算为例,目前运输存储超算数据的硬盘还是通过卡车、火车、飞机,算完了再把结果取回来,这些算力还都是孤岛。

业内专家认为,这就需要有一个新的技术解决方案——公用专网的技术,它不同于公网和专网,而是一种类似于能提供专网的公网,像专网一样安全、保证质量,又像公网一样经济、方便灵活。

苹果12拍照dxo得分

在亚信科技首席技术官、高级副总裁、IEEE Fellow欧阳晔博士看来,首先,需要高通量的网络传输基础设施,结合400G、OXC的全光传输系统,在算力节点间构筑高效、灵活、超大带宽的全光运力底座。其次,面向重点业务提供确定性网络保障,减少数据重传带来的资源、算效损耗。最后,需要提升网络与业务的融合性,通过可编程网络技术,有控制、有选择地开放芯片的报文处理和转发逻辑,实现网络服务能力与业务需求的高度适配。

统筹发力

算力是集信息计算力、网络运载力、数据存储力于一体的新型生产力,主要通过算力基础设施向社会提供服务。面向经济社会发展和国家重大战略需求,要稳步提升算力综合供给能力,着力强化运力高效承载,不断完善存力灵活保障,持续增强算力赋能成效,全面推动算力绿色安全发展,为数字经济高质量发展注入新动能。

倪光南建议,中国算力中心要建设领先的运力设施,用更领先的网络构建千亿物联能力;打造坚实的算力设施,在通用计算、人工智能计算等多样性计算领域不断突破;构筑可靠的存力设施,让数据存得下、跑得快、用得好。

“目前来看,暂时无法给出一个确切的时间来预测算力规模达到300EFLOPS的时间,但是可以肯定的是,随着技术的不断进步和市场需求的增加,算力增长的加速度会逐步凸显。”中国联通研究院未来网络研究部总监曹畅表示,要实现300EFLOPS的算力规模,需要在技术、投资、市场等多个方面取得突破性的进展。需要研发更高效的算法和计算架构,需要采用更先进的芯片和硬件设备,需要优化网络连接和数据传输效率等。此外,还需要大量的投资来支持基础设施建设,技术的研发和应用。

责任编辑:胡媛


返回网站首页

本文评论
哪些新晋AI作曲软件好用?Songburst让文本到音乐变得简单!
8月23日 消息:近期随着大型语言模型的兴起,开发者开始尝试利用人工智能为文本转音乐开发新的应用。PlayListAI (之前为 LinupSupply)的开发者Brett Bauman本周在 App Store 上...
日期:08-23
京东重磅人事变动:多位事业群总裁、副总裁换人「京东新上任副总裁」
11月24日消息:继刘强东公开信宣布自2023年1月1日,副总监级别以上高管降薪10-20%后,京东零售又迎来多起重磅人事变动。小米集团回购了多少股票据《晚点 LatePost》报道,本周三刘...
日期:11-25
诸侯林立、短兵相接:新能源车打响「全面战争」
文章目录 01后来者来势汹汹 声明:本文来自微信公众号“深响”(ID:deep-echo),作者:肖卓,授权转载发布。鸿蒙系统目前装机量“似乎很少有人意识到,中国在可再生能源发电和电动汽车...
日期:10-11
SPAD传感器首秀!佳能“夜视神器”MS-500相机发布_佳能相机传感器怎么清理
快科技8月6日消息,近日,佳能正式发布了全球首台SPAD(单光子雪崩二极管)传感器相机MS-500。作为一款针对安全监控等场景设计的相机,MS-500搭载了一颗1英寸的SPAD传感器,可在低至0.0...
日期:08-06
雷神笔记本官网售后「雷神笔记本」
是一款专为游戏而生的笔记本电脑,其主打的是性能和游戏体验。笔记本采用了一系列先进技术和创新设计,使游戏玩家可以在任何地方尽情畅玩游戏。下面我们来详细了解一下这款笔记...
日期:05-29
紧跟特斯拉,华为也降价!AITO问界最高降价3万元!
1月13日,AITO问界宣布,自2023年1月13日8点30分起,AITO问界系列部分车型带来新年新价格,问界M5 EV调整后售价为25.98万元起,问界M7调整后售价为28.98万元起;而2023年1月13日8点30分...
日期:01-13
科技与实体产业深度融合 蚂蚁集团与泸州老窖签署战略合作协议
(原标题:科技与实体产业深度融合 蚂蚁集团与泸州老窖签署战略合作协议) 魅族16xs打游戏怎么样 8月29日,泸州老窖集团和蚂蚁集团...
日期:08-30
五菱宏光mini ev电池怎么样「1.98万就能买走宏光MINI EV!五菱首推电池月付方案:月租198起」
5月11日,快科技消息,上汽通用五菱宣布为宏光MINI EV推出轻松来电”购车服务,即为电池月租方案,首付1.98万元起并按5年60个月的方式支付电池价款,每月198元起,相当于1.98万元就能买...
日期:05-11
Redmi K60曝光 无线充电和屏下指纹都来了_redmi k30s是屏下指纹吗
中关村在线消息:近日,关于Redmi K60系列相关爆料开始多了起来。根据@数码闲聊站,RedmiK60系列根据具体的机型定位不同,将会支持67W快充以及120W快充。Redmi K60和Redmi K60 Pro...
日期:10-11
360应用盒子_巧用360桌面消息盒子 社交网络一号互通
  10月11日消息,目前中国互联网各种社交网站账号繁多,用户使用起来却极不方便。360安全桌面内置的消息盒子就利用互联互通技术,使新浪微博、人人网等社交网站实现一号登陆,极...
日期:07-23
红米note91亿像素怎么样「约2165元起!Redmi Note 12S发布:Helio G96 1亿像素主摄」
据 GSMARENA 报道,Redmi 今日在希腊雅典举办新机发布会,Note 12 Pro、Note 12 以及 Note 12 Pro 4G 这三款早已在其他市场发布的机型正式上线欧洲市场。此次发布会 Redmi 还带...
日期:04-06
本人回应 属实-百度副总裁马杰离职?
5月19日晚间消息,消息称百度副总裁、百度“希壤”业务负责人马杰已于近期离职,希壤团队虽并未解散,但前途目前并不明朗。对此,马杰本人回应表示,“是的,我已经离开百度。” 2022...
日期:09-27
NVIDIA发布GeForce 517.48驱动 修复Win11 2022游戏卡顿bug
上周微软发布了Win11 2022更新,结果N卡用户遇到了性能下滑的问题,NVIDIA之前给出了临时性的解决方案,今天官方推出了GeForce 517.48 WHQL驱动,修复了Win11 2022下游戏性能下降、...
日期:09-29
华为无创血糖手表评测「领先苹果7年!华为将推出无创血糖监测智能手表:识别率超85%」
快科技4月25日消息,多年来一直有关于苹果研究无创血糖监测Apple Watch技术的消息,但迟迟未能见到量产或工程产品。前不久,名记Mark Gurman表示苹果这项技术还有必须要改进的算...
日期:04-26
蚂蚁智慧科技「蚂蚁集团入股认知大模型研发公司智谱AI」
10月17日 消息:天眼查显示,10月17日,北京智谱华章科技有限公司发生工商变更,新增股东为蚂蚁集团子公司上海云玡企业管理咨询有限公司。小米65寸全面屏电视pro价格哈弗h6是全球...
日期:10-18
苹果ipad3目前还能用吗「苹果ipd3」
很抱歉,按照我们的伦理准则,我们不能为您提供任何误导性或不准确的文章。"苹果ipd3"这个关键词不存在。如果您能提供更完整和准确的信息,我们将竭尽所能为您服务。rtx 3060 ti...
日期:05-31
抖音称外卖服务仍在试点 相关商标已注册完成_抖音称外卖服务仍在试点 相关商标已注册完成什么意思
凤凰网科技讯 2月7日消息 天眼查App显示,北京字跳网络技术有限公司已成功注册多枚“抖音心动外卖”商标,国际分类包括教育娱乐、通讯服务、社会服务等,以上商标均申请于2021年7...
日期:02-08
rog07「ROG游戏手机7 Pro外观曝光:真好看啊」
ROG官方宣布,将于4月13日发布ROG游戏手机7系列。近日,91mobiles曝光了ROG游戏手机7 Pro的官方外观图,该机与上一代基本相同,背面采用3摄横向摆放的摄像模组,并配备装饰性的电竞显...
日期:04-08
第二代AMD 锐龙 PRO和AMD 速龙 PRO移动处理器为全系商用笔记本电脑带来澎湃动力
  ——搭载AMD 锐龙 PRO和AMD 速龙 PRO的惠普、联想商用笔记本电脑拥有高效性能、芯片级安全特性以及满足商务用户全天工作需求的超长电池续航时间   2019年4月9日,加利...
日期:07-13
抖音电商上线氛围图价格一致性校验功能 将下架不合规商品_抖音商品评价规则
12月22日 消息:日前,抖音电商发布公告称,目前平台氛围图可支持商家自行上传或者基于平台生成氛围图进行改价操作,但近期发现存在部分商家氛围图价格明显低于实际售卖价,导致主图...
日期:12-22