文| 舒帆 中电标协数据存储专业委员会
NO.1 国家层面密集发布法规草案和指标标准规范,对数据存储产业高质量快速发展提出更高要求
事件回顾:
2024年1月5日,国家数据局联合下发《“数据要素×”三年行动计划(2024-2026年)》,充分发挥数据要素乘数效应,赋能经济社会发展。
2024年5月8日,国家发展改革委办公厅、国家数据局综合司印发《数字经济2024年工作要点》。
2024年5月21日,国家数据局印发《数字中国建设2024年工作要点清单》。
2024年5月24日,国家数据局联合多部门在第七届数字中国建设峰会上发布首批20个“数据要素×”典型案例。
2024年9月-12月,国家发改委相继发布《国家数据标准体系建设指南》、《关于促进数据产业高质量发展的指导意见》、《国家数据基础设施建设指引》。
2024年11月23日,国家数据局印发《可信数据空间发展行动计划(2024—2028年)》,这是国家层面首次针对可信数据空间这一新型数据基础设施进行前瞻性的系统布局。到2028年,我国将建成100个以上可信数据空间,形成一批数据空间解决方案和最佳实践。
2024年12月25日,国家数据局、中央网信办、工信部、公安部、国务院国资委印发《国家数据局等部门关于促进企业数据资源开发利用的意见》,提出发挥数据价值、健全权益机制、营造发展环境。
数据存储专委会观点:
随着国家数据资源体系逐步完善,数字基础设施建设和数据要素市场发展步入快车道。
NO.2 存力概念已成为主流共识,各地纷纷建设先进存力中心推进创新
事件回顾:
2024年3月,在全国两会上,冯丹代表提出《关于发展AI数据存力,助力AI算力提升和应用的建议》等提案,进一步就建设和完善AI数据存力产业标准,规范和牵引人工智能产业健康发展以及建立国家层面的全局数据存储管理标准等建言献策。
2024年9月20日,华为联合罗兰贝格发布《先进数据存力白皮书》,在两年前的 “数据存力”基础上进一步提出先进数据存力的新定位、新特性、新指标,加速智能经济时代。从价值和影响力看,1GB先进数据存力投入预计能带来60元GDP的增长。
2024年10月,中国算力大会发布《中国存力发展报告(2024年)》,我国在数据存力规模、存储质量等多维度呈现出快速发展态势,截止至2023年底,我国存力规模达到1200EB,先进存储容量占比达到25%。同时,大会还公布了《存力中心典型案例集2024年》,在全国范围内挑选了7个存力中心建设典型案例,为我国未来存力中心建设提供参考。
2024年10月30日,在第二届华彩杯总决赛上,中国移动万卡智算中心先进存储技术应用创新项目、贵安新进存力中心暨数据要素汇聚中心建设项目等获得存力赛道一等奖。
2024年11月30日,在CCF中国存储大会上,曙光存储联合IDC发布《构建面向智能化时代的先进存力中心》白皮书,号召构建面向未来的先进存力中心,共建开源的AI存算产业生态。
2024年,中国移动联合华为、曙光等主流存储厂商,共同打造面向“东数西算”的一体化存力基础设施,实现全局数据的可视、可管、可用,成为高效数据流通基础设施。广域网存力智能运营平台已在业务系统广泛落地,取得很多成功实践。在江苏移动BOSS系统,海量话单数据全局可视、热冷分级和智能跨域西存的管理,单位存储TCO降低40%以上,年投资节约144w。山东安防移动视频业务,面向多省市数据中心,AI应用跨地域,免开发,均可实现2.44Mb/s的访问速率,切实做到业务无感访问,每百PB存储电费节省560万/年。
数据存储专委会观点:
数据存储产业正从“存力”迈向“先进数据存力”,先进数据存力是智能化时代的新质生产力。
NO.3 AI大模型头部厂商在构建超大规模训练集群的同时,也在持续加大专业存储投入力度
事件回顾:
2024年3月12日,Meta公布了2个24000卡GPU集群的详细设计方案。存储方案由存储节点和元数据节点组成。存储节点为自研FUSE文件系统 7500台存储服务器组成的”Tectonic”分布式存储,元数据节点为Hammerspace并行文件系统 600台存储服务器组成,存储服务器基于YV3 Sierra Point OCP平台,采用大容量E1.S SSD盘。
2024年10月25日,据TrendForce报道,特斯拉已于SK海力士接洽,商讨高达7.25亿美元的企业级SSD订单,并希望获得大规模长期供应,用于Dojo超级计算机自动驾驶训练。
2024年11月7日,VAST Data宣布其存储系统在xAI Colossus超级计算机的第一阶段部署,提供数据处理和模型训练支持。VAST Data提供存储软件,Supermicro提供服务器硬件。
2024年11月18日,DDN宣布其存储系统在xAI Colossus超级计算机的第一阶段和第二阶段部署,GPU规模达到20万卡。DDN为其提供EXAScaler和Infinia解决方案。其中EXAScaler为全闪/混闪硬件 Lustre并行文件系统,而Infinia为DDN的PB级全闪对象存储。
2024年12月3日,Pure Storage在2025财年第三季度财报中披露,已与一家全球TOP4的互联网企业达成合作(据推测为Meta),为该企业提供DirectFlash技术授权、软件和支持服务(不包含硬件),帮助该企业构建超过数十EB的存储系统,该笔交易预计将从2027财年开始给Pure带来收入。
数据存储专委会观点:
外置专业存储实现“以存强算、以存代算”,有效提升AI集群可用度和推理效率。
NO.4 数据库存算分离架构不断深化,金融领域多方协作,率先推进应用与实践
事件回顾:
2023年10月,在金融数据库技术大会上,金融信息化研究所联合华为数据存储、阿里云、奥星贝斯、达梦、南大通用、天翼云、万里数据库、云和恩墨、优炫软件和崖山科技共同启动金融多主数据库应用行动计划,并正式成立金融多主数据库应用推进工作组,代表我国金融数据库多主架构升级工作达成产业合作共识。
2024年4月15日,数据库存算分离应用实践研讨会在重庆成功召开,由金融信息化研究所联合华为数据存储,分布式数据库厂商腾讯云、奥星贝斯等,共同发布《TDSQL存算分离最佳实践》、《OceanBase存算分离最佳实践》和《GaussDB存算分离最佳实践》,为银行客户改造分布式数据库提供最优的建设指导。
2024年8月3日,MySQL中国用户组社区会议上,泽拓昆仑Klustron发布首个基于Cantain和MariaDB的伙伴版本。
2024年8月8日,华为数据存储用户精英论坛上,MySQL和MariaDB基金会创始人Monty表示存储与开源数据库应该深度协同,Cantian引擎基于存算分离架构,有望助力MariaDB开拓更前沿的场景,意味着存算分离技术在推动国际化发展方面取得重要进展。
2024年8月,海量数据宣布和华为数据存储联合打造基于存算分离和共享存储架构的数据库高可用创新方案。
2024年9月,国内三大知名数据库厂商(亚信安慧、科蓝软件、云和恩墨)发布基于闪存存储的数据库存算分离解决方案AntDB、SUNDB和MogDB,打破了传统架构的瓶颈,为企业数据库改造注入新的活力。
2024年10月16日,在金融数据技术大会上,中国人民银行、工商银行、华夏银行、奥新贝斯、达梦、金篆信科、海量数据、虚谷伟业、华为等金融机构和科技企业联合发布《金融数据库存算分离架构选型白皮书》和《数据库存算分离最佳实践与FAQ》。其中《金融数据库存算分离架构选型白皮书》涵盖了6个金融业存算分离架构实践案例,包括工行、农行、平安银行、上海银行、微众银行及人保寿险的转型与探索。
2024年11月,光大银行荣获中国人民银行“2023金融科技发展奖”。该获奖项目推出国内金融行业首例高端多读多写数据库一体机,并成功应用于光大银行核心业务系统,有力推动了银行业的转型改造。
数据存储专委会观点:
存算分离架构正在引领数据库技术革新。从以金融为代表的创新实践与合作实践来看,存算分离必将成为更加广泛的产业共识。
NO.5 MLPerf™发布Storage AI基准测试权威榜单,中国厂商赫然在目
事件回顾:
2024年9月26日,全球权威AI基准测试MLPerf™发布了Storage V1.0 AI基准测试结果,引发了业内的广泛关注。本次存储性能测试共有13家业界主流厂商参与,华为OceanStor A800全新AI存储以总性能、每节点性能、每U性能全球第一夺得桂冠。浪潮存储荣获MLPerf™ AI存储基准测试五项性能全球第一,焱融存储在3D-Unet、ResNet50 和 CosmoFlow 三种 AI 深度学习模型的评估中均展现了优异的性能和效率。MLPerf存储基准性能测试,旨在以架构中立、具有代表性和可重复的方式衡量AI工作负载的存储系统性能。、
数据存储专委会观点:
MLPerf Storage成为AI时代衡量存储先进性的新标准和新量纲,AI时代选存储,MLPerf测试结果将提供权威参考依据。
NO.6 数据保护业务再度备受青睐,针对数据保护厂商的投资并购集中爆发
事件回顾:
2024年2月8日,Cohesity宣布以30亿美元的价格收购Veritas数据保护业务,合并后的公司收入超过17亿美元(截止2024年7月公开财务数据),保护全球数百EB的数据,一跃成为全球最大的数据保护软件提供商;
2024年12月10日,Cohesity宣布该笔交易已完成。今年4月,IBM和NVIDIA联手对Cohesity战略投资1.5亿美金。此前,HPE、CISCO、亚马逊、Google和高通均对该公司投资。
2024年12月4日,Veeam宣布获得20亿美元的新一轮投资,此次交易由TPG Capital牵头,淡马锡、Neuberger Berman Capital Solutions 和其他几家头部投资者也参与其中,公司估值达到150亿美元。Veeam 2023年收入15亿美元, 市场份额为 15.1%,全球第二。Veeam正加快为上市做准备。
2024年4月24日,Rubrik宣布在纳斯达克上市,发行价为每股32美元,首日上涨16%,目前其市值已接近130亿美金。2024年12月5日,Rubrik发布了2025财年第三季度财报,收入2.36亿美金,同比增长55%,全年收入预计8.6亿美金左右;Rubrik预计在2025年收入超过10亿美金。微软曾于2021年对该公司进行了投资。
数据存储专委会观点:
数据的重要性不断提升,数据隐私与安全挑战日益严峻,数据安全迎来全球投资与产业布局的新爆发点。
NO.7 备份软件开源模式兴起,备份产业新的竞合模式开启
事件回顾:
2024年9月,open-eBackup备份软件项目正式开源,共享备份软件技术。备份软件聚焦上层应用的兼容性能力,为数据库、虚拟化等主流备份场景提供备份应用服务,备份存储重点攻克如副本压缩技术、防勒索恢复技术等难题,目标要实现以"存”强"备”,保障数据安全。相关代码已在openEuler社区正式上线运营,开源协议为MPL2.0, 当前云和恩墨、海量数据、柏科数据、航天壹进制等10+专家已入驻,孵化了多个创新方案。如:云和恩墨发布了基于open-eBackup开源备份软件的zCloud数据库备份管理一体机,支持多样环境下20+数据库备份能力,并提供高达8:1的重删压缩比,为用户打造全生命周期的数据备份方案。
数据存储专委会观点:
开源对原有备份市场格局造成一定冲击,但同时也对软硬件备份厂商合作提出新的挑战,为备份产业带来新的活力与新的生态合作模式。
NO.8 硅介质:NAND Flash堆叠技术竞赛加速,QLC大盘进入主流路线
事件回顾:
头部NAND Flash厂商加速堆叠技术竞争。
2024年9月12日,三星宣布已开始大规模生产286层3D NAND,并将于2026年推出400层3D NAND,到2030年开发出超过1000层的NAND芯片。
2024年11月,SK海力士开发出全球最高的321层4D NAND闪存技术。国内长江存储已实现232层 NAND量产,并积极向300层以上突破。存储厂商争相发布QLC大盘。
2024年12月3日,Pure Storage宣布与Kioxia合作推出150TB QLC DFM模组,加速迈向2026年交付300TB大盘的目标。
2024年12月18日,SK 海力士发布61TB QLC大盘,同时正在进行采用321层4D NAND颗粒的244TB SSD产品开发。华为已发布128TB 大容量SSD,IBM已推出76.8TB SSD。
数据存储专委会观点:
大容量QLC SSD盘可有效提升能效,降低TCO,在AI时代将逐渐释放其更大的能量。
NO.9 磁介质厂商相继推出更大容量更新技术硬盘,传统HDD技术再筑高墙
事件回顾:
2024年9月10日,东芝宣布推出CMR 24TB 和 SMR 28TB 硬盘,并将于2025年开始送样采用HAMR技术的32TB HDD给客户测试。
2024年10月16日,西部数据推出基于ePMR的UltraSMR HDD,容量高达 32TB。
2024年12月17日,据Tomshardware报道,希捷正式推出基于HAMR技术的32TB Exos M硬盘,为全球首款商用的HARM硬盘。
数据存储专委会观点:
在大容量低成本存储介质方面,在新型应用如AI的推动下,需要加快布局更多的可选方案。
NO.10 新型介质:磁光电、陶瓷、DNA等新型存储介质技术逐渐形成规范并走向实践
事件回顾:
2024年2月22日,中国科学院上海光学精密机械研究所在国际学术期刊《自然》杂志发表论文《具有Pb容量的3D纳米级光盘存储器》,在超大容量超分辨三维光存储研究中取得的突破性进展,经老化加速测试,光盘介质寿命大于40年。
2024年5月23日,在第七届数字中国建设峰会上,易华录展示蓝光存储为核心的磁光电存算一体产品,打造“全闪 蓝光”的融合架构,既能满足内外部数据的高性能吞吐和高效率流转,又能支持EB级以上海量数据进行冷温热分级、长期存储。
2024年7月30日,陶瓷数据存储解决方案的先驱Cerabyte宣布获得Pure Storage的战略投资,加快研发长期稳定、高密度、低成本的归档存储解决方案。12月,Cerabyte获得了欧洲创新委员会EIC Accelerator颁发的资助,以帮助其陶瓷存储解决方案加速商业化。未来陶瓷存储将实现单片TB级、单架10PB到100PB的数据存储,整个存储系统容量有望提升至EB级别。相比于HDD,陶瓷存储具备超级耐用性、稳定性以及高效的读写速度等优势。
2024年3月,DNA数据存储联盟(The DNA Data Storage Alliance)发布了首个DNA存储规范,为后续的商业化、标准化奠定了基础,有助于推动DNA存储成为一种可行的数据存储形式。尽管DNA存储技术尚处于起步阶段,但包含头部HDD和SSD制造商在内的多家企业组成的DNA数据联盟发布的两项DNA存储技术新规范,代表了首个有望能够获得全行业认可的标准。
数据存储专委会观点:
新的存储介质带来新的存储技术革命,数据存储产业未来10年技术标准与规范将充满挑战与革新机遇。
您认为还有哪些产业热点值得关注? 期待您在评论区留言交流!
文章转载自 中电标协数据存储专业委员会