面对指数级增长的计算和存储需求,传统的计算和存储架构还适用吗?
在IPF 2021 浪潮数据中心合作伙伴大会上,浪潮集团首席执行官兼首席科学家王恩东,院士指出,2020年,以GPU为代表的AI加速芯片交付的总计算能力已经超越通用CPU,智算成为智能时代的核心力量。面对指数级增长的计算需求,计算技术、产品和行业也面临着新的挑战。一是多样化的挑战,即计算场景的复杂性和计算架构的多样性;二是巨量,的挑战,即巨量模型、巨量数据、巨量计算能力、巨量应用对现有计算机架构的挑战。
技术与成本的博弈
技术与成本的博弈似乎是一个永恒的话题,IT行业也不例外。在计算领域,从专用处理器到通用处理器再到针对不同场景的各种AI处理器;在存储领域,从本地存储到外部存储再到分布式存储;在存储介质上,从磁带到硬盘再到固态硬盘。每一项新技术的发展都需要经过博弈的过程。
然而,这并不意味着上一代技术已经失去了存在价值。20世纪50年代发明的磁带至今仍有许多用户。诞生于20世纪70年代的硬盘至今仍活跃在各种规模的数据中心。随着时代的潮流,固态硬盘正在到处插旗。根据研究机构Trendfocus的数据,2020年固态硬盘总出货量将达到3.33亿颗,超过2.59亿颗;总容量方面,SSD为207EB,HDD为1ZB,约为SSD的5倍。
换句话说,根据场景的需要选择合适的方案是最经济的选择。计算如此,储存也是如此。
西方数据的存储方式
人工智能的发展离不开大数据的“粮食”供给,“处理方法”来自于相应的算法。算法总是在进化,但要加工的“食物”却因为存储成本而流失。
一些西方数据企业存储解决方案在IPF 2021 浪潮数据中心合作伙伴大会上展出
在IpF2021大会上,西部数字公司副总裁、中国区业务总经理刘钢,分享了这样一组数据:“研究表明,到2024年,以HDD为代表的大数据将增长到1.62ZB,以SSD为代表的快数据将达到333EB。两者之和约为2ZB,当年生成的数据总量将达到142ZB,这意味着将存储不到1.5%的数据。”
西部数字公司副总裁兼中国区总经理刘钢,
数字经济时代,数据是新的生产资料和关键资产。为什么这些关键资产和生产资料没有储存起来?刘钢认为,其中一个重要原因是存储架构和存储技术没有及时跟上数据的发展。
长期以来,用户对存储的主要需求无非两点:足够大、足够快。但同时,用户也需要考虑购买成本和后期使用成本。“事实上,没有一个单一的存储设备或存储介质能够同时满足上述条件。”刘钢说。
为此,西部数字提出了“分散分布式存储、分层存储、分区存储”的创新存储架构,帮助客户解决燃眉之急。
使用分散的分布式存储架构来降低存储成本,以便可以存储更多的数据供以后处理。
进一步细化分层存储,根据数据对存储延迟和容量的需求,细化到极热、热、暖、冷、极冷五个级别,采用相应的产品来满足需求。
分区存储,使用ZNSSSD进一步提高性能,同时增加可用容量和减少机柜空间占用,从而进一步降低功耗。
西部数字公司副总裁兼中国区总经理刘钢,
刘钢用数字说明了西部数字可以为客户提供的价值:“要实现同样的存储容量,用18TB硬盘替换14TB硬盘,可以有效减少22%的服务器数量,降低21%的能耗。因此,大型互联网服务提供商热衷于采用最新、最大的硬盘。对于极寒数据,SMR硬盘是个不错的选择。”
对于固态硬盘代表的快速数据,西部数字还可以提供极具竞争力的产品组合。这源于西部数字在企业SSD领域的三大核心竞争力:一是西部数字和Knight目前占据三分之一的市场份额,其强大的生产能力是持续供货的基础;二是新发布的第六代162层3D闪存技术,其水平单元阵列密度较上一代提升约10%,晶圆尺寸缩小40%,IO性能提升66%,降低了成本,满足了日益增长的数据处理性能需求;三是企业固态硬盘的垂直集成优势,从晶圆生产到控制器、固件开发,拥有一整套完整的产品集成能力,从而保证能够满足各类客户的需求。
与浪潮携手共建场景社区
关于此次与浪潮,的合作,刘钢表示:“人工智能的快速发展不仅极大地赋能和促进了数字经济,还推动了整个计算行业向‘智能计算’的演进。对计算能力和存储的需求随着巨量模型和海量数据呈指数级增长。我们很高兴继续深化与浪潮,的合作,结合双方尖端技术和产品的独特优势,共同打造高性能、低成本、稳定、可扩展的优秀解决方案,优化资源配置,赋能智能计算。未来,西部数字将加强与浪潮,的深度合作,以创新的数据存储架构和解决方案不断响应多元化的市场需求,与生态系统中的所有合作伙伴共同推动智能产业转型发展,为行业用户创造更多价值。”
西部数字公司副总裁兼中国区总经理刘钢,
面对当前市场需求的发展,浪潮在IpF2021大会上提出了“元脑新存储生态”:以用户为中心、以应用为导向的场景社区,这意味着存储厂商需要针对不同行业推出不同的产品,场景解决方案将越来越细分,越来越多的合作伙伴将参与到存储生态中。
显然,这也对所有合作伙伴提出了更高的要求。西部数字与浪潮产品和解决方案形成的协同效应足以满足客户多方面的需求:对于大数据需求,更高的存储密度和容量进一步节省机柜占用和能耗成本;对于快速数据,多种兼具性能和成本优势的产品可以满足不同的需求水平场景。Text/刘禹