这已经不是什么秘密,数据增长正处于历史最高水平。IDC预计要由全世界2023生成的数据103泽字节1。是的,字节。随着物联网设备的普及,5g技术的发展,以及视频的大量增长,我们才刚刚开始了解公司将如何存储和提取数据的价值。
机床数据将发挥主导作用,因为它有望超过商业/消费数据。到2023年,将被机器所产生的数据的90%以上2(即智能城市、物联网、终端、自动驾驶汽车等)。此外,视频、监控录像和大型AI/ML数据集——这种“自然流”或顺序数据——将无处不在。
另一个挑战我们面对:如产生更多的数据,它较少被存储。这可能是因为存储经济学或数据感知缺乏价值。到2023年,只有12 ZB - 约12%创建的数据 - 实际上将被保存3.。然而,我们的存储数据的能力是实现其潜力至关重要 - 利用它进行分析,挖掘,情报和价值创造。
数据基础设施也必须重新构建,以解决工作负载,应用不断增长的规模和复杂性,以及AI /物联网的数据集。
考虑到这一切,有一件事是清楚的Zettabyte时代:这是不可行的,只是不断增加的存储。大型数据集加油的大数据分析等一次写入,多次读取类型的顺序数据的继续增长。要管理数据的巨大增长,您的数据基础设施必须能够在不牺牲性能的高效,经济地扩展。这些新的结构将包括工作负载优化的多个存储层,以及新的方法对系统软件,可以在规模与更好的经济利用高密度存储。
Zettabyte时代的扩展路线图
分区存储在存储数据由的令人难以置信的爆炸动机的新典范。它是一个开源的倡议,汇集了新的存储创新技术和行业标准为云和超大规模数据中心架构师设计高效的存储层,这有助于保持竞争力的总体拥有成本,并在泽字节级时代实现更大的规模经济。雷竞技电脑网站
随着越来越多的数据将在本质上是顺序 - 视频,物联网/ EDGE数据,监视,或可被分组或“划”到更大的块如大AI / ML的数据集的数据 - 有机会组织的方式工作负荷写到存储介质获得更好的性能和效率。
SMR HDDs和ZNS NVMe ssd正在引领分区存储方法
分区存储体系结构使主机应用程序能够编排数据布局并充分利用最高可用存储容量。这些“分区”设备(如shingled magnetic recording (SMR)硬盘驱动器(hdd)和新兴的NVMe固态驱动器(ssd)分区命名空间(ZNS)标准)在这方面处于领先地位,并为顺序工作负载提供优化。
SMR使今天的最高容量硬盘。SMR构图就像在屋顶上的带状疱疹。通过覆盖在盘上的轨道,更多的数据可以被压缩成相同的空间 - 相比于传统的记录增加由向上的面密度为20%。SMR驱动器是专为数据中心,并允许优化的性能,规模经济和数据放置的系统级智雷竞技电脑网站能。
ZNS将flash媒体划分为不同的区域。这些区域只能按顺序写入,非常类似于按顺序写入SMR hdd上的磁道的数据。ZNS将flash媒体划分为多个区域,其中每个区域都是一个独立的名称空间。例如,云提供商可以将工作负载或数据类型分离到不同的区域,以便在多个用户之间预测使用模式。最终的结果将是产生密度更高、成本效率更高的固态硬盘。分区存储设备将减少对后台垃圾收集的需求,并减少对媒体的过度供应。ZNS设备补充了新的存储技术,如QLC闪存,提供了更有效的媒体使用。
ZNS补充了SMR技术,使开发人员能够在单个存储堆栈下利用SMR和ZNS,而不管介质类型如何。这为应用程序架构提供了智能,并且因为它们被视为一种技术,使得SMR和ZNS成为新的zettabyscale时代的工具构建块。
使用分区存储方法重新架构数据中心最初可雷竞技电脑网站能需要一些工作,但是密度和成本优势是巨大的,并且展示了专门构建的硬件和软件感知结构的所有优点。许多西方数字客户已经开始部署今天技术阶梯短环到超级扁环该公司预计,到2023年,其提供的HDD exabyte中有50%将安装在SMR上。
开源是必要的
这是需要注意的重要分区存储是一个开源的,基于标准的倡议,提供了一个统一的框架来管理特定目的建造ZNS SSD和容量优化的SMR硬盘。参与使客户能够充分利用SMR技术与他们的硬盘驱动器,并将其集成到他们的应用程序。其优点是,在硫化锌SSD的准备,客户可以利用他们的SMR的投资和应用,为他们的ZNS部署。事实上,如果他们已经设计了周围区域的概念应用,其应用程序可能会要求最小的变化。
[1]IDC全球数据圈预测,2019-2023:消费者对企业的依赖不断扩大,2019年1月,DOC #US44615319
[2]应用材料,SEMICON West,人工智能设计论坛,2019年7月
[3]IDC称,全球全球安装StorageSphere基地预测,二○一九年至2023年:全球StorageSphere由核心层,边缘和端点,四月,2019,DOC#US45009319安装基础
前瞻性陈述:
本文可能包含前瞻性陈述,包括对西部数据产品的预期、这些产品的市场、其产品用于数据战略的能力和应用。这些前瞻性陈述受风险和不确定因素,可能导致实际结果不同物质的表达在前瞻性陈述,包括发展挑战或延迟,供应链和物流问题,市场的变化,需求,全球经济状况和其他风险和不确定性在西部数据公司上市的最新季度和年度报告提交给美国证券交易委员会(sec),你的注意力被引导到哪里。我们提醒读者不要过分依赖这些前瞻性陈述,我们也没有义务更新这些前瞻性陈述以反映随后的事件或情况。