处理海量数据的新存储技术

随着企业存储需求的不断提高,磁盘密度也在不断上升。但真正神奇的是软件,在那里速度和规模结合在一起。

12 第二页
第2页共2页

一些新的供应商将他们的软件以物理硬件和磁盘和处理器的形式打包。Gridstore的存储设备虚拟化了存储控制器和数据,以消除单点故障,并提供来自多个服务器的更快的并行数据访问。这允许控制器的数量增长,利用未使用的计算能力来扩展性能和容量。但是,它目前只支持Windows和基于文件的存储。

另一种基于软件的可伸缩性方法是在许多物理数据库上分布“数据片”。Cleversafe的dsNet技术,也作为家用电器出售,在超过1拍字节的存储空间(由大于50到100KB的对象组成)时效果最好。该公司总裁兼首席执行官克里斯·格拉德温(Chris Gladwin)说,这对于通过网络分享照片等应用来说是理想的。

接下来是什么

随着硬盘越来越大,速度越来越快,闪存越来越大,越来越可靠,开源存储堆栈越来越成熟,一些行业观察人士看到了企业应对数据洪流的根本变化。

Shetti预测,随着新的非易失性存储技术的采用,随着新技术与高端光纤通道和SAS硬盘在成本上更具竞争力,对固态硬盘和旋转硬盘之间分层数据的需求将会减少。容量更大、成本更低的SATA磁盘仍将发挥作用,但他表示,封装的复杂性和不同的软件接口将阻碍用户在同一系统中混合使用非易失性内存和SATA。

日立数据系统公司(Hitachi Data Systems)的首席技术官胡吉田(Hu Yoshida)表示,在三到五年内,闪存的价格将与高性能磁盘差不多。他说,他们已经在平价,当硬盘的容量减少short-stroking(只使用磁盘容量的一部分速度性能通过减少读/写头的距离必须旅行到达数据)和通过编写数据跨多个磁盘的RAID数据保护配置。

然而,即使是普通的硬盘驱动器,也会随着供应商添加更多的缓存而提高速度。希捷预计,到2015年,这种“混合动力”驱动将占据其大部分产品线。

云存储服务将提供缓慢但成本极低的归档服务,以减少内部存储负载。例如,亚马逊冰川(Amazon Glacier)每月每千兆字节的成本仅为1美分。咨询公司StorageIO的创始人格雷格•舒尔茨(Greg Schulz)表示,尽管“获取这些数据可能需要3到5个小时”,但这可能不会比从异地存储的磁带中恢复数据更长,而且冰河冰河的成本与磁带相比具有竞争力。

格拉德温说:“通过消除对分级文件系统的需求,对象存储可以降低存储成本和复杂性。”“在一个非常大的数据存储系统中,运行文件系统[需要]额外的服务器机架”,这些服务器消耗电力、占用空间和成本。他说,有了对象存储,社交媒体网站等应用程序可以让用户无需文件系统就能搜索朋友。

与此同时,IT企业继续被云计算的成本效率、低成本硬件和低成本开源软件的结合所吸引。

例如,Constant Contact正在考虑“私有存储云”,可能在Amazon S3等供应商的系统上使用开源软件,以实现低成本和“几乎不受限制的水平规模”,Piesche说。以Cassandra为例,他说他希望将存储集群分散在分布式数据中心进行灾难恢复,“不需要任何许可费用,不需要任何复杂的设置,也不需要任何人工干预。”雷竞技电脑网站

他需要的复制功能还没有可用。但他必须继续寻找,因为正如舒尔茨所说,“对绝大多数人来说,不存在所谓的数据衰退。”

schey是一位经验丰富的科技作家。可以和他联系bob@scheierassociates.com

阅读更多关于数据存储的信息在计算机世界的数据存储主题中心。

这篇文章,"处理海量数据的新存储技术"最初发表于《计算机世界》

加入网络世界社区有个足球雷竞技app脸谱网LinkedIn对自己最关心的话题发表评论。

版权©2013Raybet2

12 第二页
第2页共2页
SD-WAN买家指南:向供应商(和您自己)提出的关键问题