您的位置: 网界网 > 存储 > 正文

主存储上的数据减缩策略(上):前景展望

2010年11月16日 14:26:33 | 作者:CNW.com.cn | 来源:网络 | 查看本文手机版

摘要:诸如重复数据删除以及数据压缩这样的数据减缩策略,尤其是运行在主存储之上的,在2010年年中确实获得了广泛的关注,其关键看点在于Dell公司,以及IBM都收购了一些在数据减缩技术方面颇有建树的公司。但是支撑整个数据减缩技术版...

标签
数据压缩
重复数据删除
主存储数据减缩

诸如重复数据删除[注]以及数据压缩这样的数据减缩策略,尤其是运行在主存储之上的,在2010年年中确实获得了广泛的关注,其关键看点在于Dell公司,以及IBM都收购了一些在数据减缩技术方面颇有建树的公司。但是支撑整个数据减缩技术版图的并非只有这几家公司,大多数的存储厂商都在开发能够减缩主存储占用空间的更有影响力的技术。

“如果你在一年之前问我这个问题,那么我当时可能会说,现在展望主存储优化有点太无聊了。而如今,情景似乎有很大的变化了。我们已经被重复数据删除以及内容优化以及压缩等技术包围了,真的是变化显著。”位于马萨诸塞州Hopkinton的 Taneja公司的高级分析师Jeff Boles这样说道。“主存储优化在文件级别存储中已经成为人们必选的特性了。对于块级存储,我们正在归类需求。”

虽然人们对主存储的数据减缩技术越来越感兴趣,但是对于重复数据删除以及数据压缩技术来讲,现在都处于初期形态,谁也不敢说到底需要多久它们才能到位。

重复数据删除在备份领域是一项被证明很受用的技术,在2007年,这项技术在NetApp的FAS系列NearStore产品中以一项免费功能出现,用于主存储。NetApp将这项基于卷的后处理模式的重复数据删除技术用在VMware虚拟机环境,用于去除大量虚拟机重复冗余的操作系统所产生的冗余数据拷贝。NetApp也打算将数据压缩功能增加进去,并且将卷的容量扩展到16TB。

NetApp的竞争对手EMC在两年前发布了其主存储数据减缩技术,属于文件级别的重复数据删除与压缩,以单个文件系统为粒度,并作为其Celerra NS系列NAS系统中的一个免费特性而推出。在8月份,EMC将其数据减缩技术扩展到了块级存储系统中,并且在其Clariion CX4和Celerra NS产品线中引入了LUN压缩技术。

除了NetApp与EMC之外,大量的数据减缩技术还都掌握在一些新兴尖兵公司手上。直到七月份,Dell收购了Ocarina Networks公司。Ocarina的产品是一种可以将重复数据删除与尖端的内容识别的压缩算法相结合的设备,同时也在研发一款嵌入式重复数据删除设备,而且打算以OEM的形式与其他存储厂商合作。

就在Dell宣布收购Ocarina公司后的第十天,IBM宣布收购Storwize公司的计划,Storwize的产品为一种实时的数据压缩设备,而且也通过OEM方式推广其设备。

在6月份,Permabit Technology公司宣布了对其Albireo High Performance Data Optimazation Software的OEM out意向,而且对于NAS方面,与BlrArc公司的合作也很成功,在块级方面,与Xiotech的OEM合作也达成了。Permabit的执行官表示,后续会有更多的OEM合作。

Permabit的子文件级别重复数据删除可以运行于实时模式、并行模式或者后处理模式,而且其最小的性能影响、PB级别的扩展性、网格架构也吸引了颇多的眼球。

主存储数据减缩技术的其他竞争者还包括Compellent Technologies公司(康贝在明年打算增加重复数据删除),GreenBytes公司,Nexenta Systems公司(+本站微信networkworldweixin),以及Oracle公司(基于它的ZFS文件系统而做的重复数据删除)

位于康涅狄格州Stamford的Gartner公司的Davide Russell表示,重复数据删除以及数据压缩用了大概5年时间才在备份领域有所建树,但是其用于主存储,估计耗费的时间会更短。重复数据删除或者数据压缩技术是否会在任何特定场景下都效用显著,需要根据具体情况以及工作负载来定,他说:“虽然现在说这是一个初期市场还算公平,担主存储数据减缩肯定会占有一席之地”。

各种数据减缩方法:用于主存储的前景展望

如果仔细看看Dell和IBM发布的路标就会知道,主存储上的数据减缩技术在接下来的几年内将会成为主流。但是这些技术是否会真正有效的帮助IT企业或者组织解决它们正面临的海量数据增长问题,仍然是一件谁也说不好的事情。

“很多这类厂商不得不站出来并且向外界灌输一些明显有利的证据来证明他们产品在苛刻的高负载的生产环境中所表现出来的性能,只有这样,用户才有可能会说,‘嗨,很好,我希望在各处都部署你们的产品’。”Taneja Group的Boles这样说道:“这现在根本还是一件无法敲定的事情”。

然而,INI Group LLC的创办者以及高级分析师Tony Asaro预测主存储上的重复数据删除技术“将会在几年之内成为必不可少的主流前沿技术”,并且“用户不可不开始考虑使用这项技术”,虽然在当下,客户在主存储上还未将重复数据删除作为优先点来考虑。

“如果主存储所体现的性能对你确实是至关重要的,那么在部署重复数据删除的时候,你一般都会考虑使用后处理方式;而如果你追求的是存储空间效率实时的生效,那么你一般会考虑前处理的重复数据删除模式了。”他这样说到。但是同时他也指出:“摩尔定律可能真的会推动主存储上的重复数据删除技术的广泛采用。主存储重复数据删除对CPU资源耗费相当大,尤其是你选择了前处理模式的重复数据删除。所以,你会需要更快的处理器,而且需要不断的去升级而让它变得更快。”

下一篇文章 主存储上的数据减缩策略(下):厂商的影响

参考资料

1.重复数据删除:是一种数据缩减技术,通常用于基于磁盘的备份系统,旨在减少存储系统中使用的存储容量。它的工作方式是在某个时间周期内查找不同文件中不同位置的重复可变大小数据块。重复...详情>>

[责任编辑:杨坤 yang_kun@cnw.com.cn]