首页 > 基础设施 > 正文

企业数据存储容量最大化:提高效率和利用率

2009-10-27 08:50:30  来源:TechTarget

摘要: 本文介绍了将企业的数据存储容量最大化比以往的任何时候都更重要。由于多数的存储预算都没法跟上数据增长的速度,需要找到降低投资和运营开销的办法来度过经济难关。
关键词: 数据存储

    本文介绍了将企业的数据存储容量最大化比以往的任何时候都更重要。由于多数的存储预算都没法跟上数据增长的速度,需要找到降低投资和运营开销的办法来度过经济难关。

    现在,将企业的数据存储容量最大化比以往的任何时候都更重要。由于多数的存储预算都没法跟上数据增长的速度,很多存储管理员需要找到降低投资和运营开销的办法来度过经济难关。总的来说,在增加新的容量之前,你应该专注于更好地利用已经安装的容量。尽管没有简单的清单可以帮你达到这个目的,你还是可以通过使用分层存储、存储资源管理(storage resource management SRM)、数据分类、和数据迁移工具,以及类似精简配置和数据缩减(data reduction)之类的技巧来提高你的存储系统的效率。

    对很多公司来说,第一步是存储分层。这使得对业务来说很关键并经常访问的数据保存在更加昂贵的介质上,而不常访问的以及归档的数据则转移到比较廉价而容量更高的驱动器上。容量管理工具,包括一些能够提供利用率和性能的颗粒状信息的工具,可以帮助你确定分层策略。

    2009年6月Storage杂志一个有关快照的调查发现112名受访者中有59%已经实施了分层存储架构。目前没有分层存储的人中,有20%计划实施分层存储架构,而其中超过一般打算在未来12个月内实施。

    但即使你有一个分层存储系统,你也可能没有高效地使用安装的容量。容量管理工具可以帮助你发现问题,而类似精简配置,数据缩减的技术可以帮你增加利用率并节省空间。结合使用的话,这些方法可以帮你更好地利用你的系统,并推迟购买新系统。

    存储资源管理(SRM)工具提供对资产利用率的粒状视图

    存储资源管理(Storage resource management - SRM)工具可以帮助存储管理员对他们的物理/虚拟资产和需求有个彻底的了解,结合性能需求和预算限制来确定分层存储策略,并将数据移动到合适的层级上。随着这些工具的成熟,通过现有设备满足需求变得更加容易了。较新的容量管理和数据映射工具为管理员提供了对设备利用情况、数据存储需求、性能和虚拟环境的颗粒状视图。

    例如,类似EMC公司的Ionix ControlCenter, Quest Software Inc的Foglight这样的工具使得IT部门可以发现SAN(存储区域网络)或者NAS(网络存储)环境中使用的所有IT资产。而更加复杂的针对特殊阵列的工具,例如HP的Storage Essentials Performance Pack 企业插件和NetApp的SANscreen存储服务管理软件,能够发现未使用的容量,发现物理和虚拟数据路径,获取设备配置,映射虚拟资产并通过底层数据程序来监视利用的模式。通过找出这些数据随时间推移的变化趋势,存储管理员可以看到应用运行的状况,哪个应用需要最多的资源,而它们是否已经达到了因缺少资源而影响性能的状态。

    马萨诸塞州Hopkinton市,Taneja Group的验证服务主任、资深分析员Jeff Boles说,访问颗粒化的使用率和性能数据,对高端大型的存储系统之外的系统来说还是件新鲜事。”如果你有能够深入到光纤或这网络中去的工具,而且能在包的层次上看到正在发生什么,然后将那些信息总结起来,会是一件很有趣的事情。“Boles说道。

    利用模式数据可以帮助管理员理解他们的存储系统处理I/O请求的状况如何。颗粒状的性能数据可以帮助确定性能和I/O问题是否迫使公司使用比满足他们的容量需求更多的磁盘,以及哪个应用或者用户是症结所在。”这是查看你如何利用存储的一个额外的角度,“Boles说。”它能让你更清除地了解到你的存储的潜能。“

    据HP说,他们的Storage Essentials SRM套件具有一般SRM软件的功能,而他们的Storage Essentials Performance Pack企业插件则是”路径感知“的性能管理软件。该插件可以实时追踪各种SAN设备和应用的性能统计而且分析数日、数周甚至数月内的性能数据趋势。

    NetApp的SANscreen SRM工具──NetApp于2008年1月购买自Onaro公司。据公司代表说,它能提供异构环境中容量消耗、存储资源分配、设备配置和访问路径的详细信息。

    金字塔形的分层模型用有限的预算实现期望的性能

    你完成对你的环境的设备、容量和存储需求的全面检查之后,就需要行动了。据Boles说,金字塔形的层级架构正在出现,SSD在顶端,而磁带、虚拟带库 VTL以及云服务则在金字塔的底部。基本思路是把昂贵、高性能但是容量较小的磁盘放在模型的顶端,来处理密集的I/O需求,而把较便宜高容量的磁盘或者服务放在底端来存放不经常使用和归档的数据。如果实施得当,层级能够使得管理员能够更好地用有限的预算满足性能需求。

    对一些公司来说,金字塔模型开始于顶端的高性能,非常昂贵的SSD,业界通常称其为0层级。层1包括高性能,较贵的光通道FC驱动器,有时也有SAS驱动器。层2使用性能较低的串口硬盘SATA驱动器,有时甚至也包括SAS驱动器。而层3则主要面向数据归档和很少使用的数据,它使用最便宜的存储设备,包括磁带、虚拟带库,可能还有云存储。关键是”为应用的需求使用价格和性能都合适的技术,“HP存储平台市场部主任Kyle Fitze说。

    将数据分类并迁移到合适的存储层级

    通过将数据按照性能和访问条件进行分类,你可以决定你的基础设施需要哪些存储层级,并把数据移动到合适的存储设备上去。

    数据分类过去曾是特别令人讨厌的一项工作。超过42%的拥有分层存储架构的Storage杂志调查受访者说他们对分层存储最头疼的就是将数据分类以便将它们送入合适的层级。

    物理上移动这些数据也是一个很繁重的杂务。超过36%的受访者说他们不得不在层与层之间手动移动数据;另外,大约35%说他们同时使用自动和手动的流程来移动数据。

    这些痛处有望缓解。多数的第一代分类工具厂家都在转向有利可图的电子发现(e-discovery)市场,而经济形式减缓了第二代分类产品的开发进度。但是市场对云服务作为最便宜的归档的关注,以及媒体对成本优化的关注,可能会刺激可以高效并简单地在层与层之间移动数据的工具的开发。

   “我认为这一天已经不远了,那就是底层的价格如此的不可抗拒,以至于你必须要好好看看如何将数据弄到那一层。 ”Boles说。“可能那会产生更多的机会,以及更多的分类工具集。”

    一个正在进入自动分类和数据迁移市场的公司是SmApper Technologies GmbH。SmApper的数据智能层能实现针对分层存储管理的基于策略的数据移动。

    Compellent Technologies公司能提供Storage Center Data Progression,一套自动的、块级数据分类和迁移工具。它自动分类数据并将其双向移动,使你可以根据转数,磁盘驱动器类型或者RAID等级来定义层级。

    通过自动精简配置实现更高的存储利用率

    和存储分层架构工作最紧密的就是精简配置,一种提高存储利用率的技术。精简配置工作在主存储的块级,它使得管理员可以为应用分配虚拟存储空间而不是预先分配实际的物理容量。这个功能只有在应用实际向磁盘中写入数据的时候才会为应用分配物理存储容量。

    3PAR Inc.的市场副总裁Craig Nunes说,他们公司的研究发现典型的数据中心只有19%的容量是写有数据的。剩余的容量都预留给应用的可能永远不会发生的未来需求。

    通过使用精简配置,IT管理员可以使利用率接近100%,从而延缓采购容量,直到设备容量接近用满的时候。“总的来说,我们发现管理员购买的容量只相当于过去的25%到50%,”Nunes说。而当真的要采购的时候,他们也能受益于硬件价格的下降。

    很多存储设备商把精简配置作为容量管理工具的一个功能来提供。3PAR将精简配置技术作为它的InForm软件包的一部分提供。

    NetApp的Provisioning Manager精简配置技术是在他们的存储管理软件包里的。HP的StorageWorks XP24000 和 XP20000 磁盘阵列则包括公司的XP Thin Provisioning 精简配置软件。

    尽管很多厂家都在他们的产品中包括了精简配置,这一技术还没有进入太多的生产环境,据2008年10月的一个SearchStorage.com存储优先级调查,208个吐露了他们2009年计划的受访者中,只有13.5%说他们已经在他们的环境中实施了精简配置;21%说他们会在翌年实施这一技术,而 35%说他们会对其进行评估。在管理员寻需求能帮他们把有限的预算用在刀刃上的策略和技术的时候,精简配置的利用率应该会有所增长。

    使用数据缩减技术来去掉重复数据

    数据缩减技术例如重复数据删除(data deduplication )和单实例存储(single-instance storage SIS)现在可以被用来去掉重复的数据并在现有容量中塞进尽可能多的数据。这些技术在备份时,以及在重复的数据可能会碰头的层2和层3存储中使用最佳。

    Taneja Group的Boles说典型的实际去重复比例在15:1附近浮动。你保存的备份数据越多,去重复引擎能看到的越多,结果也就越好。尽管去重复目前还局限于层2和层3存储,Boles说,厂家正在使这一技术的算法更强,更适用于主存储数据。”我预期下一代的去重复技术会进化为更适合更多的主数据型数据集,“Boles说。

    压缩是能够降低你的公司的数据量的又一关键技术。它能够通用于所有数据,而不只是针对冗余数据。特别是对归档数据,压缩能提供显着的空间节省。

    最便宜的存储是已经买了的那个

  “我们告诉客户,利用你已经买了的存储是最便宜的存储方案,”HP的Fitze说。“最好通过智能分层来解放那些受困的空间,并把那些不那么需要高性能或者仅仅需要更高容量磁盘驱动器的数据移走。把数据从你的企业级磁盘上移走,使你能够取得你已经为其投资的东西并用它来支持你的应用和业务的增长。”精简配置和数据缩减技术提高利用率并使你的存储设备的容量最大化,从而延缓甚至避免了购买新的磁盘容量。


第三十八届CIO班招生
国际CIO认证培训
首席数据官(CDO)认证培训
责编:

免责声明:本网站(http://www.ciotimes.com/)内容主要来自原创、合作媒体供稿和第三方投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。
本网站刊载的所有内容(包括但不仅限文字、图片、LOGO、音频、视频、软件、程序等)版权归原作者所有。任何单位或个人认为本网站中的内容可能涉嫌侵犯其知识产权或存在不实内容时,请及时通知本站,予以删除。