重复数据删除降低企业成本

优化存储设备、节省存储资源、降低运营成本的新技术,正逐渐得到用户的认可和接受.

在当前金融危机影响下,企业都捂紧了钱袋子,除了购置必要的IT设备外,CIO们不愿多花一分钱,甚至对原本已经列入日程的IT设备采购也不得不精打细算或干脆推迟再议.但从另一方面来说,企业的IT部门可以借此机会整合现有的项目,而不再着急启动新项目,也就是说,将工作的重点转移到优化现有系统和资源、并设法延长它们的使用寿命、提高设备利用率上.

有统计数据表明,在企业的存储设备中,除了有相当多的存储设备没有被充分利用外,还存在着大量的重复数据,因此,像重复数据删除技术、精简配置技术等近来得到了许多厂商的大力追捧.前不久出现的EMC和NetApp两家公司竞购重复数据删除厂商DataDomain现象,无论两家公司的真正用意如何,至少从一个侧面说明了重复数据删除技术的受关注程度.

国家信息中心主任工程师宁家骏曾经表示,删除重复数据是解决“精简存储”的可行之路.“长期以来,人们习惯在数据转储或备份时,不分青红皂白,一古脑儿把所有数据定期或不定期加以备份或转储,这种方式就是目前较普遍的‘粗放存储管理’,显然不符合当今倡导的‘精简存储、科学存储和绿色存储’的理念.今天我们高兴地看到,赛门铁克提供的删除重复数据方案较好地解决了这一问题,为各类用户方便地实现重复数据删除备份,精简存储或备份管理,节省存储设备的添置和相关投资如,正逐渐得到用户的认可和接受,从一个侧面提出了建设绿色数据中心的一种新思路.”宁家骏说.

据了解,在众多重复数据删除解决方案中,赛门铁克提供的方案以其全面性和灵活性独树一帜.赛门铁克公司资深系统工程师陈震宇介绍说,赛门铁克备份软件VeritasNetBackup(NBU)中的选件PureDisk所承担的就是重复数据删除功能,它既可以作为NBU的一部分与NBU一起购写,也可以单独购写,以方便那些已经拥有备份软件的用户实现重复数据删除备份.陈震宇介绍说,其内置的重复数据删除技术可以减少多达90%的数据备份量和97%的带宽需求量.重复数据删除技术对应用程序是完全透明的,通过将PureDisk与NetBackup的操作进行集成,让企业可以对磁盘上进行的备份加以管理,如同管理其他任何备份一样(包括个性化的保留策略).到期时,空间便会自动回收,以便重复使用.陈震宇认为,赛门铁克的重复数据删除功能不同于一些公司提供的单实例存储.单实例存储基于文件,即使文件仅在末尾或仅文件名被修改,这个文件也会被重新进行备份.而赛门铁克采用的重复数据删除基于块数据,它针对每一个块计算出一个惟一的识别码,然后对识别码进行比对.一旦识别码相同,该块数据就不再进行备份了.陈震宇介绍说,使用这一功能后,数据的缩减率最大能达到300∶1.在赛门铁克的重复数据删除过程中,块的大小有两种模式可供选择,即固定大小和系统自动调整大小.

另外,重复数据删除分为源端和后端两种方式.源端方式即在备份之前就对数据进行缩减,然后传输到备份设备上,这种方式更多地用于远程备份(窄带容灾),以节省带宽.相对应,后端方式即传输到备份设备上进行数据缩减,它主要用于数据中心级别的备份,这些应用不在乎带宽,但注重存储量和性能,采用这种方式时,后端常使用支持重复数据删除的磁盘阵列或VTL.陈震宇说,PureDisk对这两种方式都支持,用户可根据自身的应用需求和环境来选择.

对于重复数据删除的实现,目前有硬件和软件两种方法,其实现方法几乎相同.不过,陈震宇认为,硬件方式只能实现后端方式的重复数据删除,同时,使用硬件设备还会增加数据中心的复杂性,以及需要管理的设备数量,实际上相当于增加了环境的存储容量,而不是更有效地利用现有的空间.另外,从投资的角度看,软件方式由于与硬件无关,更利于保护用户的先期投入.