中国IDC产业年度大典指定存储网站 中国IT实验室旗下网站
存储世界
 热门搜索:SAN 虚拟化 RAID 容灾 ILM 分层存储 iSCSI SAS
搜索:
 您现在的位置: 中国IT实验室 >> 存储 >> 存储网络 >> FC SAN >> 正文
A-SIS:重复数据删除应运而生
来源:ChinaItLab 时间:2007-12-28 14:50:05 保存本文 作者:佚名 收藏本站

    大家都知道,存储系统的容量正在以惊人的速度增长。在过去的10年里,NetApp 提供的存储系统容量从数十GB发展到数百TB,足足翻了10,000倍!但是,多数企业发现它们对存储的需求甚至增长得更快,——除了存储所有这些数据的磁盘或磁带的成本外,——数据中心空间和电源也变得越来越昂贵。因此,它们的重要目标之一就是尽可能高效地使用存储。

    从存储数百个Snapshot副本仅需极少磁盘空间的独特的Snapshot技术,到允许系统管理员在运行时扩展和设定卷的 FlexVol技术,NetApp一直是高效利用存储的行业先锋.

    五月份,NetApp宣布了一种新的重复数据删除技术,能够大大提高指定磁盘空间可存储的数据量:高级单实例存储(A-SIS) 重复数据删除。NetApp NearStore R200和NearStore on FAS系统均可使用该技术(免费!)

    重复数据删除能以单个共享数据块为参考寻找相同的数据块并将其替换,从而提高效率。相同的数据块可能属于多个不同的文件或LUN,或者可能重复出现在同一个文件中。A-SIS重复数据删除是NetApp WAFL文件系统不可或缺的一部分,该系统管理NetApp FAS系统上所有存储。因此,不管您运行何种应用程序或如何访问数据,重复数据删除都在"后台"运行,并且开销很低。

    您可以节约多少空间?这取决于数据集和它所包含的重复数据删除量。以下是NetApp客户实现节约的几个示例:

  • 一家全球性石油和天然气公司为其主目录存储节约了35%的空间。
  • 某投资管理公司减少了90%的VMware映像备份副本。
  • 某个测试和测量仪器制造商在日常数据库备份方面节约了98%的空间。

    A-SIS 重复数据删除如何运作

    实质上,A-SIS重复数据删除采用老式的计算机科学技术-参考计算。以前,WAFL仅跟踪数据块是否在使用。借助A-SIS重复数据删除,它还能跟踪有多少在使用。在目前的实施中,不同文件或同一文件中的单个WAFL块可参考多达256次。文件并不"知道"它们之间在共享数据-WAFL内的簿记会在后台管理这些细节。

    WAFL如何确定哪两块可以共享?答案是WAFL会为每块计算出"指纹",这是块数据的哈希。具有相同指纹的两个块即可用于共享。

A-SIS:重复数据删除应运而生

    在卷上启用A-SIS重复数据删除后,它会为备份卷中所有正在使用的块计算出一个指纹数据库(此过程称为"收集")。完成初步设置后,卷即可用于重复数据删除。

    为了不减缓普通文件操作,副本搜索将作为一个单独的批次处理来完成。由于文件系统会在正常使用过程中进行更新,WAFL将创建描述其数据块更改的日志。该日志不断累积,直到出现以下某种情况:

  • 管理员发布 sis start 命令
  • sis config 计划中指定的下一次发生
  • 日志更改超出了预定的阈值

    这些事件中的任何一件都会触发重复数据删除过程。启动重复数据删除过程后,A-SIS 会使用变更块的指纹作为密钥来给日志排序,然后将排好序的列表与指纹数据库文件合并。一旦两个列表中出现相同的指纹,则可能有两个相同的块可折叠成一个。这种情况下,WAFL 会弃用其中一个块,并用另一个块的参考将其替换。因为文件系统时刻在变,除非两个块确实仍在使用并且含有相同的数据,否则我们当然可采取这一步骤。

    A-SIS 重复数据删除实施利用了 WAFL 的某些特殊功能,从而使重复数据删除的成本降到最小。NetApp 很早以前就发现,要确保存储在磁盘上的数据的完整性,应该采用皮带与吊带式 (belt-and-suspenders) 方法。(事实上,最好有几双吊带。)因此,磁盘上的每个数据块都通过校验和得到保护。

    A-SIS 使用该校验和作为它的指纹。由于无论如何都会计算指纹,相当于"无消耗",因此不会给系统增加任何负担。且由于 WAFL 绝对不会覆盖正在使用的数据块,因此在闲置数据块之前,"指纹"将保持有效。A-SIS 重复数据删除与 WAFL 的紧密集成也意味着更改日志是一种高效的操作。其结果是 A-SIS 重复数据删除可用于广泛的工作负荷,而不仅是用于备份,其它重复数据删除实施的情况也是如此。

[1] [2] 下一页

【责编:Chuan】
相关文章
在虚拟化环境中实施重复数据删除技术
重复数据删除市场主流产品测评结果对比
昆腾推出新款重复数据删除平台DXi8500
厂商相继升级重复数据删除架构
Data Domain将发新款重复数据删除产品
安腾普归档方案增强与Data Domain互操作性
惠普推新重复数据删除产品HP StoreOnce
最新文章
·Scidata国内首推 高效存储消冗系统
·昆腾为Scalar磁带库新增自动化机械系
·希捷发布多款企业级新品 主打固态硬盘
·数据中心SAN 区域布线方案浅谈
·家用NAS网络存储器之十大常用功能
·NETGEAR家用NAS存储产品使用和安装篇
·深度分析:日本地震对硬盘产业究竟影
 文章评论
 精彩友情推荐
·Asp源码 PHP源码
·CGI源码 JSP源码
·建站书籍教程
·服务器软件 .net源码
·建站工具软件
·IDC资讯大全
·机房品质万里行
·IDC托管必备知识
·全国IDC报价
·网站推广优化
行业信息关注  

Isilon发布Smart 

HDS存储研发体系与
·深度分析:日本地震对硬盘产业究
·昆腾发布针对NAS市场磁盘备份DXi
·西数首款SAS盘面世 进军传统企业
·思科推动SAN网络市场 营收增长了
·2010年中国云计算规模达3.2亿美元
·Brian Bell:Compellent 100% 融
特别推荐  
08版网络测试工具新鲜出炉
《IT实验室周报》征稿启事
中文Traceroute,路由信息一目了然
北大青鸟IT教育求学培训全攻略
固态硬盘--未来存储之星
中文授权Alexa网站排名查询
存储技术  
  ...
·数据中心SAN 区域布线方案浅谈
·家用NAS网络存储器之十大常用功能
·NETGEAR家用NAS存储产品使用和安装篇
·挽救硬盘数据拯救措施 必杀绝招冷冻法
·云存储vs云备份 整合备份应用与服务
·预算有限 中小企业灾难恢复服务如何选?
·确保安全 备份环境中数据如何加密?
·数据恢复 Hyper-V和VMware虚拟机备份
产品专区  
·Scidata国内首推 高效存储消冗系统
·昆腾为Scalar磁带库新增自动化机械系统
·希捷发布多款企业级新品 主打固态硬盘
·挑战服务器虚拟环境下的存储性能
·苹果派的存储首选 Thecus N2200XXX测试
·三星光存储内置刻录机TS-H663C极致体验
·三星外置刻录机SE-S084F火爆促销
·Intel新款X25-M 120GB性能测评
·硬盘选购技巧
·评论:戴尔会是3PAR的好归宿么?