带重复数据删除的d2d2t备份.pdf

2010 带重复数据删除的D2D2T 备份 O F N I T S E B XiaoYu BESTINFO 2010-6-30 带重复数据删除的D2D2T 备份 某银行用户已有的数据备份环境采用了典型的 LAN 备份方式，由备份客户端，备份服务器 和一个物理磁带库构成，如图1 所示。 基于磁带的备份一直是数据保护的主要 手段。磁带库具有很好的扩展性，可以方 便的增加磁带，驱动器来增加磁带库的容 量和处理能力；磁带也便于携带，我们可 以将其存放在异地安全的位置以满足长 O 期保存，灾难备份或法律法规的要求；磁 F 带还具有成本低廉的优势，如果把空间， N 电力，制冷等成本考虑在内，磁带一直被I 图表 1 基于磁带的备份 T 誉为“最经济的备份技术”，单个的LTO-4 驱动器可以以每秒120MB 的速度在单盘磁带上 存放800GB 的数据。 S 随着用户业务的不断发展，备份数据量不断增加，备份的频率也逐渐加大，现有的备份系统 E 出现了一些问题。首先是备份很难在指定的备份窗口内完成，其次是恢复的速度比较慢。通 B 过分析，我们发现用户备份的数据中存在大量小文件，这些随机存取的小文件导致了备份时 间的延长，但这些文件需要恢复时，定位到这些文件也需要花费较长的时间，从而影响到了 恢复的速度。 以上大量的非结构化数据，包括文件，邮件等，数量巨大，增长迅速，大量的恢复操作也是 针对这些数据。因此对于随机存取的良好支持称为备份系统性能的重要考量标准，而这正是 磁盘相对于磁带的优势所在。 基于以上的考虑，我们建议用户将系统改造为基于磁盘的备份，已有的磁带库整合到备份系 统中，用于长期数据保存，必要时可以通过虚拟带库或备份软件出带到磁带库。磁盘作为近 线存储可以保证备份和恢复的要求，并通过RAID 保护提供可靠性。 在当时的方案中，由于重复数据删除技术还是新兴的技术，考虑到其成熟性，我们最终没有 采用此技术。 项目实施后，性能和可靠 性都提高了，系统在几年 之内都能很好的满足要 O 求，但随之而来的是另外 F 一个问题:高昂的成本。相 N 图表 2 传统的基于磁盘的备份 对于磁带，在空间，制冷， I 散热等方面，磁盘具有更高的成本，磁盘适合于短期的数据保持，对于中长期数据保存要求， T 特别是需要异地保护时，传统磁盘备份都需要额外的步骤和成本。 S 而解决这些问题的关键所在就是重复数据删除技术。经过2-3 年的发展，如今的重复数据