存储中的重复数据删除技术
发布日期:2021-06-30 12:16:02 浏览次数:2 分类:技术文章

本文共 1057 字,大约阅读时间需要 3 分钟。

在当前的“大数据”时代,尽管磁盘空间越来越便宜,I/O速度在提升,但重复数据删除仍是存储管理员最为关注的技术之一,这项技术的存在,使得我们能够以更低的存储成本和管理成本,得到更高的存储效率。

在Windows Server 2012的重复数据删除功能中,它可以实现块级和文件级的重复数据删除:
 块级:如果磁盘的多个区块存放着相同的数据,则存储只需存放一份。
 文件级:如果磁盘中存放着多个相同的文件(哈希值相同),则存储只需存放一份。
在Windows Server 2012中使用重复数据删除技术需要了解以下知识:
1、重复数据删除默认不启用,需要手动部署。
2、重复数据删除对系统性能的影响
(1)磁盘不会立即对存放的数据内容进行重复数据删除处理,默认会在5天之后才进行,这保证了数据写入和读取的性能不会受到重复数据删除功能的影响。
(2)重复数据删除允许对卷中的目录或文件类型进行排除,被排除的文件类型和目录将不会进行该功能的处理。
(3)管理员可以部署系统在空闲时间(如凌晨)进行重复数据删除处理,同时重复数据删除进程是自我调节的,可以运行在不同的优先级。例如,您可以设置实际的重复数据删除进程运行在低优先级中,它会在系统本身处在重负载的情况下暂停,也可以设置一个时间窗口,让它在空闲时段全速运行。
3、重复数据删除的卷是“原子单位”
“原子单位”是指卷的所有重复数据删除信息都存放在卷本身上,因此硬盘挂载到其它系统时,如果对方系统支持重复数据功能,则该卷保持不变,而如果对方不支持,则只能能够看到nondeduplicated文件。
4、重复数据删除支持分支机构(BranchCache)。
如果总公司和分公司的服务器同时运行重复数据删除技术,那么他们直接发送和接收文件时可以有效减少需要发送文件的数据量。
5、备份重复数据删除卷可能遇到以下问题:
(1)在基于块的备份解决方案中,例如磁盘映像备份的方式,备份将会保留所有的重复数据删除的数据。
(2)一般情况下,基于文件的备份解决方案中,他们将不会保留重复数据删除的数据,除非它们是重复数据删除感知的。它们将以没有重复数据删除的形式备份一切。这意味着需要准备更大的备份媒介才能存放这些数据。Windows Server Backup解决方案是重复数据删除感知的,而其它第三方产品需要预先进行测试是否被支持。
6、重复数据删除的收益评估
如果想评估启用该功能对系统带来的收益,用户可以先在一个备用服务器上临时启用它,查看数据存储空间实际节省了多少。

在这里插入图片描述

转载地址:https://jan16.blog.csdn.net/article/details/106588754 如侵犯您的版权,请留言回复原文章的地址,我们会给您删除此文章,给您带来不便请您谅解!

上一篇:SCSI传输的安全性CHAP协议篇
下一篇:本地备份、异地备份、完整备份、增量备份、差异备份的概念与异同

发表评论

最新留言

表示我来过!
[***.240.166.169]2024年05月03日 18时42分14秒