目录
1、技术要点
1)重复数据节省率:
2)常用场合环境:(无须修改默认设置)
a)常规用途文件服务器:
- 团队共享
- 用户主页文件夹
- 工作文件夹
- 软件开发共享
b)虚拟化桌面集成结构(VDI)部署
- 应用程序部署
- 应用程序组合
- 远程访问
- 分支机构访问
c)虚拟化备份应用程序:如 DPM
3)不支持的环境:
- Windows 10/11 客户端
- ReFS(在 Windows Server 2016, version 1709 或以上,已支持)
- Windows 搜索
- Robocopy(源文件)
- 系统盘和启动盘
4)不建议启用的环境:
- Hyper-v Host
- WSUS
- SQL Server
- Exchange Server
5)增强功能:(相对于 Windows Server 2012 R2)
- 支持最大 64 TB 的卷。
- 支持高达 1 TB 的文件。
- 支持 Nano Server 部署选项。
- 简化的备份支持:增加了虚拟化备份应用程序(Microsoft Data Protection Manager (DPM) )的 “备份” 重复数据删除类型。
- 支持群集操作系统滚动升级。
6)内存分配:
- 基本公式:对于每 1 TB 的逻辑数据,重复数据删除应至少具备 300 MB + 50 MB 内存。
如要优化 10 TB 的卷,则需 (300 MB + 50 MB * 10 = 800 MB)的内存。
- 推荐公式:对于每 1 TB 的逻辑数据,重复数据删除应具有 1 GB 的内存。
如要优化 10 TB 的卷,最适合分配(1 GB * 10 = 10 GB)的内存。
7)基本工作原理:
- 扫描文件系统以查找符合优化策略的文件:
- 将文件分解为可变大小的块。
- 标识唯一块。
- 将块放入块存储中,并选择性地进行压缩。
- 将现在优化的文件的原始文件流替换为块存储的重新分析点。
2、安装重复删除数据
推荐已安装 Windows Server 2016/2019 更新 KB4025334(2017-07-18)
1)安装重复删除数据:
2)评估要进行重复数据删除的工作负荷:
3)启用重复数据删除:
3、运行重复删除数据
1)手动运行优化作业:
Start-DedupJob -Type Optimization -Volume D: -Memory 100 -Cores 100 -Priority High
Stop-DedupJob -Volume D:
Get-DedupJob -Volume D:
2)监控重复数据删除:
- 优化作业:LastOptimizationResult (0 = Success)、LastOptimizationResultMessage 和 LastOptimizationTime(应当为最新)。
- 垃圾收集作业:LastGarbageCollectionResult (0 = Success)、LastGarbageCollectionResultMessage 和 LastGarbageCollectionTime(应当为最新)。
- 完整性清理作业:LastScrubbingResult (0 = Success)、LastScrubbingResultMessage 和 LastScrubbingTime(应当为最新)。
- 可以在 \Applications and Services Logs\Windows\Deduplication\Operational 事件查看器中找到相关的作业信息。
优化比率:优化作业失败的一个标志是呈下降趋势的优化比率,它可能指示优化作业跟不上更改或改动的速率。
- OptimizedFilesSavingsRate:仅应用于要优化的“内部策略”文件(优化文件的占用空间 / 优化文件逻辑大小)。
- SavingsRate:应用于整个卷(优化文件的占用空间 / 优化后的总的逻辑大小)。
4、其它事宜
1)Failover Clustering:
- 如果群集中的每个节点均已安装重复数据删除功能,则完全支持故障转移群集。
- 对于群集共享卷,手动启动重复数据删除作业必须在所有者节点上运行。
- 计划的重复数据删除作业存储在计划的群集任务中,如果已删除重复的卷由另一个节点接管,那么将在计划的下一个时间间隔应用计划的作业。
- 重复数据删除可与群集操作系统滚动升级功能完全互操作。
- 存储空间直通 NTFS 格式卷(镜像或奇偶校验)上完全支持重复数据删除。Multiple Tiers 卷不支持删除重复。
2)Storage Replica:
- 将重复数据删除配置在源数据中,而不是复制副本。
3)BranchCache
4)DFS Replication:
- 可在主动副本和复制副本中启用。
5)Quotas:
- 不支持针对卷根目录文件夹的硬配额,但支持软配额。
- 配额使用的是文件的逻辑大小,而不是物理大小。
6)Windows Server Backup:
- 指定文件夹备份:按其原始的未优化格式进行备份
- 整卷备份:支持按优化格式进行备份,可整卷还原或选择性还原
7)Veritas Backup Exec 专业备份类软件:
相关技术文档已明确指出,不支持:
Backup Exec 支持备份已启用 Windows 重复数据删除的卷。如果要备份已优化的数据,Backup Exec 会以其原始的未优化格式进行备份。请确保您具有足够的空间,可以在运行备份作业之前在备份目标上备份未优化数据。备份源本身上优化的文件不受影响。
当您还原您所备份的数据时,Backup Exec 会将文件还原为非最佳化。请确定您有足够的磁盘空间以还原非最佳化数据。您应释放出要还原文件的卷上的空间。在运行还原之前,请运行 Windows 垃圾收集器来优化该卷上的空间。