那么，公司为什么会创建重复数据呢？可能是因为一个或多个合理的原因，包括：

• 组织或其某个部门可能需要重新利用原始数据，因此需要创建新的数据副本。
• 公司可能希望保留副本，作为备份系统的一部分，以防发生数据丢失事件。
• 组织可能会发现自己保留了相同数据的多个副本，但都以不同的格式存储。

数据重复的另一个主要原因是，这是大多数多部门组织中的常见现象。数据的定期创建或重新创建，是在现代背景下开展业务的一项公认的有机功能。因此，数据创建或复制并非真正的问题，过度的数据激增才是真正的问题。

如果没有与之相关的额外经济负担，数据激增似乎就不是什么问题了。组织可以选择将数据存储在其 IT 架构内的各个位置，而不必关注这些冗余。

但事实是，公司确实会因为需要额外的存储成本来维护大量数据冗余而遭受经济损失。无法停止创建数据冗余的组织需要分配更多的人力和预算以实施新的存储解决方案和数据管理，无论是基于新硬件购买还是增加云存储。

数据去重技术最明显的优势，在于删除无关数据可以减少组织必须存储和管理的数据总量。通过减少数据占用的存储空间，可以有效提升组织的存储能力。

除了降低存储成本之外，数据去重还具有其他主要优势，例如推动数据备份计划和支持紧急措施，保障灾难恢复。

另一个优势是通过删除"无效"数据并确保剩余数据经过适当清理，从而重塑数据完整性。经过去重的数据，运行效果更好，能耗更低。

数据去重的另一个优势，在于可以很好地与虚拟桌面基础设施 (VDI) 部署配合使用，这要归功于 VDI 远程桌面背后相同的的虚拟硬盘运行方式。热门的桌面即服务 (DaaS) 产品包括微软的 Azure Virtual Desktop 及其 Windows VDI。此类产品会在服务器虚拟化过程中创建虚拟机 (VM)。此外，这些虚拟机也增强了 VDI 技术。

最基本的层面上，数据去重通过自动化功能识别数据块中的重复内容，然后将其删除。通过在此数据块层面执行，可以针对唯一的数据块进行分析，并指定值得保存的数据块。然后，当去重软件检测到相同的数据块副本时，就会删除该副本，并在其位置放置原始数据的参考。

数据去重的另一种方法是在文件级别进行操作。单实例数据存储会比较文件系统内数据的完整副本，但不会比较数据块。与同类方法一样，文件去重也依赖于保留原始文件并删除多余副本。

去重技术的工作方式与数据压缩算法（如 LZ77、LZ78）不尽相同，尽管两者都追求减少数据冗余的总体目标。与压缩算法相比，去重技术能在更大的宏观范围内实现这一目标，因为压缩算法的目标不是用共享副本替换相同文件，而是对冗余数据进行有效编码。