通用数据特征库

l异地数据容灾（远程复制）数字化时代，企业进行数据保护，不仅希望能够实现本地数据保护，也要有灾备中心进行异地数据保护。如此，即便本地数据中心遭遇地震、火灾等重大自然灾害或人为操作失误等事故，导致本地备份数据或生产数据发生损坏或丢失时，能够通过异地数据灾备，确保数据可恢复。ADM支持通过远程复制技术，将本地数据同步到异地灾备中心，实现异地数据容灾。基于备份任务，将生产数据备份到本地的存储池，基于远程复制任务，将本地存储池中的备份数据同步到异地存储池中，从而为生产数据提供双重保护，当本地生产数据、或备份数据丢失、损坏时，通过预先设置的容灾策略，在容灾端进行应急接管。上讯ADM能提供面向企业数据使用的成本控制、版本管理与合理合法开发利用。通用数据特征库

在典型的重复数据删除技术中，根据不同的数据备份场景选择适合的重删策略与粒度方案。在确定重删策略与粒度后，会根据输入侧不同粒度（卷级、文件级、块级）的数据采取不同的数据切分策略，并依据任务级与全局指纹库提供自适应源端的全局重删算法与策略，当前支持源端块级、文件级重删和并行重删技术。源端重删是采用基于内容的可变长数据切分算法，通过对数据块进行哈希算法的***标记，即指纹（Fingerprint），在指纹库中寻找相同的指纹。如果存在相同指纹，则表示已保存了相同的数据块，ADM则不再保存此数据块，而是引用已存在的数据块，从而节省更多的备份空间。该算法还可以智能识别已修改的数据和未修改的数据，从而避免因修改数据位移而导致的未修改数据切分到新数据块中的问题，比较大限度地提升重删性能和重删率，为避免数据备份过程中冗余网络传输与存储开销，在源端设置粗粒度前置数据校验可以明显缩小备份传输过程中的数据冗余，目的在于不备份任意一个冗余数据。持续交付上讯信息敏捷数据管理平台ADM产品的数据备份模块通过虚拟挂载恢复可快速检验备份数据的可用性和有效性。

备份是一个长期的过程，恢复往往只在事故发生后进行，且备份数据的可恢复性、可用性在很大程度上依赖于备份数据的完整性。为了保证备份数据的可用性，很多企事业单位会定期进行数据库备份的恢复演练，也就是从备份数据中恢复出一套完整的数据库。执行备份数据的恢复操作，需要备份系统管理人员或者数据库管理人员（DBA）对数据的备份恢复实现原理有深入的了解，并周期性地对备份数据进行恢复操作，以保证备份数据的可恢复性与可用性。这种长期机械性、重复性的备份、恢复及验证工作，无疑会占用DBA大量的时间和精力。在DBA界还流传着这么一句话：“故障一定会发生，只是早晚的问题！”。作为一名DBA，只有时刻记得进行备份和恢复校验，才能避免某一天事故发生时出现难以挽回的悲剧.

敏捷数据管理平台（ADM）由管理控制中心（Master）、数据服务节点（CDM Server）、敏感数据处理服务节点（SDM Server）、客户端（Client）组成，服务节点可通过主备节点部署实现高可用，通过灵活的横向节点扩展实现功能扩展和容量扩充，每个服务节点可以安装在物理服务器或虚拟服务器中。一个或多个客户端连接到服务节点，组成一个完整的数据管理平台，客户端负责收集数据、传输数据，服务节点负责接收数据、存储数据、敏感数据处理以及管理数据。上讯信息敏捷数据管理平台ADM产品支持全域重删技术，重删指纹库重建功能。

敏捷数据管理平台ADM的关键技术如下：l***数据获取方式数据获取的目的是将不同的数据源实时或者按需同步到平台内，根据不同类型的数据源，数据获取方式分为三种，保证覆盖全部数据源获取方式：①支持实时同步应用数据库；②支持按需同步关系型数据库；③支持与备份系统对接恢复数据。l核心专利技术—数据库虚拟化技术ADM内置一套数据库虚拟化管理程序，虚拟数据库是通过一份基础数据源创建的数据副本，一份基础数据源可以生成多个虚拟数据库，虚拟数据库可读可写，虚拟数据库状态可实时保存。虚拟数据库创建时间为分钟级，且不占用额外的存储空间。上讯敏捷数据管理平台ADM产品高效压缩存储池，节省大量存储资源。持续交付

备份数据的开发利用是唤醒大量沦为暗数据的备份数据，让数据备份即可用。通用数据特征库

传统的备份方案大多采用周期性的“全量备份+增量备份”策略，其增量备份大多不可持续，经过一段时间就必须执行一次全量备份。因而传统的备份方案经常面临备份窗口过大的问题，而且其增量备份数据的恢复效率相对低下，因为每个时间点的恢复都依赖于上一次全备副本和上一次全备副本后的所有增量数据，恢复操作需要进行逐个迭代恢复。此外，过期增量数据的清理操作也受限于备份副本之间的依赖关系，不一定能及时被***。而长久增量备份与全量快照合成技术，即***执行全量备份，之后只对新增或改动过的数据进行增量备份，此增量备份数据是持续的，而且每个增量备份的数据副本将自动合成为全量快照副本，便于恢复。因此，长久增量备份与全量快照合成技术能够大幅度减少备份时间，节省备份数据所需的存储空间，且提升了恢复效率。长久增量备份与全量快照合成技术适用于单个应用数据量大，执行一次完全备份比较费时费力的应用场景。若用户备份数据量小，也可使用传统的全备+增备技术方式，ADM无挂载备份能够实现此方式。通用数据特征库