上讯敏捷数据管理平台产品为非生产环境中的数据使用提供了安全性保障。ADM内置了双重敏感数据处理模式,一是通过基于虚拟数据库的方式,实现在闭环供数流程中完成敏感数据的替换;二是数据抽取方式,支持从多种数据源中灵活抽取并进行变形处理。此外,ADM能够自动发现敏感数据,智能定义敏感数据类型,并定位敏感数据...
上讯敏捷数据管理平台(ADM)支持重复数据删除技术,在典型的重复数据删除技术中,根据不同的数据备份场景选择适合的重删策略与粒度方案。在确定重删策略与粒度后,会根据输入侧不同粒度(卷级、文件级、块级)的数据采取不同的数据切分策略,并依据任务级与全局指纹库提供自适应源端的全局重删算法与策略,当前支持源端块级、文件级重删和并行重删技术。源端重删是采用基于内容的可变长数据切分算法,通过对数据块进行哈希算法的标记,即指纹(Fingerprint),在指纹库中寻找相同的指纹。如果存在相同指纹,则表示已保存了相同的数据块,ADM则不再保存此数据块,而是引用已存在的数据块,从而节省更多的备份空间。该算法还可以智能识别已修改的数据和未修改的数据,从而避免因修改数据位移而导致的未修改数据切分到新数据块中的问题,较大限度地提升重删性能和重删率,为避免数据备份过程中冗余网络传输与存储开销,在源端设置粗粒度前置数据校验可以明显缩小备份传输过程中的数据冗余,目的在于不备份任意一个冗余数据。敏捷数据管理平台可实现备份数据任意时间点挂载恢复快速对恢复数据进行验证。节约存储
(1)国产化数据备份系统兼容性不足当前国产化数据保护系统对国产化数据库、文件、虚拟化平台、容器、云服务器等备份源类型兼容不***,适配过程中需要更多的时间进行功能稳定性验证。(2)数据备份恢复验证耗时耗力当前采用NetBackup等集中备份系统备份的数据需采用手动恢复数据,过程繁琐、重复度高、专业性强,耗费大量的时间和人力成本。(3)数据交付时间长不论是通过数据恢复还是数据拷贝来提供测试数据,需要几小时到几周的时间。(4)占用大量存储资源数以千计的数据副本占用大量存储资源,需要更多的维护成本。(5)数据版本回退困难开发、测试环境中,当完成一轮跑批测试或功能调试后,重置数据状态需要重新导入数据或重新恢复数据,回退数据产生的时间成本巨大。(6)数据安全风险真实数据被用于测试使用后无法及时回收和销毁,造成资源浪费,存在敏感信息泄露的安全风险。(7)敏感数据安全隐患生产数据库中存在着大量的敏感信息,传统的手工***效率低、仿真度差、***不完全,交付给测试环境后存在隐私泄漏的风险。脚本路径上讯信息的敏捷数据管理平台ADM产品怎么样?
备份需要从业务系统中获取数据,统计、分析需要从业务系统中获取数据,研发、测试需要从业务系统中获取数据。这些数据从业务系统中拷贝出来后,如果得不到有效的管控,将会给企业带来安全隐患,这也是用户需要考虑解决的又一现实问题。基于上述问题的考虑,I T负责人迫切需要一种既可以解放业务系统,又可以对测试环境数据的采集、传输、存储、使用及流转等关键环节进行效率和安全双重保障的平台化产品,由此上讯敏捷数据管理平台ADM应运而生。
敏捷数据管理平台(ADM)由管理控制中心(Master)、数据服务节点(CDM Server)、敏感数据处理服务节点(SDM Server)、客户端(Client)组成,服务节点可通过主备节点部署实现高可用,通过灵活的横向节点扩展实现功能扩展和容量扩充,每个服务节点可以安装在物理服务器或虚拟服务器中。一个或多个客户端连接到服务节点,组成一个完整的数据管理平台,客户端负责收集数据、传输数据,服务节点负责接收数据、存储数据、敏感数据处理以及管理数据。数据安全领域的CDM是指copy data management。
上讯敏捷数据管理平台(ADM)支持增量备份与全量快照合成技术,传统的备份方案大多采用周期性的“全量备份+增量备份”策略,其增量备份大多不可持续,经过一段时间就必须执行一次全量备份。因而传统的备份方案经常面临备份窗口过大的问题,而且其增量备份数据的恢复效率相对低下,因为每个时间点的恢复都依赖于上一次全备副本和上一次全备副本后的所有增量数据,恢复操作需要进行逐个迭代恢复。此外,过期增量数据的清理操作也受限于备份副本之间的依赖关系,不一定能及时被清理。而增量备份与全量快照合成技术,即首先执行全量备份,之后只对新增或改动过的数据进行增量备份,此增量备份数据是持续的,而且每个增量备份的数据副本将自动合成为全量快照副本,便于恢复。因此,增量备份与全量快照合成技术能够大幅度减少备份时间,节省备份数据所需的存储空间,且提升了恢复效率。上讯敏捷数据管理平台成本控制体现在节约基础设施成本,自动化流程节约人力成本。梳理敏感数据
对敏感数据进行管理的产品有哪些?节约存储
l分钟级挂载恢复技术ADM压缩保存源端数据库的数据,并保留时间线,方便恢复任意时间点数据。ADM备份的全量快照为原格式,无需格式转换和IO拷贝,可直接挂载到目标主机上快速拉起应用恢复,**技术采用自研的数据库虚拟化技术通过一份数据快照作为基础数据生成黄金副本,快速挂载恢复多个虚拟副本。挂载恢复的方式**缩短了数据恢复的时间,通常业务RTO时间由小时级甚至天级,缩短到分钟级;挂载恢复降低了数据恢复所占用的存储空间,*对新写入的数据计入资源占用;由于挂载恢复速度快增加了数据恢复演练的频率,提高了备份数据有效性验证的工作效率。节约存储
上讯敏捷数据管理平台产品为非生产环境中的数据使用提供了安全性保障。ADM内置了双重敏感数据处理模式,一是通过基于虚拟数据库的方式,实现在闭环供数流程中完成敏感数据的替换;二是数据抽取方式,支持从多种数据源中灵活抽取并进行变形处理。此外,ADM能够自动发现敏感数据,智能定义敏感数据类型,并定位敏感数据...