敏感数据处理

在典型的重复数据删除技术中，根据不同的数据备份场景选择适合的重删策略与粒度方案。在确定重删策略与粒度后，会根据输入侧不同粒度（卷级、文件级、块级）的数据采取不同的数据切分策略，并依据任务级与全局指纹库提供自适应源端的全局重删算法与策略，当前支持源端块级、文件级重删和并行重删技术。源端重删是采用基于内容的可变长数据切分算法，通过对数据块进行哈希算法的***标记，即指纹（Fingerprint），在指纹库中寻找相同的指纹。如果存在相同指纹，则表示已保存了相同的数据块，ADM则不再保存此数据块，而是引用已存在的数据块，从而节省更多的备份空间。该算法还可以智能识别已修改的数据和未修改的数据，从而避免因修改数据位移而导致的未修改数据切分到新数据块中的问题，比较大限度地提升重删性能和重删率，为避免数据备份过程中冗余网络传输与存储开销，在源端设置粗粒度前置数据校验可以明显缩小备份传输过程中的数据冗余，目的在于不备份任意一个冗余数据。上讯敏捷数据管理平台ADM产品可对数据进行清洗漂白处理，保证隐私数据信息安全。敏感数据处理

ADM支持Oracle/MySQL/DB2/SQLServer/PostgreSQL/Informix/达梦/南大通用GBase/人大金仓KingBase/OpenGauss/MogDB/VastBase/丛云/TDSQL/OceanBase/GaussDB(forOpenGauss)/GaussDB(DWS)分布式容灾功能；支持华为云与阿里云的云服务器ECS、云数据库RDS备份恢复；***保护VMware/SmartX/浪潮/华为FC/云宏WinStack/OpenStack/浪潮云InCloudOpenStack等虚拟化平台，支持虚拟化备份和细粒度的挂载恢复，VMware备份无需在虚拟化平台或者各个虚拟机上安装客户端，只需通过VMware代理客户端连接虚拟化平台即可；支持Hadoop等大数据平台的备份恢复；支持自适应源端的全局重删算法与策略，支持任务级与全局指纹库；针对文件备份提供文件粒度与块级粒度的全域重删且支持重删指纹库重建功能，支持多线程文件备份，支持海量小文件场景下的聚合策略，提供并行扫描和高速索引，从而减少需要备份的数据量、缩短备份窗口、节省备份数据传输所消耗的网络带宽以及节约备份数据存储空间；备份传输过程采用压缩加密处理，缓解网络传输的压力，增加网络抖动或短时间断链的超时容错机制，确保备份数据的安全；医学影响图片变形信息敏捷数据管理平台ADM包括生产数据备份、备份恢复校验、敏感数据处理、数据副本管理四大功能模块。

敏捷数据管理平台备份数据有效性验证场景及价值：场景：备份数据是数据安全一道防线，大部分用户在生产网络中已部署了如NBU、Commvault等常见备份系统，为了保证备份数据的可恢复性及可用性，需要经常对备份数据做恢复校验，而手动恢复校验比较耗时耗力，因此导致了做备份数据恢复校验的频率不够。价值：采用ADM实现备份数据的恢复校验，可以将NBU、Commvault等备份系统的备份策略导入到ADM平台中，并根据备份策略创建不同的恢复任务，且恢复任务可以进行恢复排期，帮助用户实现自动化的周期性的备份数据恢复校验，节约了大量的人力成本，且增加了备份数据恢复的频率，为备份数据的可恢复性可用性提供了更好的保障。

ADM平台具备根据管理人员、测试需求等内容的不同进行分组划分的功能，将处理过的数据进行分组管理，从下游测试数据管理的源头管控数据资源的类别，做到从源头划分类别，使下游测试数据管理形成上游数据源-中游数据中转-下游数据目标的闭环式数据使用流程，规范化的数据流程使数据管理者成为数据的负责人，自动化的资源管理也更有效地为金融行业用户提供安全的数据管理方案。同时，ADM提供对数据流转的树状拓扑结构图，可详细了解数据的来源、所属存储池、挂载的测试服务器，以及数据快照的层级关系，方便对系统全局的数据使用结构进行预览，通过可视化的结构拓扑图，帮助用户了解下游测试网中测试数据的归属关系，完善数据流转路径，优化数据资源的合理分配，可视化功能的动态展示将助力企业向着智能化数据安全治理的方向转型。国内排名靠前的CDM厂商是哪家？

数据闭环式流转与安全管控，保证全生命周期数据资产管理ADM贯穿数据收集、数据存储、数据加工、数据传输、数据使用、数据提供、数据回收的各个环节，集中管理存储资源、服务器资源，实现闭环式自动化管理流程，统一授权和全程监控，节省大量人力资源开销，减少了数据恢复的重复性工作，自动化流程任务编排降低了人为因素导致的数据泄露风险。基于数据库虚拟化技术，ADM实现了对数据库、文件、虚拟机等副本的分钟级创建，通过存储级快照快速保留数据副本的状态，实现数据版本的保留，跟踪数据流向。同时，数据副本支持时效性设置，当数据副本超出使用期限，ADM平台会自动停止使用或回收资源，实现对数据资产的全生命周期统一管理。数据备份产品关注数据备份，上讯敏捷数据管理平台ADM产品能用于数据的备份与快速恢复验证。耗时较长

副本数据管理CDM产品能针对开发测试场景快速提供测试数据。敏感数据处理

（1）国产化数据备份系统兼容性不足当前国产化数据保护系统对国产化数据库、文件、虚拟化平台、容器、云服务器等备份源类型兼容不***，适配过程中需要更多的时间进行功能稳定性验证。（2）数据备份恢复验证耗时耗力当前采用NetBackup等集中备份系统备份的数据需采用手动恢复数据，过程繁琐、重复度高、专业性强，耗费大量的时间和人力成本。（3）数据交付时间长不论是通过数据恢复还是数据拷贝来提供测试数据，需要几小时到几周的时间。（4）占用大量存储资源数以千计的数据副本占用大量存储资源，需要更多的维护成本。（5）数据版本回退困难开发、测试环境中，当完成一轮跑批测试或功能调试后，重置数据状态需要重新导入数据或重新恢复数据，回退数据产生的时间成本巨大。（6）数据安全风险真实数据被用于测试使用后无法及时回收和销毁，造成资源浪费，存在敏感信息泄露的安全风险。（7）敏感数据安全隐患生产数据库中存在着大量的敏感信息，传统的手工***效率低、仿真度差、***不完全，交付给测试环境后存在隐私泄漏的风险。敏感数据处理