子集的敏感数据处理
在国家大力发展信创的背景下,实现国产化软硬件部署已成为企业的**诉求,其中逐步建立覆盖国产化数据库、操作系统、虚拟化平台的国产化数据保护体系,实现备份数据自动化恢复验证成为当前数据保护系统的迫切需求。同时,以金融和运营商行业为例,其开发测试部门需要频发测试验证,对数据使用频率较高,因此形成了大量不同版本的测试数据,这部分数据体量庞大,动辄几百GB甚至几十TB,管理难度较大。国家日趋重视对数据隐私的安全管控,数据脱敏成为企业数据安全治理的重要方向。敏捷数据管理平台ADM产品数据信创产品,实现了国产数据库的备份与国产操作系统的兼容。子集的敏感数据处理
ADM平台具备根据管理人员、测试需求等内容的不同进行分组划分的功能,将处理过的数据进行分组管理,从下游测试数据管理的源头管控数据资源的类别,做到从源头划分类别,使下游测试数据管理形成上游数据源-中游数据中转-下游数据目标的闭环式数据使用流程,规范化的数据流程使数据管理者成为数据的负责人,自动化的资源管理也更有效地为金融行业用户提供安全的数据管理方案。同时,ADM提供对数据流转的树状拓扑结构图,可详细了解数据的来源、所属存储池、挂载的测试服务器,以及数据快照的层级关系,方便对系统全局的数据使用结构进行预览,通过可视化的结构拓扑图,帮助用户了解下游测试网中测试数据的归属关系,完善数据流转路径,优化数据资源的合理分配,可视化功能的动态展示将助力企业向着智能化数据安全治理的方向转型。主流操作系统上讯信息敏捷数据管理平台ADM产品的数据存储池采用压缩存储、加密传输。
在数据收集和使用上,通过获取一份具有应用一致性保证的“黄金副本”,分钟级虚拟化为多个副本直接挂载使用,数据使用效率明显得到提升;在数据存储和传输上,这些虚拟数据副本相对原始存储几乎不占用存储空间(约为0),且ADM产品将全部数据集中存放在统一的存储池中,既保证了数据传输流转的闭环管控,又降低了数据的存储成本;在数据加工上,数据脱离生产环境之前增设了敏感数据处理环节,保障数据公开后的隐私安全,防止核心数据泄露;在数据的提供和公开上,虚拟数据副本可用于准生产、测试环境等场景的数据交付,每一份虚拟数据都是互不影响的,并且可读可写,数据在经过变更后可标记快照,多个快照之间可以任意切换实现数据版本的管理。
并行重删技术是在多个不同的节点上构建指纹库,并将指纹并行分布于多个节点,采用内存级指纹库进行重删,所有指纹读写全部保存于内存中,从而提升指纹查询和处理效率,并且减少了因磁盘中指纹库增大所导致的随机IO压力。以此识别并消除数据备份过程中数据源中重复的数据,该技术适用于不同平台中的文件、数据库、虚拟机等不同应用类型的数据,可以大幅度减少需要传输的数据量,从而极大地节省数据传输带宽,解决单点性能和存储空间压力。ADM的敏感数据处理灵活性体现在异构引擎可以将大数据平台数据抽取至多类型数据库,满足输出格式多样化。
上讯敏捷数据管理平台(ADM)数据异地容灾主要解决本地数据同步到异地,实现异地数据保护的目标。通过制定容灾策略将本地ADM中的数据同步到异地ADM中,容灾的数据类型包括存储池中的全部备份数据和虚拟副本数据,容灾类型支持实时容灾和定时容灾,根据生产数据的容灾需求制定合理的容灾策略,保证为生产数据提供双重保护。当本地生产数据或备份数据丢失、损坏时,立即启用容灾端接管业务,备份策略自动注册到容灾端管理控制中心(Master),自动接管备份任务,保证备份任务的持续不间断运行。CDM主要应用于金融、运营商、能源、交通、卫生、事业单位等行业。集中管控
副本数据管理CDM产品能针对开发测试场景快速提供测试数据。子集的敏感数据处理
通过部署敏捷数据管理平台ADM产品的数据副本管理模块,实现了测试数据版本迭代管理,提升了数据使用过程中的应用效率。随着移动互联网技术的不断革新,移动应用业务不断扩张,企业面临着前台业务频繁更新升级的现状,为保证既有业务稳定,需要对新提出的升级需求开展仿真测试与回归测试,因此亟需一套能够对测试环境的测试数据进行版本灵活切换的解决方案,便于测试数据版本的即时调用,迅速适应不同业务程序提供不同版本的测试数据。ADM的虚拟数据库快照功能解决了这一问题,通过对数据库状态进行定时或即时的记录,管理和维护当前虚拟数据库的数据,使用人员可以随时通过记录的虚拟数据库快照提供一个版本的测试数据,经过测试后保存当前的数据库使用状态,便于开发测试的数据版本迭代,通过这一功能明显提升了程序升级测试、版本迭代的效率.子集的敏感数据处理