kafka

通过部署敏捷数据管理平台ADM产品的数据副本管理模块，实现了测试数据版本迭代管理，提升了数据使用过程中的应用效率。随着移动互联网技术的不断革新，移动应用业务不断扩张，企业面临着前台业务频繁更新升级的现状，为保证既有业务稳定，需要对新提出的升级需求开展仿真测试与回归测试，因此亟需一套能够对测试环境的测试数据进行版本灵活切换的解决方案，便于测试数据版本的即时调用，迅速适应不同业务程序提供不同版本的测试数据。ADM的虚拟数据库快照功能解决了这一问题，通过对数据库状态进行定时或即时的记录，管理和维护当前虚拟数据库的数据，使用人员可以随时通过记录的虚拟数据库快照提供一个版本的测试数据，经过测试后保存当前的数据库使用状态，便于开发测试的数据版本迭代，通过这一功能明显提升了程序升级测试、版本迭代的效率.信息敏捷数据管理平台ADM包括生产数据备份、备份恢复校验、敏感数据处理、数据副本管理四大功能模块。kafka

l数据压缩存储ADM支持同步数据压缩，自动化地将同步数据按照3:1的比例压缩，系统存储空间显示已压缩的容量大小，存储即压缩。l自助式数据服务ADM不仅可以灵活地提供任意时间点的数据，还可以对虚拟数据库进行图形化、自助式的管理。l虚拟数据库集中管控虚拟数据库集中管控是对虚拟数据库在使用过程中的状态进行管理，包括如下功能：①虚拟数据库版本管理②虚拟数据库共享管理③虚拟数据库记录查询l敏感信息智能扫描ADM内置敏感信息匹配库，对数据库的敏感信息进行智能定义扫描，成功发现后自动匹配成敏感类型，以匹配度和敏感信息类型进行灵活排序，避免漏扫。l关联关系保持一致支持对数据库中表间和表内的约束信息和索引信息进行***，支持视图、序列、触发器、存储过程等数据对象的抽取，保持***前后数据关系的一致。个人信息保护法哪个产品支持向导式的敏感数据处理流程？

l异地数据容灾（远程复制）数字化时代，企业进行数据保护，不仅希望能够实现本地数据保护，也要有灾备中心进行异地数据保护。如此，即便本地数据中心遭遇地震、火灾等重大自然灾害或人为操作失误等事故，导致本地备份数据或生产数据发生损坏或丢失时，能够通过异地数据灾备，确保数据可恢复。ADM支持通过远程复制技术，将本地数据同步到异地灾备中心，实现异地数据容灾。基于备份任务，将生产数据备份到本地的存储池，基于远程复制任务，将本地存储池中的备份数据同步到异地存储池中，从而为生产数据提供双重保护，当本地生产数据、或备份数据丢失、损坏时，通过预先设置的容灾策略，在容灾端进行应急接管。

ADM产品数据安全***ADM平台支持静态数据脱敏（涉及数据库、格式化文件、数据库对象、消息队列等），内置104条***算法、47条敏感信息类型匹配库，覆盖个人身份信息、组织机构信息、资质资格证信息、金融数据信息、医疗数据信息、车辆数据信息等众多类别的敏感数据类型识别与仿真***。具备广义的通用型***规则，包括字符替换、随机生成、截短、加权生成、加密等；支持保留原有数据含义的仿真型***规则，支持中文字典库与编码字典库，保证姓名、身份证号、证件号、地址、组织机构代码等***后数据的有效性、可用性。提供基于数据库的库内***和基于ETL的抽取***，提供文件***添加水印功能，提供国产化操作系统的加密算法，满足用户多种***需求。上讯信息敏捷数据管理平台ADM产品支持全域重删技术，重删指纹库重建功能。

通过敏捷数据管理平台ADM产品的部署实施，采用数据库虚拟化技术，快速将数据交付到开发、测试网，有效减少开发、测试场景中测试数据的准备时间，提高了开发、测试环境搭建的效率。ADM内置独有的高效压缩存储池，平均压缩比3:1，存储即压缩，降低了基础数据源获取的存储成本，只需一份基础数据源，即可快速拉起多份虚拟数据库，节约了存储成本10倍以上。ADM通过虚拟数据库快照功能，可以灵活地对虚拟数据库的状态进行管理和维护。使用人员可以随时保存当前的数据库使用状态，用于开发、测试的数据版本迭代。上讯ADM产品的数据备份模块实现了数据库、文件、虚拟化平台的备份恢复。数据副本管理TDM

备份数据是一家企业数据资产的来源，要注重安全防护。kafka

传统的备份方案大多采用周期性的“全量备份+增量备份”策略，其增量备份大多不可持续，经过一段时间就必须执行一次全量备份。因而传统的备份方案经常面临备份窗口过大的问题，而且其增量备份数据的恢复效率相对低下，因为每个时间点的恢复都依赖于上一次全备副本和上一次全备副本后的所有增量数据，恢复操作需要进行逐个迭代恢复。此外，过期增量数据的清理操作也受限于备份副本之间的依赖关系，不一定能及时被***。而长久增量备份与全量快照合成技术，即***执行全量备份，之后只对新增或改动过的数据进行增量备份，此增量备份数据是持续的，而且每个增量备份的数据副本将自动合成为全量快照副本，便于恢复。因此，长久增量备份与全量快照合成技术能够大幅度减少备份时间，节省备份数据所需的存储空间，且提升了恢复效率。长久增量备份与全量快照合成技术适用于单个应用数据量大，执行一次完全备份比较费时费力的应用场景。若用户备份数据量小，也可使用传统的全备+增备技术方式，ADM无挂载备份能够实现此方式。kafka