参数设置
用户提出数据管理产品的上线既要满足云技术的部署带来数据迁移和历史备份数据接管的要求,又要对用户系统更新迭代导致副本数据使用管理需求增加、测试场景需求增加的问题予以解决,因此用户对CDM的部署方式提出了要求:即适应混合多云环境,支持BaaS和订阅的模式部署。敏捷数据管理平台(ADM)产品具备灵活的部署模式,既支持单机部署,也支持高可用部署、多云混合部署,且每个功能均支持在线扩展,具备扩展的便捷性。在混合多云环境中,只需要将ADM在每朵云中进行部署,即可实现备份数据、副本数据的多云间统一管理,并支持在每朵云中创建虚拟数据,实现数据的分钟级快速交付;在云环境中的测试环境,可以利用云主机的快照功能及ADM的虚拟数据功能,达到整个测试环境的版本管理(包括系统、数据),达到数据使用及管理的便利性.上讯信息敏捷数据管理平台ADM产品支持全域重删技术,从而减少需要备份的数据量、缩短备份窗口。参数设置
l数据库数据保护ADM采用图形化向导式操作,无需用户手动执行备份和恢复脚本,简化了备份恢复的难度。既支持传统的无挂载备份,也支持***全量备份、后续长久增量备份与全量快照合成、事务日志同步相结合的方式。数据库备份的基本流程如下:通过管理控制中心(Master)的Web管理页面推送客户端(Client)软件到需要保护的生产服务器上,自动完成客户端软件的安装和注册,与Server服务器端保持通讯。客户端将识别生产服务器中的数据库数据,并通过备份API读取数据库数据,然后将其传输至数据服务节点完成备份。管理控制中心(Master)负责向客户端软件和服务节点发送控制信息,管理整个备份任务的运行。例如:Oracle数据库采用RMAN接口进行多通道并行备份,备份粒度支持整个实例备份,恢复粒度支持细化到选定表恢复。相比于原始数据总容量上讯信息敏捷数据管理平台ADM包括PDM、BDM、SDM、CDM四大功能模块。
上讯敏捷数据管理平台(ADM)既可以封装在敏捷数据管理流程的中间环节,也可以单独作为敏感数据处理的抽取平台,两种模式满足了当前用户对数据处理的全部需求。 提供系统用户角色权限的配置管理,负责系统角色用户功能的划分,操作权限的分配,负责处理任务向上级的申请,上级用户负责审批、转发、会签或驳回以及复核工作的需求。当前系统内置丰富的算法,具备广义的通用型规则,包括字符替换、随机生成、截短、加权生成、加密等;支持保留原有数据含义的仿真型规则,支持中文字典库与编码字典库,保证姓名、身份证号、证件号、地址、组织机构代码等数据的有效性、可用性,算法经优化已处理超长字符截断和重复数据的问题。
数据副本管理是ADM功能模块之一,可单独作为企业级副本数据管理(CDM)产品。为应对当前复杂的IT环境,ADM提出集云、物理、虚拟为一体的,面向结构化数据库、非结构化数据、虚拟化和云平台的***数据副本分发与交付管理解决方案。主要通过数据副本管理的核心专利技术——数据库虚拟化技术对源数据进行CDM原格式获取生成黄金副本、存储黄金副本作为基准数据、虚拟化为多个副本挂载恢复,**终达到快速交付副本数据、灵活管理副本数据版本、集中管理副本数据存储与流转的目标,是主要面向企业数据运维、软件开发测试部门解决自动化闭环取数供数、测试数据快速交付等典型应用场景的问题。上讯ADM产品是集数据备份管理、备份校验管理、数据副本管理、敏感数据处理四位一体的数据管理产品。
在典型的重复数据删除技术中,根据不同的数据备份场景选择适合的重删策略与粒度方案。在确定重删策略与粒度后,会根据输入侧不同粒度(卷级、文件级、块级)的数据采取不同的数据切分策略,并依据任务级与全局指纹库提供自适应源端的全局重删算法与策略,当前支持源端块级、文件级重删和并行重删技术。源端重删是采用基于内容的可变长数据切分算法,通过对数据块进行哈希算法的***标记,即指纹(Fingerprint),在指纹库中寻找相同的指纹。如果存在相同指纹,则表示已保存了相同的数据块,ADM则不再保存此数据块,而是引用已存在的数据块,从而节省更多的备份空间。该算法还可以智能识别已修改的数据和未修改的数据,从而避免因修改数据位移而导致的未修改数据切分到新数据块中的问题,比较大限度地提升重删性能和重删率,为避免数据备份过程中冗余网络传输与存储开销,在源端设置粗粒度前置数据校验可以明显缩小备份传输过程中的数据冗余,目的在于不备份任意一个冗余数据。哪个产品支持向导式的敏感数据处理流程?降低时间成本
副本数据管理CDM产品能针对开发测试场景快速提供测试数据。参数设置
l核心专利技术—数据库虚拟化(1)ADM内置独有的高效压缩存储池,压缩比高达3:1,存储即压缩,***降低了基础数据源获取的存储成本与持续增长的副本数据存储成本。(2)ADM的数据库虚拟化技术,是通过获取一份基础数据源,快速拉起多份虚拟数据库挂载给目标业务使用,虚拟数据库拉起时几乎不占用物理存储空间,在实验室测试环境下拉起一个10TB数据量的虚拟数据库,*占用1GB左右的存储空间,明显节约了存储成本和时间周期,因此针对开发测试场景,需要对同一份数据创建N份副本数据时,存储成本节约近乎N倍。参数设置