变形数据中间不落地

时间:2024年12月02日 来源:

上讯敏捷数据管理平台(ADM)支持重复数据删除技术,在典型的重复数据删除技术中,根据不同的数据备份场景选择适合的重删策略与粒度方案。在确定重删策略与粒度后,会根据输入侧不同粒度(卷级、文件级、块级)的数据采取不同的数据切分策略,并依据任务级与全局指纹库提供自适应源端的全局重删算法与策略,当前支持源端块级、文件级重删和并行重删技术。源端重删是采用基于内容的可变长数据切分算法,通过对数据块进行哈希算法的标记,即指纹(Fingerprint),在指纹库中寻找相同的指纹。如果存在相同指纹,则表示已保存了相同的数据块,ADM则不再保存此数据块,而是引用已存在的数据块,从而节省更多的备份空间。该算法还可以智能识别已修改的数据和未修改的数据,从而避免因修改数据位移而导致的未修改数据切分到新数据块中的问题,较大限度地提升重删性能和重删率,为避免数据备份过程中冗余网络传输与存储开销,在源端设置粗粒度前置数据校验可以明显缩小备份传输过程中的数据冗余,目的在于不备份任意一个冗余数据。上讯信息敏捷数据管理平台ADM荣获2023年网信自主创新“尖锋榜”产品奖。变形数据中间不落地

变形数据中间不落地,上讯敏捷数据管理平台ADM

敏捷数据管理平台(ADM)由管理控制中心(Master)、数据服务节点(CDMServer)、***服务节点(SDMServer)、客户端(Client)组成,服务节点可通过主备节点部署实现高可用,通过灵活的横向节点扩展实现功能扩展和容量扩充,每个服务节点可以安装在物理服务器或虚拟服务器中。一个或多个客户端连接到服务节点,组成一个完整的数据管理平台,客户端负责收集数据、传输数据,服务节点负责接收数据、存储数据、数据脱敏以及管理数据。敏捷数据管理平台(ADM)由4个模块组成:数据服务节点(CDMServer)包括数据备份模块(PDM)、数据校验模块(BDM)、数据交付模块(TDM)3个模块;***服务节点(SDMServer)包括数据脱敏模块(SDM)1个模块。库到文件上讯敏捷数据管理平台ADM产品能对接NBU直接恢复。

变形数据中间不落地,上讯敏捷数据管理平台ADM

ADM产品测试数据多副本快速交付ADM是国内**早的副本数据管理(CDM)产品,采用数据库虚拟化技术对原始数据库副本(黄金副本)快速生成多个虚拟数据库作为测试数据副本,满足开发测试场景的测试数据快速供应。Ø100倍数据交付效率提升10TB的数据恢复时间由原来的小时级缩短至分钟级;Ø10倍工作效率提升在开发、测试环境中,使用者可随时对虚拟库做快照标记,快照对应着不同时间的数据版本。数据版本管理可进行任意标记的快照切换,降低数据导入或恢复产生的时间成本,大幅提升工作效率。Ø10倍存储空间节省首先内置存储池存储即压缩的机制可实现约3:1的数据存储压缩,同时交付的多个虚拟数据库由于共享于一份原始数据,因此基本不占用额外的存储空间,随着交付虚拟数据库的数量增加,节约的存储空间会成倍增加,实际应用场景中至少为用户节约10倍的存储空间。

传统的备份方案大多采用周期性的“全量备份+增量备份”策略,其增量备份大多不可持续,经过一段时间就必须执行一次全量备份。因而传统的备份方案经常面临备份窗口过大的问题,而且其增量备份数据的恢复效率相对低下,因为每个时间点的恢复都依赖于上一次全备副本和上一次全备副本后的所有增量数据,恢复操作需要进行逐个迭代恢复。此外,过期增量数据的清理操作也受限于备份副本之间的依赖关系,不一定能及时被***。而长久增量备份与全量快照合成技术,即***执行全量备份,之后只对新增或改动过的数据进行增量备份,此增量备份数据是持续的,而且每个增量备份的数据副本将自动合成为全量快照副本,便于恢复。因此,长久增量备份与全量快照合成技术能够大幅度减少备份时间,节省备份数据所需的存储空间,且提升了恢复效率。长久增量备份与全量快照合成技术适用于单个应用数据量大,执行一次完全备份比较费时费力的应用场景。若用户备份数据量小,也可使用传统的全备+增备技术方式,ADM无挂载备份能够实现此方式。上讯ADM通过数据备份后获取到的黄金副本开启数据开发利用的创新流程,充分发挥数字资产价值。

变形数据中间不落地,上讯敏捷数据管理平台ADM

数据孤岛指的是数据被分散、隔离和存储在不同的系统、应用程序或部门中,使得数据之间无法有效地交流、共享或整合的情况。这些数据岛屿形成了一个个孤立的实体,难以互相连接或进行有效的数据分析。上讯敏捷数据管理平台(ADM)通过有效整合企业内各业务系统的数据,实现数据采集、存储、交付和管理的无缝对接,同时利用多项自有技术如数据库虚拟化、数据备份恢复、敏感数据脱敏等,打破了企业内数据孤岛现象,促进了数据资源的共享和高效利用.敏捷数据管理平台虚拟数据秒级分发,提升了环境准备效率,数据交付时间整体节约100倍以上。分钟级恢复时间

数据安全领域数据安全治理的产品有哪些?变形数据中间不落地

敏捷数据管理平台(ADM)由管理控制中心(Master)、数据服务节点(CDM Server)、敏感数据处理服务节点(SDM Server)、客户端(Client)组成,服务节点可通过主备节点部署实现高可用,通过灵活的横向节点扩展实现功能扩展和容量扩充,每个服务节点可以安装在物理服务器或虚拟服务器中。一个或多个客户端连接到服务节点,组成一个完整的数据管理平台,客户端负责收集数据、传输数据,服务节点负责接收数据、存储数据、敏感数据处理以及管理数据。变形数据中间不落地

上一篇: 敏捷开发

下一篇: 资产管理软件

信息来源于互联网 本站不为信息真实性负责