国产化内核技术
备份是一个长期的过程,恢复往往只在事故发生后进行,且备份数据的可恢复性、可用性在很大程度上依赖于备份数据的完整性。为了保证备份数据的可用性,很多企事业单位会定期进行数据库备份的恢复演练,也就是从备份数据中恢复出一套完整的数据库。执行备份数据的恢复操作,需要备份系统管理人员或者数据库管理人员(DBA)对数据的备份恢复实现原理有深入的了解,并周期性地对备份数据进行恢复操作,以保证备份数据的可恢复性与可用性。这种长期机械性、重复性的备份、恢复及验证工作,无疑会占用DBA大量的时间和精力。在DBA界还流传着这么一句话:“故障一定会发生,只是早晚的问题!”。作为一名DBA,只有时刻记得进行备份和恢复校验,才能避免某一天事故发生时出现难以挽回的悲剧.
上讯信息敏捷数据管理平台ADM产品的数据存储池采用压缩存储、加密传输。国产化内核技术
近年来,证券业务快速发展,信息系统变更日益频繁,敏捷开发、快速迭代已经成为支持业务创新的必要条件。数据库作为信息系统运行的重要支撑,数据准备和交付的自动化程度对系统开发、测试效率有大的影响。Gartner对CDM的定义是,它从生产环境通过快照技术获取有应用一致性保证的数据,在非生产存储上生成“黄金副本”(GoldenImage),这个“黄金副本”数据格式是原始的磁盘格式,可再虚拟化成多个副本直接挂载给服务器,分别用于备份恢复、容灾或开发测试等.数据的一致性备份数据的开发利用是唤醒大量沦为暗数据的备份数据,让数据备份即可用。
并行重删技术是在多个不同的节点上构建指纹库,并将指纹并行分布于多个节点,采用内存级指纹库进行重删,所有指纹读写全部保存于内存中,从而提升指纹查询和处理效率,并且减少了因磁盘中指纹库增大所导致的随机IO压力。以此识别并消除数据备份过程中数据源中重复的数据,该技术适用于不同平台中的文件、数据库、虚拟机等不同应用类型的数据,可以大幅度减少需要传输的数据量,从而极大地节省数据传输带宽,解决单点性能和存储空间压力。
ADM产品生产数据备份恢复与异地容灾对生产数据包括数据库、文件、虚拟化平台、容器、云服务器等进行备份,对带库进行数据归档,支持长久增量备份、数据压缩存储、加密传输、重复数据删除等技术,采用挂载恢复方式,恢复时间为分钟级、恢复粒度为秒级。支持数据远程复制实现异地容灾,对备份数据进行双重保护。
ADM产品备份数据自动化恢复与有效性验证ADM可以对接备份系统如NetBackup、CommVault、NetWorker等,检索备份策略自动恢复备份数据和备份文件,完成验证输出结果。全自动化恢复验证,可以满足用户对当前备份数据的可恢复性验证、恢复后的完整性验证,覆盖备份数据和备份文件的恢复,支持虚拟挂载恢复和物理恢复双重方式。 敏捷数据管理平台虚拟数据秒级分发,提升了环境准备效率,数据交付时间整体节约100倍以上。
当前,有效的保障数据安全的方式仍然是数据备份,即企业针对生产业务的数据、文件制定备份策略生成备份数据,一旦业务数据发生丢失或损坏,则恢复备份数据提供业务访问,传统的数据备份方案并未提供数据的恢复验证手段,因此企业在发生数据丢失时,启用备份数据恢复失败的案例屡见不鲜,这也给各行业客户造成了巨大的经济损失和不良的社会影响,为满足法律的合规性要求,备份数据的恢复验证成为备份恢复解决方案的必要需求,但由于备份数据量巨大、涉及业务系统繁多、专业人员数量有限,定期的备份数据恢复验证仍然是一道难题,上讯敏捷数据备份恢复验证解决方案为备份数据的恢复验证提供了创新的技术手段,包括备份数据的分钟级快速恢复、秒级可用性验证、按计划周期性定时自动恢复验证,保障了备份数据的可恢复性与可用性。上讯信息敏捷数据管理平台ADM荣获2023年网信自主创新“尖锋榜”产品奖。重复性的备份
上讯信息敏捷数据管理平台ADM产品的数据备份模块通过创建虚拟副本实现了本机、异机的即时挂载恢复。国产化内核技术
通过智能定义敏感数据类型,自动发现和识别敏感数据,包括数据类型、内容、约束关系,灵活排序减少人为筛选,定位敏感数据源。丰富的算法与仿真的字典库相结合,保证处理后数据仍具有业务属性,数据表间关系仍具有业务一致性,不影响数据挖掘分析数据价值。对涉及企业、个人信息的隐私数据,包括资金财产、个人、企业隐私的对照关系进行敏感数据识别,通过内置的规则进行处理,将数据敏感部分去隐私化,但并不失去数据挖掘的价值特征,减少数据隐私泄露带来的风险和损失,甚至降低可能发生的人身伤害和违法犯罪事件。国产化内核技术