kafka
通过敏捷数据管理平台ADM产品的部署实施,采用数据库虚拟化技术,快速将数据交付到开发、测试网,有效减少开发、测试场景中测试数据的准备时间,提高了开发、测试环境搭建的效率。ADM内置独有的高效压缩存储池,平均压缩比3:1,存储即压缩,降低了基础数据源获取的存储成本,只需一份基础数据源,即可快速拉起多份虚拟数据库,节约了存储成本10倍以上。ADM通过虚拟数据库快照功能,可以灵活地对虚拟数据库的状态进行管理和维护。使用人员可以随时保存当前的数据库使用状态,用于开发、测试的数据版本迭代。上讯敏捷数据管理平台ADM产品高效压缩存储池,节省大量存储资源。kafka
备份校验管理是上讯敏捷数据管理平台ADM功能模块之一,主要用于对接第三方备份系统进行备份数据的自动化恢复校验,保证备份数据的可恢复性、完整性。通过对接备份系统(如NetBackup、Commvault、NetWorker等)集中管理存储资源、恢复服务器资源和恢复任务,实现存储空间、恢复服务器和恢复任务的自动调度,从而完成备份数据有效性验证的全自动化。备份校验管理可以满足用户对当前备份数据的可恢复性验证、恢复后的完整性验证两方面的需求,能够覆盖用户全部业务系统的备份数据恢复验证需求,自动化实现跨操作系统平台Unix到Linux的数据恢复,实现验证工作的高覆盖率,提高备份数据有效性验证的频率。备份数据自动恢复验证上讯ADM能提供面向企业数据使用的成本控制、版本管理与合理合法开发利用。
上讯敏捷数据管理平台ADM可实现针对数据库的数据保护,ADM采用图形化向导式操作,无需用户手动执行备份和恢复脚本,简化了备份恢复的难度。既支持传统的无挂载备份,也支持全量备份、后续增量备份与全量快照合成、事务日志同步相结合的方式。数据库备份的基本流程如下:通过管理控制中心(Master)的Web管理页面推送客户端(Client)软件到需要保护的生产服务器上,自动完成客户端软件的安装和注册,与Server服务器端保持通讯。客户端将识别生产服务器中的数据库数据,并通过备份API读取数据库数据,然后将其传输至数据服务节点完成备份。管理控制中心(Master)负责向客户端软件和服务节点发送控制信息,管理整个备份任务的运行。例如:Oracle数据库采用RMAN接口进行多通道并行备份,备份粒度支持整个实例备份,恢复粒度支持细化到选定表恢复。
数据备份面临存储成本高的问题,ADM采用内置高效的压缩存储池存放数据,压缩比约为3:1,存储即压缩,降低了备份数据的存储成本;其次,通过ADM的数据库虚拟化技术,一份基础数据即可快速拉起多份虚拟数据库,由于虚拟数据库90%的数据均与原始数据相同,因此拉起时几乎不占用额外的物理存储空间,只对新增的写操作计入容量占用,因此,随着数据分发使用的场景和频率增加,虚拟库的数量越来越多,而存储成本将会呈倍数级节约,例如针对同一份数据创建N个虚拟库,传统方法需要N倍的存储空间占用,而通过ADM只需要占用近乎0TB的存储空间,节约了数据存储环节的资源和成本。上讯ADM产品的成本控制体现在节约存储资源降低存储成本,自动化流程节约了人力成本。
敏捷数据管理平台(ADM)由管理控制中心(Master)、数据服务节点(CDM Server)、敏感数据处理服务节点(SDM Server)、客户端(Client)组成,服务节点可通过主备节点部署实现高可用,通过灵活的横向节点扩展实现功能扩展和容量扩充,每个服务节点可以安装在物理服务器或虚拟服务器中。一个或多个客户端连接到服务节点,组成一个完整的数据管理平台,客户端负责收集数据、传输数据,服务节点负责接收数据、存储数据、敏感数据处理以及管理数据。上讯敏捷数据管理平台ADM产品能对接NBU直接恢复。跑批
上讯敏捷数据管理平台ADM产品可对数据进行清洗漂白处理,保证隐私数据信息安全。kafka
l分钟级挂载恢复技术ADM压缩保存源端数据库的数据,并保留时间线,方便恢复任意时间点数据。ADM备份的全量快照为原格式,无需格式转换和IO拷贝,可直接挂载到目标主机上快速拉起应用恢复,**技术采用自研的数据库虚拟化技术通过一份数据快照作为基础数据生成黄金副本,快速挂载恢复多个虚拟副本。挂载恢复的方式**缩短了数据恢复的时间,通常业务RTO时间由小时级甚至天级,缩短到分钟级;挂载恢复降低了数据恢复所占用的存储空间,*对新写入的数据计入资源占用;由于挂载恢复速度快增加了数据恢复演练的频率,提高了备份数据有效性验证的工作效率。kafka