数据接口的管理

数据资源可视化管理，有效满足上中下游数据的政策合规ADM平台具备根据管理人员、测试需求等内容的不同进行分组划分的功能，将***过的数据进行分组管理，从下游测试数据管理的源头管控数据资源的类别，做到从源头划分类别，使下游测试数据管理形成上游数据源----中游数据中转----下游数据目标的闭环式数据使用流程，规范化的数据流程使数据管理者成为数据的负责人，自动化的资源管理也更有效地为金融行业用户提供安全的数据管理方案。同时，ADM提供对数据流转的树状拓扑结构图，可详细了解数据的来源、所属存储池、挂载的测试服务器，以及数据快照的层级关系，方便对系统全局的数据使用结构进行预览，通过可视化的结构拓扑图，**帮助用户了解下游测试网中测试数据的归属关系，完善数据流转路径，优化数据资源的合理分配，可视化功能的动态展示将助力企业向着智能化数据安全治理的方向转型。敏捷数据管理平台ADM可提高数据全生命周期的使用效率、降低成本，并保证数据使用安全。数据接口的管理

上讯敏捷数据管理平台适用场景：数据交付速度慢的开发测试部门企业通过交付生产数据辅助第三方业务决策，如开发/测试环境、统计分析、准业务系统环境搭建等，交付生产数据的方式是通过生成业务系统数据副本，而副本的准备通常需要几小时，甚至几天不等，严重拖延了项目进度。

备份数据的有效性验证效率低的运维部门，大部分企业对其**业务系统进行了数据备份，为了检验备份数据的有效性，以及满足相关法律法规的要求，企业对备份数据采取周期性的恢复验证；由于企业的业务系统繁多，而人员相对紧缺，验证工作需要大量重复性动作，成为企业当前面临的一大挑战。

数据副本分散存放难以管理的数据中心数据副本一旦被交付使用，就**存在于使用环境中，随着数据使用场景的日益增多，数据副本在非生产环境中逐渐累积，**分散的存放方式导致副本的辨识度不高，后续使用与销毁难度明显增大。同时，重复存放现象严重造成了存储资源的浪费。u隐私数据泄露风险高的用户无论是通过生产数据库导出，还是通过备份系统恢复，都能够直接获取到企业的**生产数据，其中包含企业内部机密数据和客户个人隐私信息，一旦发生泄露将带来严重后果，不仅影响企业的名誉，也会造成一定的经济损失。 变量数据ADM数据脱*支持敏感数据定义识别与仿真脱*，保障数据流转环节的安全性。

l分钟级挂载恢复技术ADM压缩保存源端数据库的数据，并保留时间线，方便恢复任意时间点数据。ADM备份的全量快照为原格式，无需格式转换和IO拷贝，可直接挂载到目标主机上快速拉起应用恢复，**技术采用自研的数据库虚拟化技术通过一份数据快照作为基础数据生成黄金副本，快速挂载恢复多个虚拟副本。挂载恢复的方式**缩短了数据恢复的时间，通常业务RTO时间由小时级甚至天级，缩短到分钟级；挂载恢复降低了数据恢复所占用的存储空间，*对新写入的数据计入资源占用；由于挂载恢复速度快增加了数据恢复演练的频率，提高了备份数据有效性验证的工作效率。

信息化时代，“数据”的应用较为频繁，海量数据的组成中，备份数据占有很大比例，而这些备份数据在没有发生故障时往往是被搁置不用的，被称为“暗数据”。而对业务数据的分析、统计、运维等操作都会直接作用在业务服务器，如此将会对业务性能产生影响，不利于业务系统的高效使用。如何做到解放业务系统，使其专注于业务处理上，也是IT管理者需要考虑的另一个现实问题。备份需要从业务系统中获取数据，统计、分析需要从业务系统中获取数据，研发、测试需要从业务系统中获取数据。这些数据从业务系统中拷贝出来后，如果得不到有效的管控，将会给企业带来安全隐患，这也是用户需要考虑解决的又一现实问题。ADM支持全库脱*与子集脱*，支持异构数据库脱*，保证核*生产数据中间不落地。

管理控制中心（Master）是ADM的集中管理和调度控制中心，是进行可视化管理的Web操作平台。它负责集中管理ADM中的所有模块组件，系统管理员、安全管理员、操作员通过管理控制中心的Web管理页面协调并执行各个角色对应的操作；数据服务节点（CDMServer）是提供数据备份与恢复、备份数据恢复验证、副本数据创建和交付、数据复制容灾功能的服务节点。用于记录数据服务任务的配置信息、存储情况、历史记录等，数据服务节点统一通过MasterIP访问；***服务节点（SDMServer）是提供数据脱敏的服务节点，用于记录接入平台的敏感数据源、数据脱敏策略、***任务记录等信息，***服务节点统一通过MasterIP访问。客户端（Client）*针对数据服务节点（CDMServer）需要保护及管理的生产服务器、目标服务器，如物理服务器、虚拟机等都统称为客户端。为方便与管理控制中心进行网络通信和数据传输，一般会在客户端上安装客户端软件。客户端软件负责响应管理控制中心（Master）的命令，执行数据备份和恢复等指令。客户端软件可通过管理控制中心（Master）进行Web页面的推送安装与注册。***服务节点（SDMServer）无需安装客户端软件。ADM主要由数据备份管理、备份校验管理、数据副本管理、数据脱*管理四大功能模块组成。可视化拓扑图

ADM是对数据的采集、传输、存储、使用、流转、管理等关键环节进行效率和安全双重保障的数据管理平台。数据接口的管理

在典型的重复数据删除技术中，根据不同的数据备份场景选择适合的重删策略与粒度方案。在确定重删策略与粒度后，会根据输入侧不同粒度（卷级、文件级、块级）的数据采取不同的数据切分策略，并依据任务级与全局指纹库提供自适应源端的全局重删算法与策略，当前支持源端块级、文件级重删和并行重删技术。源端重删是采用基于内容的可变长数据切分算法，通过对数据块进行哈希算法的***标记，即指纹（Fingerprint），在指纹库中寻找相同的指纹。如果存在相同指纹，则表示已保存了相同的数据块，ADM则不再保存此数据块，而是引用已存在的数据块，从而节省更多的备份空间。该算法还可以智能识别已修改的数据和未修改的数据，从而避免因修改数据位移而导致的未修改数据切分到新数据块中的问题，比较大限度地提升重删性能和重删率，为避免数据备份过程中冗余网络传输与存储开销，在源端设置粗粒度前置数据校验可以明显缩小备份传输过程中的数据冗余，目的在于不备份任意一个冗余数据。数据接口的管理