icon开发测试环境的测试数据交付是主要痛点icon

长期以来,开发测试场景一直是金融业数据使用频繁的典型应用场景,受到金融用户重点的关注。当前,随着互联网金融、移动业务的激增,开发测试的需求变更频繁,需要大量的业务副本数据用于开发测试、版本升级、回归测试等业务,相较于以往的测试造数,当前测试域更倾向于通过生产数据脱敏后供数的方式,一方面可以保证测试数据符合业务系统的测试条件,另一方面可以及时与最新的系统开发版本保持一致,提高开发测试与版本迭代的效率。因此,如何满足开发测试环境对数据的申请要求、如何提升数据交付的效率、如何安全管理交付的数据等,是开发测试部门主要的业务需求,通过满足这些需求,既能提升数据使用的效率,又能保障数据使用的安全,实现数据使用安全与效率的双重保障,业务上实现缩短系统上线周期的绩效目标。

icon测试数据交付需求分析icon

通过对银行软件开发中心测试环境数据的交付和管理业务进行调研分析,总结出以下普遍需求:

1、要求缩短测试数据的交付时间

项目的开发及测试是有时间周期的,由于数据量较大、数据申请较为频繁,一般一份数据的准备时间在一周左右,等待数据的时间较久,此问题不解决,将会成为开发测试提升效率的瓶颈。所以,如何提升数据副本的交付效率,是开发测试场景中首先要考虑的需求。

2、要求满足不同的数据申请需求

对于开发测试业务而言,数据的需求是多样的,有的要求某个时间点的数据;有的要求当天或前一天的数据;针对新上线的业务系统,还会有造数的需求。针对不同的数据申请需求,要求全部满足,需要考虑多种数据获取方式。

3、要求敏感数据使用前进行脱敏

在使用数据的时候,既需要考虑到敏感数据的安全性问题,又需要考虑到工作效率问题,因此,在对数据交付使用前,需要对敏感数据做相应的处理工作。需要做到自动扫描发现敏感信息,还需要做到对敏感数据的仿真脱敏,以使得敏感数据脱敏后满足实际数据使用要求。

4、要求数据使用流程闭环

开发测试使用的数据,多为从生产系统中获取的数据,基于安全和效率考虑,需要将数据获取、数据存储、数据交付、数据管理、数据回收实现全流程的闭环管理。

5、要求对副本数据进行高可用保护

交付到开发测试环境的数据,虽说是经过处理的副本数据,但对于开发测试人员来讲,该数据为测试基准数据,需要考虑到副本数据的保护问题,一旦发生故障,能够快速恢复副本数据,不影响副本数据的正常使用。

iconADM产品简介 icon

敏捷数据管理平台软件(ADM)是上海上讯信息技术股份有限公司(以下简称“上讯信息”)自主研发的,主要面向金融、运营商、政府、能源、医疗等行业打造的全生命周期数据安全管理软件产品,用于数据备份、备份数据恢复验证、测试数据交付和静态数据脱敏等应用场景,可为企业上、中、下游数据的高效使用和安全管控提供一套整体解决方案。

iconADM测试数据使用管理解决方案 icon
iconADM测试数据使用管理解决方案说明icon

通过对金融用户测试数据的需求分析,提出如下方案:

1、考虑到数据的多种获取方式及数据的闭环管理,在生产域、备份域和测试域分别部署一台敏捷数据管理平台ADM Server: 生产域的ADM Server用于直接备份生产数据,以获取实时性的副本数据; 备份域的ADM Server用于从NBU/CommVault备份系统中获取备份数据,以获取任意时间点的副本数据; 测试域的ADM Server用于接收生产域或者备份域处理后的副本数据,以用于测试环境的数据交付域。

2、生产域、备份域均属于生产网络,而测试域属于测试网络,两个网络是独立的,考虑到安全性与数据的传输效率,需将生产网络与测试网络单向打通。

3、生产域的ADM Server可用于实时备份有频繁交付数据需求的业务系统,可实现备份集备份、原格式备份两种备份方式。

4、备份域的ADM Server可用于从NBU/CommVault备份系统中获取任意时间点的备份数据,并且在获取数据的同时,也可以帮助用户解决备份数据恢复校验的问题。

5、测试域的ADM Server可用于满足开发/测试环境的数据交付、测试数据版本管理、测试数据版本切换、测试数据回收等需求。

icon核心专利技术 icon

数据库虚拟化技术:数据源>3:1比率压缩存储、虚拟数据无限副本、虚拟数据分钟级创建、秒级分发。

iconADM测试数据方案效益对比 icon
icon信创国产化互认证明 icon
icon解决方案用户收益 icon
测试数据快速交付提升测试效率
敏捷数据管理平台ADM采用创新型技术——数据库虚拟化技术几分钟内创建完成虚拟数据库,快速将已经脱敏过的数据作为黄金副本传输到测试网,有效减少开发测试场景中测试数据的准备时间,提高了开发测试环境搭建的效率;多份虚拟数据库读写操作独立,完全满足测试环境多场景同步测试的需求。
测试数据版本灵活管理
ADM快照功能,可以灵活对虚拟数据库的状态进行管理和维护,便于开发测试的数据版本迭代。动态快照的使用保证了虚拟数据库持续对外提供服务,不影响测试业务的连续性。
测试数据系统可视化管理
测试环境的数据,版本繁多,传统人为创建副本保存的测试数据,很难形成有效的数据血统管理,通过ADM的部署,利用可视化的结构拓扑图,可以清晰展现数据版本间的血统关系,对数据的使用一目了然。
测试数据存储压缩
ADM内置独有的高效压缩存储池,压缩比达3:1,显著降低了基础数据源获取的存储成本,一份基础数据源,可挂载多份虚拟数据库,节约了存储成本10倍以上,快照共享降低了持续增长的副本数据存储成本。
测试数据集中统一管理
测试数据具有数据副本多、数据版本多的特性,人为管理容易形成较多的僵尸数据,造成存储资源的浪费,通过ADM管理测试数据,可以形成闭环流程,集中统一管理测试数据的交付与版本管理,提升数据管理效率的同时,杜绝了僵尸数据的产生。
数据脱敏保证金融数据安全
ADM平台具备数据脱敏管理模块,可实现自动扫描识别敏感数据,精准定位敏感数据源,提供丰富的仿真脱敏算法,保证脱敏后的数据关系一致,异构和并发脱敏提升了数据脱敏的效率,降低了数据泄露的风险。 ADM的数据副本管理与数据脱敏管理可以实现良好的联动,不仅能够快速准备脱敏数据源,还能实现脱敏数据的快速分发。
icon金融业案例 icon
ADM构建数据安全交付管理平台
提升测试数据交付速度,加快开发测试业务处理效率,缩短业务上线周期 敏感数据自动识别,隐私数据高仿真度脱敏,防护数据安全,降低存储资源成本,降低用户TCO 灵活管理数据版本,高效切换版本满足测试需求。
icon经典案例 icon
中信银行股份有限公司
全面兼容生产与测试环境基准数据的数据源类型,获取方式灵活便捷 减少人为操作,提高测试数据交付速度,加快测试数据交付效率,集中统一的数据管理流程,方便测试数据审计与环境资源的回收利用 高效压缩存储池显著降低存储成本,高可用架构部署,管理节点实现故障后的快速切换,保证服务和数据持续交付。
icon经典案例-广州银行股份有限公司 icon
01
副本数据管理(CDM)与静态数据脱敏(SDM)为一体的综合数据管理平台
02
测试数据安全、快速交付,高效压缩存储池显著降低存储成本
03
数据管理流程集中统一,快照共享保证严格的测试数据版本管理
04
敏感数据自动识别,精准定位,依据类型加以分类
05
敏感数据高仿真脱敏,丰富的脱敏算法保证脱敏数据的完整性与逻辑保持
icon金融业案例 icon
产品推荐 查看更多>>
    数据安全运维中心【DSOC】

    数据安全运维中心产品,可有效帮助IT人员管理各类安全产品服务器和设备,提升IT运维效率。 同时也可作为各安全系统的统一入口,实现各系统间的一键登录与跳转访问。

    安全防护

    安全可靠

    数影星球贷后催收外包安全管理解决方案

    数影星球贷后催收外包安全管理解决方案,自动识别业务系统中的敏感数据,并进行自动化脱敏。通过数影专属安全浏览器访问贷后催收管理系统,在浏览器内核级别实现系统的完全安全可控管理。禁用开发者权限,防爬虫,安全访问,防远程共享。

    自动脱敏

    防爬虫

    安全访问

    数据爬取

    昂楷科技数据安全综合治理平台

    昂楷科技数据安全综合治理平台通过友善的可视化界面、自学习的能力等,实现对复杂威胁的联动联防、降低安全防护工作人员的操作难度和工作量,实现快速、高效、可持续性发展的防控效果。

    安全可靠

    功能完备