2022年11月22日 • 作者:
随着金融业数据应用落地加速,金融机构对前后台业务效率要求提升,加速构建创新型数据基础设施建设成为组织支撑核心系统、提升金融产品与服务创新的重要战略。国盛证券与DataPipeline携手打造数据库同步软件,成为行业典范,并于近期入选中国信息协会评选的《2021-2022大数据创新成果与实践》。
国盛证券有限责任公司(以下简称:国盛证券)是一家业务牌照齐全的综合性券商,其197余家分支机构遍及29个省(市)、自治区。随着公司数字化转型进程逐步深入,“驱动高效的管理决策、支撑更及时的客户关系管理、提升客户服务体验、赋能精准营销”的相关业务对数据时效性要求也越来越高,对多元异构数据的统一采集、数据实时同步的需求也越来越紧迫。其数据中台中再先的数据库同步时效率和监控运维等能力已不能适应当前业务的发展需求。DataPipeline协助国盛证券构建的数据库同步软件秉持DataOps理念,可实现实时数据的采集、融合与同步,夯实了数据管理中的“最初一公里”。该系统在异构数据实时同步的准确性、系统的稳定性、易用性等方面效果突出,为证券行业数据创新管理提供了新的借鉴。
DataPipeline助力国盛证券打造的数据库同步软件打通了客户交易、客户基本信息、用户行为数据、外部数据等若干系统,适配了其包括Oracle、MySQL、MS SQL Server、HBase、Hive、Kafka在内的多种数据库管理技术。该系统可以助力用户管理异构数据节点实时同步与批量数据处理任务的定义。系统组件全面实现了高可用,用户可以根据对可用性的要求,灵活进行组件节点的部署,避免单点故障。
同时,该数据库同步软件的可管理性较之前有明显提升。根据客户分层管理的需求,系统内资源被抽象为节点、链路、任务、资源,每一层都可以进行独立的管理和授权,在组织内部形成很强的协同性。用户可以在链路上定义字段类型映射、限速、告警等策略,并应用到任务层面,从而实现层级化的精细管理。与此同时,系统配备容器、应用、线程、业务四级监控体系,系统内部的所有重要事件、告警信息都能够推送到用户定义的邮箱、文件路径或Webhook中,从而与企业既有的运维监控体系无缝集成。
随着该数据库同步软件的深入使用,数百个数据任务为快速响应客户服务、优化产品带来实时敏捷的数据支撑,从而对模式创新、组织能力变革及商业价值提升带来推动力。
当前,以数据库同步软件为代表的的创新型数据基础设施已成为金融行业的必然选择。国盛证券与DataPipeline的合作已见成效,希望为更多金融机构数据创新业务提供实践经验。