2021年4月27日 • 作者:DataPipeline
4月22日,「2021第六届亚太银行数字化创新博览会」在上海举行。本届论坛以“加速数字化,引领银行业务创新”为主题,吸引了中国人民银行、农业银行、国家开发银行等银行业代表及金融科技精英、学术咨询专家参会,旨在集结业界先锋,协力推动银行业科学高效、可持续地数字化转型发展。
DataPipeline应邀参会并凭借全自主研发的“企业级实时数据融合平台”在金融领域持续的创新成果、丰富经验及口碑美誉度,在众企业中脱颖而出,斩获由亚太银行联盟颁发的科技创新大奖!
△DataPipeline荣获科技创新奖
主论坛中,DataPipeline合伙人&CPO陈雷发表《实时数据管理,下一代金融数字化创新基础设施》的主题演讲,他表示:
“新一代技术的爆发式增长正在推动整个产业生态加速发展,作为银行数字化创新基础设施的数据管理技术也在不断进化。其中,实时数据管理平台成为十分必要且重要的组成部分,预测将来会进一步被扩展为全银行综合性平台。DataPipeline企业级实时数据融合平台可以帮助用户把多源异构数据库之间的实时的数据流打通,极大降低了用户自建的时间精力和难度,而自建预计时间能达到6~8个月。”
△DataPipeline合伙人&CPO陈雷演讲
陈雷回顾分享了近二十年银行业数据管理在技术推动下的发展历程及未来预测,这大致分为六个阶段。从最早期单一的银行交易系统,到业务分析系统的出现,再到数据仓库、大数据平台的兴起。当前,随着互联网、物联网等技术的深入,及智慧风控、运营优化等新的业务需求,大数据平台传统的T+1模式已不能满足银行业务系统和外部生态等实时打通的数据管理要求,实时数据管理将成为下一代金融数字化创新基础设施,实时数据平台建设正当时。
长远预测,实时数据管理平台将会因交易系统向业务主线系统的演进、数字孪生在行业内的应用、业务驱动等原因进一步被扩展成为全银行综合性平台,实时数据管理体系建设任重道远。
△银行业数据管理技术发展历程
对此,陈雷分享了DataPipeline的深入思考和实践经验。据介绍,DataPipeline实时数据融合平台具备以下四大特点:
1. 支持主流关系型数据、大数据平台及国产数据库
支持例如Oracle实时日志解析的数据同步、DB2等主流数据库,openGauss、TiDB、SequoiaDB巨杉等国产数据库,同时支持包括星环大数据平台等数据库管理技术和API等的其他数据接口类型。
2. 配置式链路定义,无代码任务构建提升实时数据敏捷性
使用分层管理、按需服务的配置型平台来提升 IT 敏捷开发效率。产品采用B/S架构,全页面化配置,数据融合任务的研发交付时间低至5分钟。一方面保证数据节点的安全性、稳定性、业务连续性,一方面为数据应用提供更多的自主性,使用户可以将数据获取的范围、数据任务的生命周期、系统资源投入的多寡等权限更多地交给实际使用数据的业务部门及应用开发人,从而在业务需求变化时从容应对,加速达成数字化转型目标。
3. 丰富全面的运维监控与管理守护任务稳定运行
通过任务监控模块监控系统级任务运行状态,支持提供图形化的监控页面,支持重要任务、故障任务监控、性能监控、关注任务的实时监控、同步延迟监控、表级别数据量监控与核对;丰富的系统级任务运行统计与任务级实时运行报告,报表可按照任务、系统等维度进行统计及展现、导出等功能;灵活丰富的运行控制配置满足各类场景要求,读取写入限制降低源目标压力、资源组保障重要任务运行、任务分组方便管理。
4. 分布式引擎、组件级高可用保障实时链路稳定高容错
融合引擎采用分布式架构,容器化部署。可以保证系统业务连续性要求。在分布式集群的基础上,采用系统资源组的形式隔离不同任务的运行环境,保障重要任务的稳定有序运行。
此次荣获银行数字化科技创新奖,是银行业界对DataPipeline在行业做出突出贡献的重要表彰。DataPipeline自成立以来,不忘初心,始终专注于实时数据融合领域,至今已服务了中国人寿、民生银行、山东城商行联盟、财通证券、中国石油、吉利集团、星巴克、顺丰等在各自行业信息化水平领先的客户。凭借业内领先的技术、卓越的产品表现和成熟的行业解决方案,DataPipeline获得「A100数智中国榜:TOP企业IT基础设施数智化方案」、「DTCC:年度技术卓越奖」、「创新互联网企业TOP100」、「大数据产业创新服务产品」等荣誉。
未来,DataPipeline将继续深化自身在实时数据融合领域的研究,持续助力多行业用户数字化转型。“我们非常专注这一件事,就是打造实时数据处理中间件产品。基于数十人的专职研发团队成果及阿里、华为、腾讯等产业上下游合作伙伴的生态力量,我们现已基本可以替代传统外商的实时数据采集技术。”陈雷表示。