摘要

近年来,随着利率市场化进程加快,互联网金融发展迅速,传统银行受到新兴互联网金融的冲击衍生出了全新的产品、服务与业态。同时,大数据技术越发成熟,具备更高的性价比、更强的计算存储能力和更易扩展的数据处理能力,能够充分发挥全量数据的价值,是各银行适应互联网金融及大数据时代的必备基础平台。在海南自由贸易港加快建设的背景下,海南某银行通过构建标准一体化的数据平台以加快数字转型,推动金融产品及业务创新,为海南自贸港的高质量发展提供了优质的金融服务支持。

当前,海南某银行正处在业务发展的全新阶段,各种业务模式层出不穷,数据量日益增多,随着业务数据的内容和形式不断丰富,对数据支撑及服务的总体能力提出了更高的要求。为此,基于大数据技术,整合现有行内数据,接入行外数据,搭建并行处理能力强、易于扩展的大数据平台刻不容缓。

海南某银行通过引入MPP数据库集群与Hadoop集群的混搭架构,搭建了低成本、高性能、大容量、易扩展的数据基础平台。其中,MPP数据库集群采用南大通用GBase 8a MPP Cluster作为数据平台的计算引擎层,为整个数据平台提供强大的计算分析能力。

引入GBase数据库构建标准化、高性能的数据平台

海南某银行通过引入南大通用分布式逻辑数仓GBase 8a MPP Cluster + Hadoop集群,搭建低成本、高性能、大容量、易扩展的数据基础平台,实现了结构化、半结构化、非结构化数据的集中采集、存储、加工、分析和应用,并基于这一技术架构重构数据仓库、规范历史数据存储使用,形成了标准化、高性能的基础数据体系,为全行经营管理及业务应用提供了数据支撑。

GBase 数据库助力海南某银行建设高性能数据平台,助力自贸港开发跑出加速度_GBase 数据库

数据平台技术架构图

统一数据平台汇聚了全行主要的业务数据,在流程上,数据平台率先完成共性数据的加工与标准化处理;在此数据基础上,进一步建设灵活、自主、开放、易用、安全的数据自助服务门户,整合数据分析和展示工具等资源,帮助用数部门高效地实现查询、分析等业务目标;同时提升系统开发效率和需求响应速度,快速支撑上层应用对数据的需求。

GBase数据库作为数据中台的计算引擎层,用于实现各类面向主题的模型加工和批处理作业,并提供数据的对外访问能力,在项目建设过程中,展现了领先的性能及架构优势:

易拓展

采用完全并行的 MPP + Shared Nothing 联邦架构能力,为数据平台提供横向的容量和性能扩展能力;

 数据融合

杰出的融合能力实现与Hadoop数据湖间的数据透明交互,构建数据全生命周期湖仓一体化解决方案;

高性能、免维护

采用高性能、 免维护的智能索引技术,索引空间占比不超过1%。智能索引包含列的统计信息,在数据检索定位时可有效过滤数据,大幅降低数据库磁盘 I/O, 大幅提高海量数据的查询性能;

高效数据管理

通过资源池及资源使用计划的灵活配置,实现不同数据库用户的纵向的资源隔离,支持对 CPU、内存、磁盘空间、磁盘 IO、并发任务数等关键资源和指标进行管控;能够提供完善的多租户能力。

应用效果

整个数据平台部署了十余个节点GBase数据库产品,纳管全行PB级的业务数据,支撑全行外部监管、资产负债、业务管理以及风险管理等各项业务领域的应用。面向全行各项业务领域、多个业务场景,提供大数据深度分析及综合应用,为业务经营发展提供了高性能的数据引擎。

支持业务目标:实现数据资源统一管理,全面提升数据服务能力,充分挖掘数据价值,满足全行客户营销、风险管控、经营管理及外部监管需要,推动数据治理,提升数据资源管理水平和数据资产综合应用能力;

低成本和自主可控:基于全国产化的软硬件环境,显著降低建设成本的同时兼顾基础设施的安全可靠,化解平台在运行、维护、升级等方面潜在的外部风险,保障金融数据安全;

业务连续性:采用Shared-Nothing架构,支持不中断业务在线按需扩展,有效保障业务的连续性,为业务创新提供强有力的基础环境支撑;

混搭架构实现全数据汇聚处理:GBase数据库可透明实现异构平台的数据交互,与Hadoop集群共同构建数据全生命周期的湖仓一体化架构。

写在最后

基于GBase数据库的标准化、高性能数据平台在海南某银行的成功落地,是科技与金融的“同频共振”和“双向奔赴”。面向未来,GBASE南大通用将提供更加深入与专业的数据产品与技术服务,在助力用户金融服务提质增效的同时,为海南自贸港的经济高质量发展注入国产科技的创新活力,让自贸港高水平开放跑出“数据”加速度。