四川农信-借助Greenplum夯实数据底座
    发布时间: 2019-11-08 10:29    

四川农信基于Greenplum搭建行社集市助力数字化建设,支撑BI平台的改造以及满足业务、营销、管理对数据的需求。

四川农信-借助Greenplum夯实数据底座

近些年数据快速增长,业务部门对数据需求更加灵活多样,在满足个性化分析需求下,充分发挥服务器计算性能,缩短数据响应时长。当前集群硬件配置低、集群规模小、数据库版本低以及应用的SQL语句需要优化等诸多问题,导致目前行社集市在跑批性能、并发性能均严重偏低的情况。

 

一、企业介绍

四川农信公司是中国四川省内的一个信用社联合体,其成员包括各县市区的300多家农村信用社和一个城市信用社。该公司成立于1950年,是四川省著名的信用社之一。主要业务包括吸收储蓄,发放贷款,开展资金清算,提供支付结算等个人和企业金融服务。

 

二、解决方案

借助现有的硬件资源、网络环境以及当前对数据应用的需求,评估未来硬件资源需求,并保障通过本次服务器重建、架构设计能满足现有应用需求,奠定数据底座。

  • 构建平台即满足大数据量的ETL过程,还满足对联社的并发要求即对数据库的HATP(数据库的OLAP+OLTP兼顾的能力)的要求。

  • Greenplum升级,提升对HTAP的支持能力

  • 服务器硬件升级,结合Greenplum大幅提升数十倍处理能力

  • Greenplum集群扩容,在保障一定冗余空间下大力提升集群运算能力

 

项目成果

行社集市云的使用特点是大规模的数据加载、关联查询分析,对磁盘的IO能力要求高,本期建设解决如下:

  • Greenplum升级,从根因上消除Greenplum对磁盘IO限制

  • 磁盘IO的读写能力大幅度提升

  • 运算能力相比之前大幅度提升