信创公共服务平台欢迎您!

联系方式:0531-82369898

当前位置: 信创案例 > 案例详情
中国农业银行数据仓库项目——海量数据复杂运算处理
本项目通过MPP数据库技术和Hadoop技术的混合使用,搭建组成了国内金融行业最大的数据仓库和大数据平台,支撑数据超过20PB,集群规模1200多台服务器。核心系统、信贷、财务、投资、电子银行等120多个业务系统,主库、集市及挖掘环境均使用GBase 8a集群。共2100多个节点,其中主库(169+8)*2节点,数据集市8个,分别为个人客户集市、对公客户集市、财务数据集市、监管数据集市、风险数据集市、运营风控集市、审计内控集市和分行数据集市。 截至目前,数据总量超过20PB ,单库裸数据超过5PB,每日增量4.7TB, 38W张表,最大表超过2.5万亿行,每天运行15000+个的库内加工作业,历时8小时。帮助客户实现数据价值在业务应用中转变为生产力,构建数据价值利用的有效闭环,真正实现从数据支撑到数据运用的转变。
吉呗思( 济南)信息技术有限公司
信创基础软件
发布日期:2023-10-30 17:58:19
详情介绍:

本项目通过MPP数据库技术和Hadoop技术的混合使用,搭建组成了国内金融行业最大的数据仓库和大数据平台,支撑数据超过20PB,集群规模1200多台服务器。核心系统、信贷、财务、投资、电子银行等120多个业务系统,主库、集市及挖掘环境均使用GBase 8a集群。共2100多个节点,其中主库(169+8)*2节点,数据集市8个,分别为个人客户集市、对公客户集市、财务数据集市、监管数据集市、风险数据集市、运营风控集市、审计内控集市和分行数据集市。

截至目前,数据总量超过20PB ,单库裸数据超过5PB,每日增量4.7TB, 38W张表,最大表超过2.5万亿行,每天运行15000+个的库内加工作业,历时8小时。帮助客户实现数据价值在业务应用中转变为生产力,构建数据价值利用的有效闭环,真正实现从数据支撑到数据运用的转变。

images/2/2023/10/FQ833YTv85ZTMavQm3XAXMxqxVXax8.png


价值体现


l  海量数据管理:为用户提供了并行海量复杂数据处理平台,帮助客户形成PB级以上的业务数据单一视图,为客户提供及时高效的数据分析结果;

l  满足监管需求:通过对数据统一的管理与治理,满足上层监管部门对上报监管数据的要求,保证数据的准确性、及时性、完整性;

l  通过数据指导业务:通过数据仓库的建立,对数据在生命周期内有效和高效的管理,通过对数据的收集与分析,满足客户市场营销、内部管理、内外监管的分析业务需求;

l  支撑银行领域数据观念转变:随着数据技术和分析理论的发展,要求银行分析业务必须从抽样数据向全体数据,从绝对到效率,从原因分析到相关性分析转变。数据仓库的建立很好的支撑了这种转变。

l  创新的大数据平台架构:将MPP数据库技术和Hadoop技术的混合使用并搭建组成大数据平台,是金融行业的大数据技术架构和应用的创新,该项目也荣获中国银行保险监督管理委员会颁发的二等奖。

产品推荐