• BDP企业级大数据平台
    基于Hadoop分布式计算架构的企业级大数据平台

 

BDP是一款基于Hadoop分布式计算架构的企业级大数据平台。面向数据库,中间件,安全等成熟计算环境,它集成了几十个成熟的Hadoop子项目,整合了资源运维管理和数据处理的流程管理,融合了十几个可直接调用的计算框架模版而最终形成的面对大数据进行存储、计算、查询、建模四大应用方向的基础平台产品。  

 

产品架构

 

 

 

产品特点

 

开放性

Hadoop生态系统的多种版本的互搭、集群异构以及多集群接管,实现针对某一Hadoop组件的单独升级。

 

模块化

模板插件化,方便未来对于复杂框架的整合使用,实现复杂框架的可复用,以提高平台的效率和降低平台使用成本。

 

实时事务

保持高并发下的大规模数据事务的一致性,毫秒级响应多种组合条件下的查询。

 


友好性

实现对外提供HDFS、MapReduce、Hive、Spark、Kafka、Storm等各种大数据相关服务,支持服务框架优化开发,为部署、配置、启动、监控等提供了REST接口,封装上层API,提高Hadoop的使用和开发的友好性。

 

易用性

界面化的数据迁移,高效、便捷的将各类数据源导入到平台中,并支持数据的增量和修改的更新同步,增加平台的数据迁移易用性;支持可视化的数据流处理,降低数据清洗的使用门槛。

 

安全性

提供安全和灵活的访问控制机制,实现平台服务的安全隔离,对平台进行分割,形成服务端与UI的分离,对UI端进行分布式部署,充分保证系统中数据的安全。

 

 

功能描述

市场检验

 

历史数据查询:首次进入金融行业内的核心业务系统,实现双活双集群业务容灾,支撑全行交易数据的实时查询  

现钞冠字号查询系统:对全行现钞的冠字号码及影像数据的采集、存储及全流程跟踪,帮助业务人员迅速定位钞票的行内流转轨迹,符合央行对商业银行现钞监管的政策精神  

征信中心:实现综合数据支撑,多元数据结构的融合储存,解决二维表结构的关联查询性能瓶颈,实现千万级企业关联关系查询,实时响应  

个性化营销支持系统:实现全量业务数据融合存储,实现面向个体的特征抽取,HBase实时高并发支撑能力,数据通过微信端直接支撑一线业务营销