Flink在平安银行的应用与实践_compressed.pdf

1、平安银行之偶遇Flink 夏俊伟 Coincidentally Meet of Ping An Bank and Flink 自我介绍 夏俊伟 平安银行大数据平台基础平台领域产品负责人 负责大数据平台基础平台的公共基础产品规划与落地上线 为各个业务线提供离线和实时数据服务 以及大数据平台的产品规范制定 Self Introduction 2000年 平安信用卡中心成立，10元看电影 2012年 平安银行与深发展银行合并，000001 2017年 科技引领，突破零售，对公做精 直销银行，信用卡，网银合并成口袋APP 平安银行零售发展 #2#1#3 Ping An Bank Retail Deve

2、lopment 平安银行零售数据 2017年到2019年的营业收入与 净利润曲线趋势图 2017年到2019年的零售营业收 入，净利润与总全行的占比 44.0%2017 68.0% 2017 Ping An Bank Retail Data 平安银行大数据平台 日均记录数：23亿条 日新增数据：1T 月活数：3000W+ 口袋APP 数据埋点 总服务器：1200台 日新增数据：100T 总容量：80PB 大数据规模 Ping An Bank Big Data Platform 平安银行实时数据平台 数据库与埋点 消息队列接口 HTTP数据采集 实时计算 实时计算E+（Flink） 维度表 输出

3、方式 hive 事件中心实时数仓特征中心风控因子实时监控搜索引擎机器人异常检测 应用平台 实时应用 渠道 口袋APP，口袋银行家，网银，PB展业，小程序，厅堂 API elasticsearch elasticsearch ISC Ping An Bank Real-Time Data Platform 实时数据平台发展演变 Ping An Bank Real-Time Data Platform 自研引擎基于变量的计算 支持单流实时计算 维表关联支持ES 复杂事件计算规则定制化开发 监控告警规则需定制化开发 引入Flink，支持Flink SQL、Flink Jar 支持双流、多流实时计算 丰富的Connectors CEP支持各种复杂模式、规则计算 丰富的监控告警指标 过去 Past现在 Now Flink带来的改变 Changes Brought by Flink 从此前最快t+1小