当前位置:首页 > 报告详情

2020Flink峰会报告:7-朱广彬-360ULTRON-FFA2020-TSY.pdf

上传人: li 编号:29340 2020-12-01 36页 390.90MB

word格式文档无特别注明外均可编辑修改,预览文件经过压缩,下载原文更清晰!
三个皮匠报告文库所有资源均是客户上传分享,仅供网友学习交流,未经上传用户书面授权,请勿作商用。
本文主要介绍了基于Flink的实时数据仓库平台Ultrion的设计与实现。Ultrion平台能够处理高峰期约50Gb/s的实时数据,业务消费处理带宽200Gb/s,处理消息大约700WT/s,日处理量超过千亿T。文章详细阐述了实时报表、实时监控、实时模型反馈与策略控制的重要性,并从Storm到Flink的变革,介绍了实时数据仓库架构的演进。Ultrion平台实现了批流一体的数仓架构,基于Flink SQL进行作业开发,提供了统一Hive UD管理,实现了实时Drui+与Presto的结合。此外,文章还讨论了微服务架构、平台无关性,以及未来服务架构的趋势。
实时数据仓库如何实现批流一体? Flink SQL如何优化作业开发? 微服务架构如何实现平台无关性?
客服
商务合作
小程序
服务号
折叠