【15-B01】苏舒-腾讯基于Flink+ Iceberg 全场景实时数仓的建设实践.pdf

《【15-B01】苏舒-腾讯基于Flink+ Iceberg 全场景实时数仓的建设实践.pdf》由会员分享，可在线阅读，更多相关《【15-B01】苏舒-腾讯基于Flink+ Iceberg 全场景实时数仓的建设实践.pdf（32页珍藏版）》请在三个皮匠报告上搜索。

1、FI基于 pac+e Flink+Iceberg 的实BA仓建设实践 Best practices to build data lake+ouse wit+ pac+e Flink and Iceberg in Tencent 苏舒 FIA据平台部高级工程师 Flin- + Iceberg F建实A数仓 Build real-time data ware+ouse based on Flin- and Iceberg ? 背B及I点 Bac-ground and painpoint ? 数据湖技D Apac+e Iceberg Datala-e tec+nology Apac+e Iceber

2、g ? 未来规划 Future plan? 背景及痛点 B ckground nd p inpoint #1 内部助力用户 Internal booster user QQ 音乐 QQ music 腾讯广告 Tencent ads 腾讯看点 Tencent andian 小程序 wechat applets 视I号 wechat video 数据平台架构 Data platform structure ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? Lambda 架构的痛

3、点 Painpoint in lambda structure ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? Data Source ? Streaming Layer Serving Layer ? ?1+?3 ? ? ? A?e? ?xs?a? ?A?o? ?xs?P? ?2?3? -? ?4?O?4? ?A? ?+ ? ? ?r?T?T? lu4? ?T?r? ?B?4? ? ?xs?4c?x s?n ?xs?y?4? ? ? ?4? ? ?xs? n4?mL? ? lu?t ?xs ? ?xs?ne? ? ? 实时数仓建设的需求 Requiremen- -o build real-ime da-a warehouse ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?