当前位置:首页 > 报告详情

2020Flink峰会报告:【03】李钰&唐云-Flink State-Backend Improvements and Evolution in Recent Year.pdf

上传人: li 编号:29328 2020-12-01 29页 1.69MB

word格式文档无特别注明外均可编辑修改,预览文件经过压缩,下载原文更清晰!
三个皮匠报告文库所有资源均是客户上传分享,仅供网友学习交流,未经上传用户书面授权,请勿作商用。
本文主要讨论了Flink状态后端(Spillable State Backend)的改进和演变,以及RocksDB升级的相关进展。文章指出,Flink状态后端的改进包括控制RocksDB读写内存,实现单个slot的RocksDB实例共享write buffer manager和block cache,以及优化内存申请和释放等。同时,文章也提到了RocksDB升级的一些挑战,如性能回归和内存管理最佳实践等。此外,文章还讨论了如何避免内存溢出问题,以及如何修改内存配置来避免OOM killed问题。最后,文章展望了未来的工作,包括HeapBackend的改进和Flink状态后端的优化等。
"Flink状态存储升级进展如何?" "RocksDB内存管理最佳实践是什么?" "如何避免Flink中内存溢出问题?"
客服
商务合作
小程序
服务号
折叠