MySQL跨云容灾探索与实践.pdf

1、MySQL跨云容灾的探索与实践徐华华华为云计算技术有限公司Security Level:HUAWEI TECHNOLOGIES CO.,LTD.Huawei Confidential 2数据来源:https:/ 2011.04.21 AWS北弗吉尼亚州的云计算中心宕机 2011.06.29 AWS位于美国东部的数据中心出现故障 2012.10.22 AWS位于北维吉尼亚的网络服务中断 2012.12.24 AWS位于美国东部的弹性负载均衡服务中断 2014.11.26 AWS CloudFront DNS服务中断 2015.09.20 AWS的一个数据中心遭遇停电事故 2016.08.06 A

2、WS澳大利亚因停电中断服务 2017.02.28,AWS最稳定的云存储服务S3出现“超高错误率”的宕机事 2018.11.24 AWS韩国S3 API处于不可用状态 2019.08.23 AWS东京(AP-NORTHEAST-1)区域大量EC2和EBS服务中断 2020.11.25 Kinesis服务出现问题,大量网站受到影响 2021.09.02 AWS日本东京地区服务性能受到严重影响 2021.12.07 AWS的US-EAST-1服务区域故障故障回顾故障原因特点HUAWEI TECHNOLOGIES CO.,LTD.Huawei Confidential 3容灾系统的构建RPO:数据恢复

3、点，主要指的是业务系统所能容忍的数据丢失量RTO:恢复时间，主要指的是所能容忍的业务停止服务的最长时间，也就是从灾难发生到业务系统恢复服务功能所需要的最短时间周期核心技术快照技术+远程镜像、快照技术+实时CDC技术+高速复制技术主要问题数据一致性、数据安全、恢复效率、业务透明、高可用性核心技术故障切换能力、故障诊断能力、负载均衡、集群技术主要问题双主脑裂、数据回补、操作幂等、访问限流、资源问题数据容灾应用容灾建立一个异地的数据系统，该系统是本地关键应用数据的一个可用复制基于数据容灾在异地建立一套完整的与本地生产系统相当的备份应用系统 成熟稳定、高可靠性、可扩展性、透明性、低成本规划原则恢复速度

4、业务系统恢复时间要尽可能短成本采取不同容灾技术以免造成不必要的成本消耗侵入性对原有业务系统带来的影响(磁盘IO、网络、CPU)数据安全建立可靠的数据同步校验机制容灾系统规划HUAWEI TECHNOLOGIES CO.,LTD.Huawei Confidential 4容灾系统架构(理想型)HUAWEI TECHNOLOGIES CO.,LTD.Huawei Confidential 5场景限制能力成本开通新Region的云服务Web服务器、应用服务器、数据库、其它相关云服务等冗余部署数据库等数据的同步复制工具业务代码不改造业务可用性优先预算充足机房级故障+Region级故障RPO秒级，RTO

5、分钟级业务可接受数据最终一致性业务可接受一定的网络延迟容灾容灾系统架构(理想型)HUAWEI TECHNOLOGIES CO.,LTD.Huawei Confidential 6容灾系统架构(经济型)HUAWEI TECHNOLOGIES CO.,LTD.Huawei Confidential 7选型与方案评估 数据库规格选型 数据库部署方案 应用及中间件改造方案 容灾辅助系统方案 数据实时复制方案 日常演练方案 数据修复方案 2容灾构建 数据库实时复制 数据一致性定时对比 数据库定时预热 应用镜像构建 容灾管理系统部署 4日常演练&维护 应用镜像更新维护 应用部署演练 数据库容灾切换演练 监

6、控告警校准 业务压力测试.51业务前期分析 业务子系统可用性等级分析 业务子系统依赖关系分析 业务子系统降级预案分析 数据库性能、容量分析 3辅助系统 应用探活 监控告警 配置中心 DNS切换 容灾管理.跨云容灾整体流程HUAWEI TECHNOLOGIES CO.,LTD.Huawei Confidential 8数据库跨云容灾整体架构HUAWEI TECHNOLOGIES CO.,LTD.Huawei Confidential 9数据库跨云容灾面临的挑战成本和高可用跨AZ高可用部署与数据检验机制导致成本升高据库库引擎差异SQL语法兼容性，性能差异性能和事务原子性业务原子性，性能鲁棒性特殊D