【对外】【河南移动】网管系统数据库自主可控转型与实践ppt.pdf

1、王明强网管技术专家网管系统数据库自主可控转型研究及实践目 录01网管系统数据库现状02数据库自主可控转型理论研究03数据库平替方案实践01网管系统数据库现状多源、多场景、重载业务 电信行业的网管系统在技术演进和业务需求驱动下，确实呈现出“殊途同归”的趋势。尽管不同运营商、设备厂商的网管系统在架构、功能和实现路径上存在差异，但最终目标逐渐趋同，主要实现平台化、模块化、流程化、自动化的全域网络管理。电信行业网管系统介绍基本网络管理功能 5)运维管理6)安全管理 7)数据管理.1)开通管理2)资源管理3)质量管理4）故障管理030201数据流程复杂数据规模庞大：单库数据量1050TB数据海量日志：单

2、数据库每天TB级日志量数据类型多样：结构化、非结构化、空间数据实时性高：低延时毫秒级响应计算复杂度高：多维度关联分析与集团进行数据交互与地市进行数据交互与其他域进行数据交互网管系统间涉及数据复用海量数据复杂计算Hadoop Hbase mongodb redis ElasticSearch 相同的系统架构的同时，业务系统与数据库也具有相同的特点。数据库是支撑网络监控、配置、故障管理和性能分析的核心基础设施，其设计需满足网络的高复杂性、高负载以及多场景要求。网管并不是独立的很多系统，是一个综合性系统进行功能拆分模块化处理的实践落地。电信行业网管系统数据库特点多源数据融合oralce mysql

3、PostgreSQL doris GreenplumClickHouse02数据库自主可控转型理论研究基于移动网管系统 在网管系统国产化替换过程中，根据河南移动国产化实践将数据库国产化过程总结成九步替换法，将国产化替代从“高风险试错”转变为“可量化、可复制、可审计”的标准化工程。通过标准化流程、降低数据库国产化风险、降低国产化成本、提升替换成功率，加速国产数据库全面落地。调研业务需求，了解现有数据库品牌、架构、高可用要求、业务增长量、代码特点等1、业务调研分析2、架构方案设计3、数据库替换选型4、团队组建分工设计应用系统以及数据库整体架构、数据同步方案、安全方案、备份方案、分库方案等明确数据库

4、整体架构、测试方案等从各个团队协调资源组件项目专项支撑团队、并明确分工界面迁移数据库结构以及数据、并实现SQL语法转换。5、全量数据迁移6、系统应用适配7、上线条件准备8、生产系统割接数据库使用应用系统，并提炼典型场景进行性能压测搭建以及测试生产系统，并编写、审核、验证上线方案按照系统上线方案进行操作，并做应用功能和数据库反向同步验证确定监控告警指标以及日常操作内容合并至自动化运维工具。9、系统后期运维01调研选型03 数据库的自主可控研究02系统替换03后期运维关键节点一般节点 全面理解现有业务与数据库的关系、业务特点、数据库指标、业务增长量等相关技术细节，评估数据库国产化的可性能，同时也为

5、国产数据库选型、架构设计、迁移策略、相关方案提供精准依据。降低替换风险、确保系统的稳定运行。数据库指标应用指标整体架构系统周边生态1.源库类型、品牌、版本。2.数据库架构，应用访问情况。3.峰值期间日志产生量4.数据库内数据量大小；5.数据安全级别以及安全策略。6.gis等特殊场景。1.在数据库端体现为多实例、多用户、多租户方式，各个数据集之间是否需要数据交互2.各个系统之间数据流方式，接口方式、导入导出、实时同步等3.业务增长情况4.备份保留策略5.容灾架构设计1.系统的开发接口以及开发架构。2.业务规划能够接受的RTO以及RPO时间。3.PL/SQL语言存储过程、触发器、Job、函数等。4

6、.业务读写SQL事务比例。5.是否有跑批操作。6.批量导入导出。1.国产操作系统品牌、型号、版本2.国产CPU适配，鲲鹏（ARMv8）、海光、飞腾。3.中间件、加密机、备份软件、同步软件、安全软件等数据库服务器资源1.CPU、内存、IO、网络带宽等资源使用情况。2.数据量增长趋势判定；第一步：业务调研分析 网管系统源数据库主要以oracle为主，PLSQL语言占比较高。所以优先考量硬件资源使用情况以及业务增长、应用系统架构等指标，单个集群在硬件服务器满足资源需求的情况下，鉴于业务改动量最少为前提，优先选择集中式数据库。网管系统在生产数据迁移全部采用柔性迁移方案、数据比对方案，上线全部采用双轨并