蚂蚁金服数据分析平台.pdf

《蚂蚁金服数据分析平台.pdf》由会员分享，可在线阅读，更多相关《蚂蚁金服数据分析平台.pdf（47页珍藏版）》请在三个皮匠报告上搜索。

1、www.an tfi n .c om * 仅限内部交流使用 如果需要公开，请联系文档作者 演讲人：杨军 蚂蚁金服-数据平台部 数据分析平台 平台演进及数据分析方法应用 www.an tfi n .c om * 仅限内部交流使用，如果需要公开，请联系文档作者 目录.CONTENTS 怎么来：数据分析平台演进历史 怎么做：数据分析平台3.0详解 PART / 03PART / 02 做什么：数据分析领域简介 PART / 01 我是谁：个人简介 我们是谁：数据平台部简介 能干什么：数据分析驱动数据分 析平台性能优化 PART / 04 www.an tfi n .c om * 仅限内部交流使用，如

2、果需要公开，请联系文档作者 简介 01个人介绍及数据平台部介绍 * 仅限内部交流使用，如果需要公开，请联系文档作者 杨军 花名：悟迷（心悟成佛，心迷成魔，_） 11年实习入职，12年正式入职，主要经历了ETL、实时计算、批流统一的 网站日志处理框架等方面的工作。 14年进入蚂蚁财富，主要参与招财宝，保险，众筹，基金等核心业务建 设，在基金主导建设并切换蚂蚁自己的基金销售交易清算平台阿基米德。 16年回归数据进入蚂蚁数据平台，带领团队建设数据分析平台引擎层， 落地数据分析方法论。 目前负责数据安全与合规，在大数据的道路上继续潜行。 01个人简介 * 仅限内部交流使用，如果需要公开，请联系文档作者

3、 02数据平台部简介(1/3) RDS OB 日志 消息 OSS 文件 数据同步 DB日志解析同步 （DRC） 日志文件同步 （SLS） 通用同步工具 （DataX） 同步中心 （DTM） ? 批量计算 （ODPS，Spark，Raya） ? 实时流式计算 （Kepler，Spark Streaming） ? 机器学习 （PAI，TensorFlow） 一站式数据研发平台一站式AI研发平台 业务运营及PD 分析师 数据科学家 业务技术 数据应用 报表展示 （知数据APP） 数据分析 （DeepInsight） 挖掘预测 （PAI） 数据决策 （DecisionX） 数据采集与传输数据存储与计算数据应用与消费 * 仅限内部交流使用，如果需要公开，请联系文档作者 02数据平台部简介(2/3) 基础框架 多环境适配租户/账户体系权限流程数据源 核心能力 数据安全隐私保护数据质量元数据中心数据治理