《Denodo：2024架构师电子书系列：逻辑数据仓库的数据虚拟化报告（20页）.pdf》由会员分享，可在线阅读，更多相关《Denodo：2024架构师电子书系列：逻辑数据仓库的数据虚拟化报告（20页）.pdf（20页珍藏版）》请在三个皮匠报告上搜索。

1、架构师电子书系列：逻辑数据仓库的数据虚拟化第 1 章逻辑数据仓库逻辑数据仓库3-5第 2 章逻辑数据仓库的通用模式逻辑数据仓库的通用模式第 5 章信息自助服务和发现信息自助服务和发现第 6 章构建数据服务市场构建数据服务市场第 3 章逻辑数据仓库的性能逻辑数据仓库的性能第 4 章逻辑数据仓库安全性和逻辑数据仓库安全性和治理治理第 7 章逻辑数据仓库客户成功逻辑数据仓库客户成功案例案例资源资源架构师电子书系列：逻辑数据仓库的数据虚拟化67-1011-1415-1617-1819202第 1 章逻辑数据仓库架构师电子书系列：逻辑数据仓库的数据虚拟化3 简而言之，逻辑数据仓库是一种数据系统，其中涵括

2、传统企业数据仓库的概念，同时包含一个（或多个）核心数据仓库以外的其他数据源的数据。逻辑数据仓库体现出了某种技术上的进步，但并不取代目前的数据仓库实践。事实上，逻辑数据仓库使 IT 组织能够通过查询工具和应用程序生成大量可供分析的数据集和数据源，同时改善决策制定并节约成本。以上图 1 就是逻辑数据仓库的定义及部署原因（亦参见图 1）。允许集成多个数据源，包括企业系统、数据仓库、其他处理节点、Web 服务、云和非结构化数据。IT 组织能够通过查询工具和应用程序生成大量可供分析的数据集。为什么选择逻辑数逻辑数据仓库据仓库(LDW)？何为逻辑数据逻辑数据仓库仓库(LDW)？逻辑数据仓库是一种数据系统，

3、其沿袭传统企业数据仓库(EDW)理念，并包含一个（或多个）核心数据仓库(DW)以及其他外部数据源的数据。图 1逻辑数据仓库是一种用于分析的全新数据管理架构，结合了传统存储仓库的优势与替代的数据管理和访问策略。逻辑数据仓库的定义及部署原因逻辑数据仓库的定义及部署原因第 1 章架构师电子书系列：逻辑数据仓库的数据虚拟化4逻辑数据仓库逻辑数据仓库演讲者：演讲者：Denodo 战略技术部高级总监Paul Moxon观 看 视 频观看视频观看视频所示为逻辑数据仓库架构，显示了数据虚拟化层作为底层异构数据存储之上的抽象化层和语义层的作用。请注意，出于非监理用途，可直接访问数据（通常为存储在 Hadoop

4、中的数据），并非所有访问都需要通过数据虚拟化层。如果用户需要出于调查等目的而访问原始数据（非监理数据），则不应该强制他们通过数据虚拟化层进行访问。图 2图 2直接访问非监理数据实时数据访问（按需实时数据访问（按需/流式）流式）（Flume,Kafka 等）等）数据湖数据湖云端数据仓库（Redshift 等）NoSQL分析设备数据服务抽象化转换联合数据存储与分析数据存储与分析数据源数据源数据收集数据收集数据虚拟化数据虚拟化数据洞察数据洞察优化数据缓存数据搜索与发现元数据管理、数据治理、数据安全云应用程序企业应用程序传感器数据机器数据（日志）社媒数据点击流数据网络数据图像和视频企业内容（非结构化）

5、实时决策管理警告记分卡仪表板数据发现自助式搜索报告 预测分析统计分析(R)文本分析数据挖掘SqoopETLODS（操作数内存中（SAP Hana 等）据存储）企业数据仓库图 2使用使用 Denodo 平台的逻辑数据仓库架构平台的逻辑数据仓库架构第 1 章架构师电子书系列：逻辑数据仓库的数据虚拟化5 逻辑数据仓库数据虚拟化YARN/工作负载管理HDFSSpark Drill ImpalaTezMapRed.HiveStorm HBaseSolrHunk数据仓库数据仓库CDC安全治理批处理数据仓库搜索SQL流NoSQL搜索 逻辑数据仓库逻辑数据仓库的通用模式的通用模式演讲者：演讲者：Denodo首

6、席技术客户经理Pablo lvarez观 看 视 频观看视频观看视频第 2 章 逻辑数据仓库的通用模式图 3多次部署逻辑数据仓库之后，我们发现六种通用模式（图 3），每种模式都有不同的基本需求，都能为决策、成本节约和简化带来全新方案。这六种模式是：逻辑数据仓库的六种通用模式逻辑数据仓库的六种通用模式虚拟数据虚拟数据逻辑数据逻辑数据仓库模式仓库模式集市集市数据仓库数据仓库+主数据管理主数据管理数据仓库数据仓库+云云数据仓库历史数据仓库历史数据仓库数据仓库+数据仓库数据仓库卸载卸载精简数据精简数据仓库扩展仓库扩展通过主数据扩展数据仓库集成多个数据源，打造对通过云数据扩展数据仓库业务友好的数据模型数