集搜客GooSeeker网络爬虫

标题: 什么是数据湖(Data Lake) [打印本页]

作者: 马涌河畔 时间: 2021-11-8 14:42
标题: 什么是数据湖(Data Lake)
在几篇文档里都看到 Data Lake 数据湖，这个词是指什么？

作者: 内容分析应用 时间: 2021-11-8 14:44
什么是数据湖
数据湖是一种在系统或存储库中以自然格式存储数据的方法，它有助于以各种模式和结构形式配置数据，通常是对象块或文件。数据湖的主要思想是对企业中的所有数据进行统一存储，从原始数据（源系统数据的精确副本）转换为用于报告、可视化、分析和机器学习等各种任务的目标数据。数据湖中的数据包括结构化数据（关系数据库数据），半结构化数据（CSV、XML、JSON等），非结构化数据（电子邮件，文档，PDF）和二进制数据（图像、音频、视频），从而形成一个容纳所有形式数据的集中式数据存储。

数据湖从本质上来讲，是一种企业数据架构方法，物理实现上则是一个数据存储平台，用来集中化存储企业内海量的、多来源，多种类的数据，并支持对数据进行快速加工和分析。从实现方式来看，目前Hadoop是最常用的部署数据湖的技术，但并不意味着数据湖就是指Hadoop集群。为了应对不同业务需求的特点，MPP数据库+Hadoop集群+传统数据仓库这种“混搭”架构的数据湖也越来越多出现在企业信息化建设规划中。

作者: 内容分析应用 时间: 2021-11-8 14:50
Data Lake Analytics
Data Lake Analytics是Serverless化的交互式联邦查询服务。无需ETL，使用标准SQL即可分析与集成对象存储(OSS)、数据库(PostgreSQL/MySQL等)、NoSQL(TableStore等)数据源的数据

[attach]15189[/attach]

更多内容，参加知乎文章《数据湖(Data Lake)总结》

欢迎光临集搜客GooSeeker网络爬虫 (http://120.55.75.51/doc/)