企业数据存储方式发展趋势:数据仓库-大数据平台-数据湖-湖仓一体

企业数据存储方式发展趋势:数据仓库-大数据平台-数据湖-湖仓一体

早期系统采用关系型数据库来存放管理数据,随着大数据技术兴起,人们对数据分析的需求愈加强烈,于是可以面向分析、集成大量数据的数据仓库(DW)诞生,虽然可以提供保存大量数据,但存储、计算成本相对较高,不好做分布式计算;

之后出现的大数据平台可以提供完善的大数据分析基础运行环境、也支持结构化数据非结构数据化的数据的存储 ,但是数据平台在数据治理中的算力不算那么强劲;

再之后出现计算能力足够强的数据湖,数据湖可以处理所有类型的数据,并且适合深度分析,成本也较低,但由于是直接查询贴源层数据,导致查询性能较慢;

于是有了现在的湖仓一体架构,将数仓和数据湖的优势结合,构建在数据湖低成本的存储架构上,又继承了数仓的数据处理能力。

©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容