Hadoop简介

Hadoop : Hadoop是Apache基金会旗下的一个分布式系统基础架构.主要包括 : 分布式文件系统HDFS,分布式资源管理系统Yarn.可以使得用户在不了解分布式底层细节的情况下,开发分布式程序,充分利用集群的分布式能力进行运算和存储

Hadoop核心构成

分布式文件系统HDFS

   Hadoop分布式文件系统(HDFS)能提供对数据访问的高吞吐量,适用于大数据场景的数据存储,因为HDFS提供了高可靠性(多副本),高扩展性和高吞吐量的数据存储服务

资源管理系统Yarn

   Hadoop Yarn的基本思想是将资源管理和作业调度监控功能进行分离,是一个统一资源管理系统,可为运行在Yarn之上的分布式应用程序提供统一的资源管理和调度

HDFS和YARN的具体介绍有单章介绍~

我每天会写文章记录大数据技术从入门到精通,可以关注我的公众号"SmallBird技术分享",我们一起学习分享,并且回复'分享'会有大数据资源惊喜等着你~

©著作权归作者所有,转载或内容合作请联系作者
平台声明：文章内容（如有图片或视频亦包括在内）由作者上传并发布，文章内容仅代表作者本人观点，简书系信息发布平台，仅提供信息存储服务。

推荐阅读更多精彩内容

  • Hadoop 入门系列：Hadoop 简介
    Hadoop（http://hadoop.apache.org/）是 Apache 开源组织的一个分布式计算开源框...
    Alex90阅读 353评论 0赞 0
  • 一些概念
    【什么是大数据、大数据技术】 大数据，又称巨量资料，指的是所涉及的数据资料量规模巨大到无法在合理时间内通过传统的应...
    kimibob阅读 2,789评论 0赞 51
  • hadoop简介
    一. 什么是hadoop hadoop是一个具有分布式存储和分布式计算能力的分布式软件系统 hadoop基本特点 ...
    quanzongwei阅读 3,443评论 0赞 1
  • Hadoop简介
    Hadoop概述 Hadoop是一个适合海量数据存储的分布式存储和分布式计算的平台。 Hadoop Modules...
    coderLumia阅读 534评论 0赞 0
  • 经常失败怎么办，考试没考好，工作不顺心究竟该怎么办？
    没关系，你只管加油！XiaoAi读书 人生永远都是在面对挑战， 在接受挑战并得到结果的时候以为终于可以安定， 却忘...
    411dfb0a3aee阅读 384评论 0赞 2