20. CDH版HADOOP简介及版本选择

官网对于CDH的解释

CDH is Cloudera’s 100% open source platform distribution(平台发行版), including Apache Hadoop and built specifically to meet enterprise demands. CDH delivers(提供) everything you need for enterprise use right out of the box(开箱即用). By integrating (整合)Hadoop with more than a dozen other critical(关键) open source projects, Cloudera has created a functionally(功能) advanced(先进) system that helps you perform (执行)end-to-end Big Data workflows.

我们学习工作中,学习一项新技能,一定要先看它的官网,并尝试翻译它。很多问题官网的解释往往是最权威和准确的,其他资料来源都有可能因为添加了个人理解而出现误差。而且翻译官网会提升我们的英文翻译能力,这在开发和运维工作中是尤为重要的

Cloudera Manager

Cloudera Manager官网链接
The recommended tool for installing Cloudera Enterprise
Cloudera Manager makes it easy to manage Hadoop deployments of any scale in production. Quickly deploy, configure, and monitor your cluster through an intuitive UI - complete with rolling upgrades, backup and disaster recovery, and customizable alerting.
Cloudera Manager is available as an integrated and supported part of Cloudera Enterprise.

This download installs Cloudera Enterprise or Cloudera Express.(意思是说下载cloudera MANAGER 之后会安装 Cloudera Enterprise 或者 Cloudera Express.)
Cloudera Enterprise requires a license; however, when installing Cloudera Express you will have the option to unlock Cloudera Enterprise features for a free 60-day trial.
Once the trial has concluded, the Cloudera Enterprise features will be disabled until you obtain and upload a license.

翻译:
用于安装Cloudera Enterprise的推荐工具
Cloudera Manager可以轻松管理生产中任何规模的Hadoop部署。 通过直观的UI快速部署,配置和监控集群,包括滚动升级,备份和灾难恢复以及可自定义的报警。
Cloudera Manager作为Cloudera Enterprise的集成和支持部分可用。

我们解释一下上文提到的 Cloudera Enterprise,这是CDH的收费版,我们常用的版本叫做 Cloudera Express ,这是免费版
选择何种版本是在安装完Cloudera MANAGER 后进入图形界面进行选择

Cloudera Manager 结构

官网cloudera Manager5 overview

Cloudera Manager 结构

Cloudera Manager 的架构如上图所示(cs结构),主要由如下几部分组成:

  • 服务端/Server:
    Cloudera Manager 的核心。主要用于管理 web server 和应 用逻辑。它用于安装软件,配置,开始和停止服务,以及管理服务运行的集群。

  • 代理/agent:
    安装在每台主机上。它负责启动和停止的进程,部署配置,触发安装和监控主机。

  • 数据库/Database:
    存储配置和监控信息。通常可以在一个或多个数据库服务器上运行的多个逻辑数据库。例如,所述的 Cloudera 管理器服务和监视,后台程序使用不同的逻辑数据库。

  • Cloudera Repository: :由cloudera manager 提供的软件分发库

  • 客户端/Clients:
    提供了一个与 Server 交互的接口:

    • 管理平台/Admin Console:提供一个管理员管理集群和 Cloudera Manage 的基于网页的交互界面。
    • API:为开发者提供了创造自定义 Cloudera Manager 程序的 API。

Cloudera Manager版本选择

版本选择视具体情况,如果只是自己练手,那么建议选择最新版本,如果是用做生产环境,建议使用发布了一段时间的稳定版。
我们选择的版本是:Cloudera Manager 5.11.0

当你在官网选择了Cloudera Manager 5.11.0版本之后,下面会对应提示该版本所支持的操作系统版本及JDK版本和其他选项

官网版本选择界面
版本及需求界面

点击上图的选项,我们看到了5.11.0 对操作系统及JDK及DATABASE的要求:

操作系统需求:

操作系统要求

所以操作系统我们选择的是

[root@test001 ~]# cat /etc/redhat-release 
CentOS Linux release 7.3.1611 (Core)

JDK需求

CDH and Cloudera Manager Supported JDK Versions
Only 64 bit JDKs from Oracle are supported. Oracle JDK 7 is supported across all versions of Cloudera Manager 5 and CDH 5. Oracle JDK 8 is supported in C5.3.x and higher.

所以我们JDK选择的是:

[root@test001 ~]# java -version
java version "1.8.0_51"
Java(TM) SE Runtime Environment (build 1.8.0_51-b16)
Java HotSpot(TM) 64-Bit Server VM (build 25.51-b03, mixed mode)

数据库需求:

数据库版本需求

下一章我们即将开始安装CDH*

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,324评论 6 498
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,356评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 162,328评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,147评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,160评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,115评论 1 296
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,025评论 3 417
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,867评论 0 274
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,307评论 1 310
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,528评论 2 332
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,688评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,409评论 5 343
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,001评论 3 325
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,657评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,811评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,685评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,573评论 2 353

推荐阅读更多精彩内容