2016.5.9

继续熟悉kafka工作流程机制。

Mapreduce作业的生命周期:

1、作业提交与初始化

2、任务调度与监控

3、任务运行环境准备

4、任务执行

5、任务完成

通常情况下,Hadoop会以队列为单位管理作业和资源,有了队列,就产生所谓三级调度模型,调度器依次选用一个队列,队列中的一个作业,作业中的一个任务,分配给有空闲的Slot和Task Tracker。


最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容