继续熟悉kafka工作流程机制。
Mapreduce作业的生命周期:
1、作业提交与初始化
2、任务调度与监控
3、任务运行环境准备
4、任务执行
5、任务完成
通常情况下,Hadoop会以队列为单位管理作业和资源,有了队列,就产生所谓三级调度模型,调度器依次选用一个队列,队列中的一个作业,作业中的一个任务,分配给有空闲的Slot和Task Tracker。
继续熟悉kafka工作流程机制。
Mapreduce作业的生命周期:
1、作业提交与初始化
2、任务调度与监控
3、任务运行环境准备
4、任务执行
5、任务完成
通常情况下,Hadoop会以队列为单位管理作业和资源,有了队列,就产生所谓三级调度模型,调度器依次选用一个队列,队列中的一个作业,作业中的一个任务,分配给有空闲的Slot和Task Tracker。