不同输入源下的map和reduce数量： 一般情况下，在输入源是文件的时候，一个task的map数量由splitSize来决定的，那么split...
投稿
收录了2篇文章 · 2人关注
-
Hadoop map和reduce的个数
-
Hadoop Map/Reduce执行流程详解
一个Map/Reduce 作业（job） 通常会把输入的数据（input file）切分为若干独立的数据块（splits），然后由 map任务（...
-
hadoop HDFS常用文件操作命令
命令基本格式:hadoop fs -cmd < args > 1.lshadoop fs -ls / 列出hdfs文件系统根目录下的目录和文件h...
专题公告
hadoop相关
{var%20f='http://v.t.sina.com.cn/share/share.php?appkey=1881139527',u=z||d.location,p=['&url=',e(u),'&title=',e(t||d.title),'&source=',e(r),'&sourceUrl=',e(l),'&content=',c||'gb2312','&pic=',e(p||'')].join('');function%20a(){if(!window.open([f,p].join(''),'mb',['toolbar=0,status=0,resizable=1,width=440,height=430,left=',(s.width-440)/2,',top=',(s.height-430)/2].join('')))u.href=[f,p].join('');};if(/Firefox/.test(navigator.userAgent))setTimeout(a,0);else%20a();})(screen,document,encodeURIComponent,'','','https://upload.jianshu.io/collections/images/319411/1483660732.jpg', '推荐专题《hadoop》（ 分享自 @简书 ）','http://39.103.169.235/c/fb64f93a0ce7?utm_campaign=maleskine&utm_content=collection&utm_medium=reader_share&utm_source=weibo','页面编码gb2312|utf-8默认gb2312'));){kind=link}