1、hive.exec.reducers.bytes.per.reducer
#设置每个reduce能处理的数据量
2、hive.exec.reducers.max
#设置最多能运行的reduce个数
3、mapreduce.job.reduces
#设置当前运行的reduce个数
Hive与MapReduce相关的参数
©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。
相关阅读更多精彩内容
- 1、资源相关参数 1)以下参数是在用户自己的mr应用程序中配置就可以生效(mapred-default.xml) ...
- Hive中对某些情况的查询可以不必使用MapReduce计算。例如:SELECT * FROM employees...