纵观整个mapreduce过程会发现存在许多的排序和文件合并操作。 为什么要排序，主要原因有： 1、key的存在combiner操作，排序之后相同的key放到一块显然方便做合...
IP属地：浙江
-
spark 4种 shuffle机制与mapreduce shuffle机制对比 -
大数据数仓建设性能优化方案
大数据数仓的性能优化主要围绕以下四个方面： 调度优化 模型优化 同步任务优化 计算任务优化下面将对着四方面的优化方法进行具体阐述。 调度优化 在数据仓库建设的过程中，我们不可...
-
聊聊Linux 五种IO模型上一篇《聊聊同步、异步、阻塞与非阻塞》[https://www.jianshu.com/p/aed6067eeac9]已经通俗的讲解了，要理解同步、异步、阻塞与非阻塞重要的两...
-
Sublime插件：C语言篇如何安装插件详见：https://packagecontrol.io/installation Alignment：选中并按ctrl+alt+a就可以使其按照等号对其。按等号...
-
-
人类为什么会孜孜不倦地去探索未知？好奇心的意义是什么？探索未知，满足求知欲是一种较为合适的打发漫漫无聊人生的方式。 第一，求知欲能玩的内容非常丰富，无所不包。天文地理、人文社科、数理化生、各行各业各个层面，各个角度，各个细节都具...
-
如果你是程序员，或者有一颗喜欢写程序的心，喜欢分享技术干货、项目经验、程序员日常囧事等等，欢迎投稿《程序员》专题。 专题主编：小彤花园 http://www.jianshu.com/users/4a4eb4feee62/ 【程序员】专题拒稿指北：http://www.jianshu.com/p/7c8b33b5f63b 投稿须知： 1.收录相关技术文章，但不限于技术，也可以是项目经验类的文章和程序员日常。 2.文章內不得有任何推广信息。包括但不限于公众号、微博、微信，更不得在通过投稿后再修改文章加入推广信息。你可以将这些推广以及个人信息放在个人主页介绍里。 3.字数极少，段落混乱，大段代码没有放到代码框的文章不收录 4.不相关的内容不收录，请确认文章内容和本专题相关 目前针对优质作者及爱好者，开设了官方程序员微信群，希望加入请发简信给主编小彤花园索取个人微信，主编会将你加入到【程序员】微信群，分享内容，收获知识。添加微信时备注昵称。
