本文转载自：http://www.cnblogs.com/likehua/p/3999538.html，作者做了一理解上的的修改 1.什么是kafka? 1.1入门 1.1....
发简信
IP属地：广东
-
深入kafka(一).kafka理论概念 -
原创-Spark源码分析一:Standalone模式下Master启动源码分析
一：概述 Master节点是Spark Standalone运行模式下的主节点，主要用于管理集群，负责资源的调度，其继承了ThreadSafeRpcEndpoint 、Le...
-
Spark 源码浅析之 Shuffle 读部分Shuffle Read 在 Task 实例化的时候就会调用 runTask() 方法运行任务，runTask() 方法中会调用 RDD.getOrCompute() 方法来...
-
Spark-Core源码精读(15)、Shuffle--Read部分上一篇文章我们分析了Shuffle的write部分，本文中我们来继续分析Shuffle的read部分。 我们来看ShuffledRDD中的compute方法： 可以看到首先调...
-
Spark shuffle writer源码解析
Shuffle分类 一个作业经过spark的DAGSchedule调度器划分为多个stage，同时有些下游的stage依赖上游的stage，这样会导致上游的stage做map...
-
[spark] Shuffle Read解析 (Sort Based Shuffle)
Shuffle Write 请看 Shuffle Write解析。 本文将讲解shuffle Reduce部分，shuffle的下游Stage的第一个rdd是ShuffleR...
-
JHipster简介
JHipster或者称Java Hipster，是一个应用代码产生器，能够创建Spring Boot + AngularJS的应用。开源项目地址：JHipster/Githu...
-
了解Spring Boot AutoConfiguration
原文：http://sivalabs.in/2016/03/how-springboot-autoconfiguration-magic/作者：Siva译者：http://o...
