发简信
IP属地：北京
-
Spark性能优化：开发调优篇http://blog.csdn.net/u012102306/article/details/51322209 1、前言 在大数据计算领域，S...
-
数据倾斜与shuffle类性能调优
场景 数据倾斜解决方案与shuffle类性能调优 分析 数据倾斜 有的时候，我们可能会遇到大数据计算中一个最棘手的问题——数据倾斜，此时Spar...
-
-
spark:SparkContext原理1.创建SparkContext会 createTaskScheduler()，DAGScheduler,SparkUI. createTask...
-
spark:spark内核架构1.首先用spark-submit提交我们的application，那么在standalone模式下，会在client启动一个Driver进程，...