登录
注册
写文章
首页
下载APP
会员
IT技术
Spark集群启动流程和任务提交流程
lehuai
关注
赞赏支持
Spark集群启动流程和任务提交流程
image.png
wordcount中创建的rdd
image.png
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。
推荐阅读
更多精彩内容
RDD:基于内存集群计算的容错抽象
该论文来自Berkeley实验室,英文标题为:Resilient Distributed Datasets: A ...
九七学姐
阅读 5,798
评论 0
赞 3
spark 学习笔记
Spark学习笔记 Data Source->Kafka->Spark Streaming->Parquet->S...
哎哟喂喽
阅读 11,667
评论 0
赞 51
Spark job提交过程
本文基于spark2.11 1. 前言 1.1 基本概念 RDD关于RDD已经有很多文章了,可以参考一下理解Spa...
aaron1993
阅读 5,747
评论 0
赞 3
Spark入门实战系列--7.Spark Streaming(上)--实时流计算Spark S...
Spark入门实战系列--7.Spark Streaming(上)--实时流计算Spark Streaming原理...
葡萄喃喃呓语
阅读 8,375
评论 0
赞 23
14 Spark Streaming源码解读之State管理之updateStateByKey...
Spark Streaming中的数据是源源不断流进来的,有时候我们需要计算一些周期性的统计,就不得不维护一下数据...
海纳百川_spark
阅读 6,618
评论 6
赞 10
1赞
2赞
赞赏
手机看全文