spark之算子

1. create

textFile

2. transformation

map

flatMap

filter

reduceByKey

groupBykey

distinct

3. action

foreach

collect

saveasfile

4. controller*

cache

checkpoint

©著作权归作者所有,转载或内容合作请联系作者
平台声明：文章内容（如有图片或视频亦包括在内）由作者上传并发布，文章内容仅代表作者本人观点，简书系信息发布平台，仅提供信息存储服务。

推荐阅读更多精彩内容

  • 大数据Spark算子
    Spark代码流程 1.创建SparkConf对象。 --可以设置Application name。 --可以设置...
    铜锣湾寿司阅读 614评论 0赞 1
  • Spark算子
    Scala中创建RDD的方式 1. 并行程序中的集合创建RDD ; 2.使用textFile方法，通过本地文件或H...
    乔一波一阅读 1,730评论 0赞 2
  • Spark-core：Spark的算子
    目录一.RDD基础1.什么是RDD2.RDD的属性3.RDD的创建方式4.RDD的类型5.RDD的基本原理二.Tr...
    Movle阅读 1,177评论 0赞 2
  • Spark算子总结版
    Spark的算子的分类 从大方向来说，Spark 算子大致可以分为以下两类: 1）Transformation 变...
    姚兴泉阅读 1,415评论 0赞 6
  • Spark RDD 算子总结
    Spark算子总结 算子分类 Transformation(转换)转换算子含义map(func)返回一个新的RDD...
    ronnie_yuan阅读 527评论 0赞 0