CDH 开发Spark 应用

翻译: https://www.cloudera.com/documentation/enterprise/latest/topics/spark_applications_developing.html
版本: 5.14.2

当您准备从交互式shell转到后台运行Spark应用程序时,您需要构建,打包和配置应用程序以及使用更高级的API。本节介绍:

  • 如何开发,打包和运行Spark应用程序。
  • 在Spark核心之外使用Spark API的方面。
  • 如何访问以各种文件格式存储的数据,例如Parquet和Avro。
  • 如何访问存储在云存储系统中的数据,例如Amazon S3或Microsoft ADLS。
  • 构建和配置Spark应用程序的最佳实践。

继续阅读:

©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

相关阅读更多精彩内容

友情链接更多精彩内容