在sql中的union all 会造成许多小文件,考虑使用row_number() 等串窗口函数将结果数据合并了,可以让结果只有一个文件。
导出数据时,目标目录里面是多个文件,无法导出数据
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。
推荐阅读更多精彩内容
- pyspark.sql module Module context Spark SQL和DataFrames中的重...
- //Clojure入门教程: Clojure – Functional Programming for the J...