SparkFiles.get NullPointerException

问题现象

Spark任务抛出如下异常:

Exception in thread "main" java.lang.NullPointerException
    at org.apache.spark.SparkFiles$.getRootDirectory(SparkFiles.scala:37)
    at org.apache.spark.SparkFiles$.get(SparkFiles.scala:31)
    ...

可能原因

该现象为在初始化SparkContext之前调用了SparkFiles.get()。

问题解决方案

优先初始化SparkContext。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。
禁止转载,如需转载请通过简信或评论联系作者。

推荐阅读更多精彩内容

  • ①早起:醒即起,醒后不贪恋,凡雷雨天依然。 ②写日记:须端谐。凡日问过恶,身过,心过,口过,皆出己,终身不可间断。...
    Sparkling柳莹阅读 2,994评论 1 2
  • 承泽
    玛莉吉亚阅读 734评论 0 0
  • 七绝 入桃溪 清溪谷隙野藤遒,偶绾长条下素秋。 想见云裾明月里,轻罗一片荡悠悠。 七绝 桃溪谷之二 石栈蜿...
    月映霜华阅读 3,505评论 8 7
  • 沉默,往往是我们修行最好的保护。 面对纷争,面对交错的人言杂语,业力网罟,我们选择沉默也许是最好的结果。 错与对,...
    轻言煦语阅读 936评论 0 0
  • 1道原上《文子》(通玄真经注卷之一)诗解 题文诗: 情生万物,万物情通,至情至道,道之为物, 先天地生,无象无形,...
    琴诗书画阅读 5,450评论 0 0