2021-03-02

#!/bin/bash
spark-submit --class com.YYY.rdvs.Sign_and_Pai_Chu.Out_Current_Day \
--master yarn \
--deploy-mode cluster \
--driver-memory 5g \
--num-executors 10  \
--executor-memory 10g \
--executor-cores 2 \
--conf spark.default.parallelism=200 \
--conf spark.storage.memoryFraction=0.4 \
--conf spark.shuffle.memoryFraction=0.5   \
--conf spark.executor.memoryOverhead=2048 \
--driver-java-options -XX:MaxPermSize=2048M \
--queue root.rdvs \
--files hdfs://cluster001/user/rdvs/conf/dbconfig.properties \
--jars hdfs://cluster001/user/rdvs/jars/common/ojdbc6.jar  hdfs://cluster1/user/rdvs/jars/Sign_and_Pai_Chu/Sign_and_Pai_Chu.jar $1 $2 $3 $4
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • 在吗? 在干嘛呢? 好多次想发又再次忍住。怕你嫌烦,又怕你看到不回,自己又会很尴尬。 不知道睡不着的时候,你会不会...
    波妞与宗介阅读 1,092评论 0 0
  • 我的微信读书,关注商业,管理学和历史。
    HShiner阅读 1,170评论 0 0
  • 在寒假的这段时间里,我读了《中国古代寓言》书,这本书里有写些事情,有写人的,我在这本书中最熟悉最熟悉的一个...
    a2036c4ed20a阅读 461评论 0 0
  • 今天感恩节哎,感谢一直在我身边的亲朋好友。感恩相遇!感恩不离不弃。 中午开了第一次的党会,身份的转变要...
    迷月闪星情阅读 13,585评论 0 11
  • 彩排完,天已黑
    刘凯书法阅读 9,749评论 1 3