240 发简信
IP属地:江苏
  • spark.yarn.archive VS spark.yarn.jars

    spark.yarn.archive和spark.yarn.jars都是 Apache Spark 中与 YARN(Yet Another Re...

  • 禁用HTTP TRACE方法

    参考链接:https://github.com/azkaban/azkaban/pull/2044/commits/c7395bee157f74...

  • Spark Standalone 单机起多个Worker

    在每个Slave上启动多个Worker SPARK_WORKER_INSTANCES=3 SPARK_WORKER_CORES=2 ./sbin...

  • Azkaban Connecting to SMTP server failed

    1.启用azkaban的邮件配置在 azkaban.properties中定义发送邮箱 mail.sender=xx@qq.commail.ho...

  • bash循环读入文件的每一行并处理

    cat afile | while read onelinedo echo $onelinedone 这只是个简单例子,把文件afile的每一...

  • gunzip 和 unzip 解压文件到指定的目录

    gzip 命令: # gzip test.txt 它会将文件压缩为文件 test.txt.gz,原来的文件则没有了,解压缩也一样 # gunzi...

  • shell截取字符串

    ${str:begin:len} 截子串

  • shell中一些特殊符号的简介

    在shell中常用的特殊符号罗列如下: # ; ;; . , / \ 'string'| ! $ ${...

  • shell向awk传值

    方法1 awk 'pattern { action }' awkvar1=shellvar1 awkvar2=shellvar2 ... inp...