Azkaban单节点在Vmware虚拟机上安装

流程

  1. 下载azkaban源码包
  2. 用Gradle编译azkaban源码包
  3. 将编译完的单节点工程包运行
    官方流程

注意

  1. azkaban源码包对JDK几乎没有要求。
  2. azkaban源码包对Gradle要求较高。
  3. Gradle对JDK要求较高。
  4. azkaban工程包对JDK有一定要求。

azkaban源码包下载

  • 通过git下载。
yum install git
git clone https://github.com/azkaban/azkaban.git
  • 压缩包下载。
    尽量找发行版下载,就是边上没有Pre-release
    azkaban压缩包github
    prer-elease

Gradle下载

  • 因为azkaban源码包对Gradle有较高要求,所以在azkaban里面就会有配置期望的Gradle版本。如果我们直接编译,会从github上下载,这样会有下载出错的风险。所以我以压缩包的形式下载,然后上传。
  • 查看配置文件,确认自己需要的Gradle版本。


    查看配置文件

    确定版本
  • 下载对应Gradle,通常都是 complete
    Gradle
    Gradle和JDK对应关系
    Gradle5.和Gradle6.的编译差别

Gradle 6.x and later
This version of Gradle uses com.gradle.enterprise as the plugin ID. The plugin must be applied in the settings file of the build.
Gradle 5.x
This version of Gradle uses com.gradle.build-scan as the plugin ID. The plugin must be applied to the root project of the build.

注意:如果当前虚拟机下的JDK为13及以上时,可能会出现特殊情况。因为azkaban源码包在4.0版本前基本都是要求Gradle的版本在5.*之前。而Gradle5.*之前的JDK根据对照表为JDK12左右。这样会出现,azkaban源码包能适应JDK,而能适应当前azkaban源码包的Gradle的版本,不能适应当前JDK环境。且不说当前Gradle能否使用,当其版本为5.*之前和6.*之后,Gradle的编译要求也有变化。所以在azkaban4.0版本的时期,在编译的过程中,JDK1.8是最稳定的。若当前JDK较高,那我有2个建议。一,直接找别人编译完的工程包进行后续操作。二,新建一个虚拟机用来编译,获取工程包。

  • 将下载的Gradle放到指定目录,同时修改配置文件。


    Gradle.zip放置的文件位置

    将原来的git源换成自己的zip
  • sudo yum install -y gcc-c++*


    安装完成
  • sudo yum install gcc

    安装完成

    上述两个步骤我也不是很明白,但有的教程就是这么写的,感觉没用到。

  • 指定目录下编译


    目录+结果图
./gradlew build installDist -x test

-x test用来跳过测试,这个过程有可能会出问题。

获取工程包及运行。

  • 单节点工程包所在位置


    单节点工程包所在位置
  • 拷贝一份到自己想要的位置,然后解压就行。
  • bin/start-solo.sh


    运行项目,务必在该目录下这样运行

注意:若当前JDK的版本为1.9及以上,可能会出现映射问题。
Caused by: java.lang.reflect.InaccessibleObjectException: Unable to make protected final java.lang.Class java.lang.ClassLoader.defineClass(java.lang.String,byte[],int,int,java.security.ProtectionDomain) throws java.lang.ClassFormatError accessible: module java.base does not "opens java.lang" to unnamed module @7be0cc22

映射bug

JDK1.9模块化之后,JRE环境缺失,有东西找不到了。需要手动添加上

  • 进入sh执行文件目录


    sh目录
  • internal-start-solo-server.sh修改
java    --add-opens java.base/java.lang.reflect=ALL-UNNAMED \
        --add-opens java.base/java.lang=ALL-UNNAMED \
        ${AZKABAN_OPTS} -cp ${CLASSPATH} azkaban.soloserver.AzkabanSingleServer -conf ${conf} $@ &
大致在文件底部

测试:IP+8081

IP+8081
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 219,539评论 6 508
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,594评论 3 396
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 165,871评论 0 356
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,963评论 1 295
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,984评论 6 393
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,763评论 1 307
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,468评论 3 420
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,357评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,850评论 1 317
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 38,002评论 3 338
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,144评论 1 351
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,823评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,483评论 3 331
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 32,026评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,150评论 1 272
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,415评论 3 373
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 45,092评论 2 355

推荐阅读更多精彩内容