音乐数据中心平台离线数仓综合项目开发文档2.docxVIP

.3?安装Azkaban

在Server节点上传并解压下载好的azkaban源码包

这里在node5节点上上传Azkaban安装包并解压。

[root@node5~]#cd/software/

[root@node5software]#tar-zxvf./azkaban-4.0.0.tar.gz

2、进入解压的azkaban目录，进行编译

在进行编译前做以下准备，首先进入到解压的ankaban-4.0.0目录内，修改“build.gradle”文件中以下内容：

maven{

url/maven

}

将以上url修改为https://linkedin.jfrog.io/artifactory/open-source/，主要原因是国内访问网站连接不上，后续编译过程需要从该网站下载jar包。

修改完成如下：

maven{

urlhttps://linkedin.jfrog.io/artifactory/open-source/

}

另外修改Azkaban解压后目录下gradlew文件，在改文件“#AdddefaultJVMoptionshere.”这行注释下增加编译源码使用的临时目录为自己自定目录：

GRADLE_OPTS=-Dgradle.user.home=/software/temp

以上指定自己目录的好处是后续编译过程中缺少的jar包和pom文件我们可以手动下载上传到该目录下即可。这里我把编译过程中的temp目录打包成“azkaban-depens.tar.gz”文件放在资料中可以直接解压使用避免再次下载。

执行tar-zxvfazkaban-depens.tar.gz命令会自动解压到/software/temp目录下

编译Azkaban源码：

[root@node5software]#cdazkaban-4.0.0

[root@node5azkaban-4.0.0]#./gradlewdistTar

BUILDSUCCESSFULin2m36s

57actionabletasks:42executed,15up-to-date

Buildcache(/software/temp/caches/build-cache-1)hasnotbeencleanedupin0days

VCSCheckoutCache(/software/azkaban-4.0.0/.gradle/vcsWorkingDirs)hasnotbeencleanedupin0days

注意这里编译过程涉及从外网下载很多依赖，编译过程中有可能由于网络延时造成编译时失败，可以多重试几次解决此问题，最好配置科学上网。

3、新建azkaban目录，将编译好的以下几个文件复制到此目录下

[root@node5software]#mkdir./azkaban

[root@node5azkaban]#cp/software/azkaban-4.0.0/azkaban-db/build/distributions/azkaban-db-0.1.0-SNAPSHOT.tar.gz/software/azkaban

[root@node5~]#cp/software/azkaban-4.0.0/azkaban-web-server/build/distributions/azkaban-web-server-0.1.0-SNAPSHOT.tar.gz/software/azkaban

[root@node5~]#cp/software/azkaban-4.0.0/azkaban-exec-server/build/distributions/azkaban-exec-server-0.1.0-SNAPSHOT.tar.gz/software/azkaban

4、在azkaban目录下解压各个编译好的压缩包，重新命名

[root@node5software]#cdazkaban

[root@node5azkaban]#tar-zxvf./azkaban-db-0.1.0-SNAPSHOT.tar.gz

[root@node5azkaban]#tar-zxvf./azkaban-exec-server-0.1.0-SNAPSHOT.tar.gz

[root@node5azkaban]#tar-zxvf./azkaban-web-server-0.1.0-SNAPSHOT.tar.gz

[root@node5azkaban]#mvazkaban-db-0.1.0-SNAPSHOTaz