Atlas元数据-安装部署

记录下atlas安装部署编译经过的坑

1、atlas 编译

Atlas 源码下载链接: link

此处不建议下载最新的2.1.1,因为我就是用了最新的 后面与hive整合各种报错!!!!

1.1 编译

环境要求:*****
  • 在有hive实例的机器上安装很有必要,因为会用到一些环境变量和jar
  • 2.6 <python版本<3
  • 编译通常问题都是 maven 和jdk版本引起的 :enforcement of maven version 3.5.0 or above & Java 8 (151) or above 这是pom中明确写出的,版本一定要遵守、版本一定要遵守、版本一定要遵守
    报错就不粘贴了,找不到了。。
tar xvfz apache-atlas-2.0.0-sources.tar.gz
cd apache-atlas-sources-1.0.0/
export MAVEN_OPTS="-Xms2g -Xmx2g"
mvn clean -DskipTests install

编译方式任选下面一个,我选的是第二种,后面直接把配置改为外部的就可以了

mvn clean -DskipTests package -Pdist   # 只编译Atlas,后面需要自己添加外部存储和索引后端
mvn clean -DskipTests package -Pdist,embedded-hbase-solr # 编译带有hbase和solr
mvn clean package -Pdist,embedded-cassandra-solr # 带有cassandra和 solr 编译

编译成功后会得到

distro/target/apache-atlas-{project.version}-bin.tar.gz
distro/target/apache-atlas-{project.version}-hbase-hook.tar.gz
distro/target/apache-atlas-{project.version}-hive-hook.gz
distro/target/apache-atlas-{project.version}-kafka-hook.gz
distro/target/apache-atlas-{project.version}-sources.tar.gz
distro/target/apache-atlas-{project.version}-sqoop-hook.tar.gz
distro/target/apache-atlas-{project.version}-storm-hook.tar.gz

2、执行

编译后 只有apache-atlas-2.0.0-bin.tar.gz 这个包是有用的,可以拿出来单独安装

tar -zxvf apache-atlas-2.0.0-bin.tar.gz
cd apache-atlas-2.0.0
./bin/atlas_start.py 

访问http://localhost:21000/ 就可以了

3、粘贴一些还记得的报错

3.1、The web address you’re looking for is not a functioning page in Apache Atlas

我的这个异常是因为改动了 conf/atlas-log4j.xml 在这里插入图片描述
直接将这里注释打开在启动Atlas时会有这个异常

3.2、Exception in thread “main” java.lang.NoSuchMethodError: org.apache.hadoop.hive.metastore.api.Database.getCatalogName()Ljava/lang/String;

这个异常是在执行 ./bin/import-hive.sh 时 引起的,搜不到解决方案,访问外网也没没有答案
解决方案就是,别用最新的版本,我将2.1.0改为2.0.0 就可以了,就这简单。。。。

有问题,欢迎留言提问。
atlas 使用了Janusgraph图数据库技术,可以了解下通过下面连接
[1]: 图数据库Janusgraph
[2]: 知识图谱-诸神图谱

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

懒脖积泥

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值