apache atlas mysql_记录Atlas安装与配置过程

记录Atlas安装与配置过程

安装环境是基于centos8，安装过程配置文件内容根据自己实际修改

jdk要安装1.8版本

Zookeeper安装

下载Zookeeper

curl -O https://downloads.apache.org/zookeeper/zookeeper-3.6.2/apache-zookeeper-3.6.2-bin.tar.gz

解压

tar -zxvf apache-zookeeper-3.6.2-bin.tar.gz

进入conf目录修改配置文件，由于我只有一台服务部署，所以配置为单机版的

[root@localhost conf]# mv zoo_sample.cfg zoo.cfg #将conf目录下配置模板修改一下名字

[root@localhost conf]# vim zoo.cfg

#配置内容如下：

tickTime=2000

initLimit=10

syncLimit=5

dataDir=/opt/software/zookeeper/data

clientPort=2181

进入bin目录，启动Zookeeper

[root@localhost bin]# ./zkServer.sh start

ZooKeeper JMX enabled by default

Using config: /opt/software/zookeeper/bin/../conf/zoo.cfg

Starting zookeeper ... STARTED

查看是否已经启动

[root@localhost bin]# jps -m

2648 Jps -m

2604 QuorumPeerMain /opt/software/zookeeper/bin/../conf/zoo.cfg

可以看到QuorumPeerMain已经处于运行状态,表明zookeeper正在运行，也可以用telnet命令测试一下。

Kafka安装

下载Kafka，解压

curl -O https://mirrors.tuna.tsinghua.edu.cn/apache/kafka/2.7.0/kafka_2.13-2.7.0.tgz

tar -zxvf kafka_2.13-2.7.0.tgz

修改配置文件

#修改config/server.properties文件,修改内容为：

broker.id=0

port=9092

log.dirs=/opt/software/kafka/logs

zookeeper.connect=127.0.0.1:2181

#修改config/zookeeper.properties文件，修改内容为：

dataDir=/opt/software/kafka_2.12-2.7.0/zookeeper/dataDir

dataLogDir=/opt/software/kafka_2.12-2.7.0/zookeeper/dataLogDir

clientPort=2181

maxClientCnxns=100

admin.enableServer=false

tickTime=2000

initLimit=10

运行Kafka

[root@localhost bin]# ./bin/kafka-server-start.sh ./config/server.properties &

测试创建topic,出现Created topid xxx 则创建成功

[root@localhost bin]# ./bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test2 #test是topic名字可以随便换哦。

查询创建的top主题

[root@localhost bin]# kafka-topics.sh --list --zookeeper localhost:2181

test

test2

用jps也可以看到kafka jvm进程

Hadoop安装

下载Hadoop

curl -O https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/co