Big-Data
石兴稳
车轮塑造形体,技术改变生活
展开
-
Hadoop集群安装
###修改hostname all nodehostnamectl set-hostname masterhostnamectl set-hostname slave1hostnamectl set-hostname slave2hostnamectl set-hostname slave3##master 到 salve 做无密码认证ssh-keygenssh-cop...原创 2019-02-21 15:10:45 · 490 阅读 · 0 评论 -
Hive 安装
##安装数据库 单独一个数据库节点192.168.x.121 mysql yum install mariadb-server -y ##数据库配置如下 /etc/my.cnf[mysqld]datadir=/var/lib/mysqlsocket=/var/lib/mysql/mysql.sockcharacter_set_server = utf8symbolic-li...原创 2019-02-21 15:55:16 · 136 阅读 · 0 评论 -
Kafka/Zookeeper 集群安装
kafka zookeeper 安装 192.168.x.127 zk1 kafka1 192.168.x.130 zk2 kafka2192.168.x.135 zk3 kafka3设置 /etc/hosts 192.168.x.127 zk1 kafka1 192.168.x.130 zk2 kafka2192.168.x.135 zk3 kafka3设置 主机名 ...原创 2019-02-21 16:05:33 · 139 阅读 · 0 评论 -
Storm集群安装
@@@@@storm 安装192.168.x.138 storm1192.168.x.148 storm2192.168.x.120 storm3每台机器挂一个盘,作为数据盘设置主机名hostnamectl set-hostname storm1 storm2 storm3##ntp 时间认证服务for i in storm1 storm2 storm3;do ss...原创 2019-02-21 16:38:01 · 129 阅读 · 0 评论 -
Spark 集群安装
@@spark 安装@这三台机器当做hadoop 的客户端,需要把 hadoop 的文件全部导入这个三台机器 /etc/hosts 设置 192.168.x.87 spark1.sxw.com spark1192.168.x.145 spark2.sxw.com spark2192.168.x.147 spark3.sxw.com spark3设置主机名hostname...原创 2019-02-21 16:46:17 · 135 阅读 · 0 评论 -
tez 工具安装
tez 安装1.##下载maven 工具wget http://mirrors.shu.edu.cn/apache/maven/binaries/apache-maven-3.1.1-bin.tar.gztar -zxvf apache-maven-3.1.1-bin.tar.gz#设置环境变量/etc/profileexport MAVEN_HOME=/usr/local/...原创 2019-02-21 16:52:44 · 761 阅读 · 0 评论 -
Hbase 集群安装
@ 安装Hbase 重新创建三个节点192.168.x.75 hbase1.sxw.com hbase1192.168.x.124 hbase2.sxw.com hbase2192.168.x.141 hbase3.sxw.com hbase3@设置hosts 三个节点192.168.x.75 hbase1.sxw.com hbase1192.168.x.124 hbas...原创 2019-02-21 16:58:32 · 131 阅读 · 0 评论 -
Sqoop 工具安装
@@sqoop 安装 安装在namenode 节点上 也就是master 节点上192.168.xx.51 wget https://mirrors.tuna.tsinghua.edu.cn/apache/sqoop/1.4.7/sqoop-1.4.7.bin__hadoop-2.6.0.tar.gztar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.t...原创 2019-02-21 17:02:47 · 473 阅读 · 0 评论 -
ELK集群安装
#!/bin/bashTop 图##ELK 集群安装master-node 192.168.x.29 :es,jdk,kibana data-node1 192.168.x.35 :es,jdk,logstashdata-node2 192.168.x.38 :es,jdk版本信息jdk 1.8Elasticsearch-6.0.0logsta...原创 2019-02-21 17:20:44 · 453 阅读 · 0 评论