- 博客(15)
- 收藏
- 关注
RSS订阅原创 Spark集群安装
3.1 下载 spark 安装包下载地址 spark 官网： http://spark.apache.org/downloads.html这里我们使用 spark-2.0.2-bin-hadoop2.7 版本.3.2 规划安装目录/opt/bigdata3.3 解压安装包tar -zxvf spark-2.0.2-bin-hadoop2.7.tgz3.4 重命名目录mv spark-2.0.2-b...
2018-03-24 22:39:27
107
原创 hadoop ha的集群搭建
1.修改Linux主机名2.修改IP3.修改主机名和IP的映射关系 /etc/hosts ---------注意--------- 如果你们公司是租用的服务器或是使用的云主机（如华为用主机、阿里云主机等） /etc/hosts里面要配置的是内网IP地址和主机名的映射关系4.关闭防火墙5.ssh免登陆6.安装JDK，配置环境变量等 集群部署节点角色的规划（7节点） -----------------...
2018-03-17 23:56:42
160
原创 ES插件es-head安装
安装Head 插件Elasticsearch Head Plugin: 对ES进行各种操作，如查询、删除、浏览索引等。1、下载elasticsearch-head并解压在线下载：wget https://github.com/mobz/elasticsearch-head/archive/master.zip或者到github下载：https://github.com/mobz/elastic...
2018-03-17 23:08:29
7955
1
原创 Linux环境下安装Elasticsearch
Linux环境下安装Elasticsearch（因为Elasticsearch需要jdk1.8或更高的版本才可以运行）提前下载tar.gz相关文件，下载地址:https://www.elastic.co/downloads/elasticsearch这里下载的是elasticsearch-5.5.2.tar.gz进入Linux相关目录解压下载好的tar.gz文件到这个目录Linux通过登录root...
2018-03-17 22:26:14
262
原创 Hbase集群部署
### 2.1 下载安装包```wget http://mirrors.hust.edu.cn/apache/hbase/1.3.1/hbase-1.3.1-bin.tar.gztar -zxvf hbase-1.3.1-bin.tar.gz -C /export/servers/cd ../servers/mv hbase-1.3.1 hbasevi /etc/profile-export HB...
2018-03-17 20:48:48
225
原创 kafka集群搭建
4.1、准备3台虚拟机192.168.140.128 kafka01192.168.140.129 kafka02192.168.140.130 kafka034.2、初始化环境1）安装jdk、安装zookeeper2）安装目录 安装包存放的目录：/export/software安装程序存放的目录：/export/servers数据目录：/export/data日志目录：/export/logsm...
2018-03-16 10:58:48
125
原创 Storm集群搭建
Storm集群安装部署cd /export/servers/software/tar -zxvf apache-storm-1.1.1.tar.gz -C ../servers/cd /export/servers/mv apache-storm-1.1.1 stormcd /export/servers/storm/confrm storm.yaml touch storm.yaml vi st...
2018-03-12 19:45:00
89
原创 Flume安装部署
一、 Flume安装部署l Flume的安装非常简单上传安装包到数据源所在节点上然后解压 tar -zxvf apache-flume-1.6.0-bin.tar.gz然后进入flume的目录，修改conf下的flume-env.sh，在里面配置JAVA_HOMEl 根据数据采集需求配置采集方案，描述在配置文件中(文件名可任意自定义)l 指定采集方案配置文件，在相应的节点上启动flume age...
2018-03-12 18:54:29
162
原创 离线redis的安装
离线redis的安装Redis是c语言开发的。安装redis需要c语言的编译环境。如果没有gcc需要在线安装，Yum install gcc-c++如果无法上网，参考离线安装gcc安装步骤：第一步：redis的源码包上传到linux系统。第二步：解压缩redis。 第三步：编译。make [root@localhost redis]# cd redis-3.0.0[root@localhost r...
2018-03-12 18:24:46
2140
原创 yum在线安装mysql
mysql --查看系统之前是否已安装MySQL rpm -qa | grep mysql --有的话，卸载 rpm -e mysql-libs-5.1.73-5.el6_6.x86_64 --nodeps yum install mysql mysql-server mysql-devel 完成后，用 /etc/init.d/mysq...
2018-03-12 16:11:14
423
原创 hadoop集群搭建
3.安装hadoop2.7.4 上传hadoop的安装包到服务器 hadoop-2.7.4-with-centos-6.7.tar.gz 解压安装包 tar zxvf hadoop-2.7.4-with-centos-6.7.tar.gz 注意：hadoop2.x的配置文件目录：$HADOOP_HOME/etc/hadoop---------------------------------...
2018-03-12 08:47:27
97
原创 linux下zookeeper的安装
安装前需要安装好jdkexport JAVA_HOME=/root/apps/jdk1.8.0_65export PATH=$PATH:$JAVA_HOME/binexport CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar配置免秘登录##下载安装包、解压tar -zxvf zookeeper-3.4.5.tar.gzmv zo...
2018-03-11 23:49:53
139
原创 linux常见文件设置-ssh-主机名-域名映射-防火墙等
同步时间#手动同步集群各机器时间date -s "2017-03-03 03:03:03" yum install ntpdate#网络同步时间ntpdate cn.pool.ntp.org 设置主机名vi /etc/sysconfig/networkNETWORKING=yesHOSTNAME=node-1 配置IP、主机名映射vi /etc/hosts192.168.33.101 ...
2018-03-11 23:49:19
1729
原创 linux上安装jdk
查看当前的jdk版本java –version 查找有哪些Java的包rpm -qa | grep java 依次卸载openjdk的包rpm -e --nodeps tzdata-java-2015e-1.el6.noarchrpm -e --nodeps java-1.6.0-openjdk-1.6.0.35-1.13.7.1.el6_6.x86_64rpm -e --nodeps java-...
2018-03-11 14:25:55
108
原创 关于克隆后的虚拟机网卡的问题
centos 6.7查看ifconfig 发现没有网卡然后设置： ifconfig eth1 up查看ifconfig 得到mac地址修改文件 /etc/systemconfig/network-scripts/ifcfg-eth0改名为ifcfg-eth1打开文件：1.更改名字为eth1 2.删除UUID 3.更改MAC地址 centos 6.9 在/etc/udev/rui.d下面的70...
2018-03-11 13:58:27
225
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人