![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据维护
文章平均质量分 68
yuandiyzy1987
这个作者很懒,什么都没留下…
展开
-
Hadoop HA安装(zookeeper)
Hadoop-HA安装部署1 集群规划1.1 集群规划1.2 所需安装包:jdk-8u172-linux-x64.tar.gz hadoop-2.6.0-cdh5.15.0.tar.gzzookeeper-3.4.5-cdh5.15.0.tar.gz2 环境准备以下操作除2.6外均需要对所有的节点进行操作2.1 配置静态IP...原创 2018-08-03 17:12:04 · 642 阅读 · 0 评论 -
Mysql数据实时同步到HDFS
环境准备 集群情况10.40.10.246 dbtest110.40.10.247 dbtest210.40.10.248 dbtest3配置mysql修改my.cnf,加入如下配置:[mysqld]server_id=1log-bin=masterbinlog_format=row重启mysql, sevice mysql restar...原创 2018-08-10 15:29:48 · 7939 阅读 · 2 评论 -
zookeeper部署
安装jdkrpm -qa |grep java 查看已经安装的java包rpm-e --allmatches --nodeps jdk_pkg 卸载yum list installed |grep java 查看已经安装的java包yum -y remove java-1.7.0-openjdk* 卸载yum list **java** 查看可以安装的java相关的包yum...原创 2018-08-10 15:31:04 · 234 阅读 · 0 评论 -
kafka部署
部署kafka我们使用3台机器搭建Kafka集群:10.40.10.246 dbtest110.40.10.247 dbtest210.40.10.248 dbtest3在安装Kafka集群之前,这里没有使用Kafka自带的Zookeeper,而是独立安装了一个Zookeeper集群,也是使用这3台机器,保证Zookeeper集群正常运行。首先,在node1上准备Kafka...原创 2018-08-10 15:31:57 · 366 阅读 · 0 评论 -
flume部署和使用
软件下载和安装flume下载地址:http://archive.apache.org/dist/flume/-》解压缩 tar -zxf /opt/softwares/flume-ng-1.6.0-cdh5.10.2.tar.gz-》配置文件:flume-env.sh export JAVA_HOME=/opt/apps/jdk1.7.0_67-》测试是否成功 bin/...原创 2018-08-10 15:33:02 · 430 阅读 · 0 评论 -
Strom部署
jdk安装zookeeper安装安装准备安装cmake autoconf automake libtool等工具;rpm -qf /usr/bin/autoconfrpm -e --nodeps autoconf-2.63wget ftp://ftp.gnu.org/gnu/autoconf/autoconf-2.68.tar.gztar -zxvf autocon...原创 2018-08-10 15:41:47 · 196 阅读 · 0 评论 -
Mysql操作笔记
Windows服务-- 启动MySQL net start mysql-- 创建Windows服务 sc create mysql binPath= mysqld_bin_path(注意:等号与值之间有空格)连接与断开服务器mysql -h 地址 -P 端口 -u 用户名 -p 密码SHOW PROCESSLIST -- 显示哪些线程正在运行SHOW V...原创 2018-08-10 15:42:59 · 158 阅读 · 0 评论