![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据学习之路
文章平均质量分 71
TigRer
探索未来的程序汪
展开
-
flume学习笔记
1.flume向hdfs传输数据 上传apache-flume-1.9.0-bin.tar.gz到hadoop102 /opt/software下 tar -zxvf apache-flume-1.9.0-bin.tar.gz -C /opt/module cd /opt/module/ mv apache-flume-1.9.0 flume-1.9.0 启动hdfs hdp.sh start # 执行脚本,模拟日志生产 # 在/opt/module/datas目录下创建a.log while true原创 2021-03-26 23:14:51 · 120 阅读 · 0 评论 -
大数据组件配置
Zookeeper环境配置 [root@hadoop122 ~]# cd /opt/module/zookeeper-3.4.10/conf [root@hadoop122 conf]# mv zoo_sample.cfg zoo.cfg [root@hadoop122 conf]# vim zoo.cfg dataDir=/opt/module/zookeeper-3.4.10/zkData [root@hadoop122 zookeeper-3.4.10]# mkdir zkData [root@原创 2021-03-26 23:13:20 · 158 阅读 · 0 评论 -
Hive学习笔记
启动脚本 #!/bin/bash if [ $# -lt 1 ] then echo "No Args Input..." exit ; fi case $1 in "start"){ echo " =================== 启动 hadoop集群 ===================" echo " --------------- 启动 hdfs ---------------" ssh hadoop102 "/opt/mo原创 2021-03-03 22:51:35 · 656 阅读 · 1 评论 -
hadoop3学习笔记
1、准备工作 利用模板机 hadoop100,克隆 三台虚拟机 hadoop102 hadoop103 hadoop104 # 虚拟网络器VMnet8:NAT模式,DHCP设置选将主机虚拟适配器连接到此网络,子网IP192.168.1.0,子网掩码:255.255.255.0,NAT设置网关192.168.1.2。 # 删除掉eth0,将eth1改成eth0,然后再将HWADDR写入ifcfg-eth0 [root@hadoop101 ~]# vi /etc/udev/rules.d/70-persist原创 2021-03-03 22:48:57 · 240 阅读 · 1 评论 -
centos7下安装mysql
mysql的rpm包下载地址 https://dev.mysql.com/downloads/mysql/5.7.html#downloads 下载,mysql-5.7.29-1.el7.x86_64.rpm-bundle.tar 大小520.5M 卸载CentOS7.4系统自带的mariadb [root@localhost ~]# rpm -qa|grep mariadb mariadb-libs-5.5.56-2.el7.x86_64 [root@localhost ~]# rpm -qa|gre原创 2021-03-03 22:46:14 · 99 阅读 · 2 评论