- 博客(2)
- 收藏
- 关注
原创 技术整理zookeeper+sqoop
需求:在window下通过flume采集douban.txt文件,将其保存到Linux的Hadoop上 1、解压flume的安装包:apache-flume-1.6.0-bin (1)将conf下的flume-env.ps1.template文件,复制一份改为flume-env.ps1 (2)修改conf下的log4j.properties文件 改后的结果: 2、解压hadoop安装包:hadoop-2.6.5 (1)从安装包中找到如下jar包 (2)将这些jar包放到,flume解压文件的lib文件夹
2021-11-07 18:11:43 1456
原创 技术整理sqoop
Sqoop的安装与部署 1/ 将sqoop解压 到usr下 2/ 配置sqoop下的conf目录下的env环境文件 先切换目录:cd /usr/sqoop/conf 编辑文件命令:gedit sqoop-env-template.sh 找到被注释的有关HADOOP的变量 2个 将前面注释的#号去掉 将等号后的值改为hadoop路径:=usr/hadoop HBase路径用不到 就注释掉 Hive也可以不配置 Zookeeper也可以不配置 3/ 将mysql的jdbc的jar包 拷贝到sqoop/lib/
2021-11-04 15:11:22 1021
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人