- 博客(6)
- 收藏
- 关注
RSS订阅原创 flume的安装和部署
用vim /etc/profile 去修改配置flume的环境，添加flume的环境变量。用tar -zxvf +安装包名字+解压路径 去解压安装包。再用 ln -s +文件名 /+软连接名 来创建软连接。用rz上传flume的安装包。切换到flume配置文件。查看flume的安装版本。添加Java环境变量。
2023-10-15 21:34:40
71
1
原创 python权限错误： [错误 13] 权限被拒绝
再去我们python里面去运行代码，可以看到就可以成功运行了。运行python代码爬取数据时报了这个错误，怎样解决呢？我们找到该csv文件存放的位置，在试试运行代码。数据也写入我们的csv文件里面了。将这个csv文件删除后。
2023-10-15 16:10:33
509
1
原创 【无标题】编写flume测试文件
这里面的配置代码，可以在flume的官网里面去复制，我这里用的是avro source，hdfs sinks，file channels。大家可以根据自己的需要去复制不同类型的source，sinks，channels。这样就成功启动了我们的配置文件。但是我们也只是成功启动了我们的配置文件，我们怎么去测试我们的配置文件呢。然后使用代码 telnet localhost +端口号 去模拟数据发送。首先我们要切换到Flume的conf目录下。然后使用以下代码去启动我们的配置文件。
2023-10-15 15:31:57
66
原创 配置了hadoop集群后，启动集群，报找不到javahome
然后在我们的hadoop-env.sh里面去加入这句代码export PATH=$PATH:$JAVA_HOME/sbin，路径改为自己的路径即可。我们这时去到我们安装的hadoop下面，找到hadoop-env.sh。然后重新启动我们的集群，可以看到解决成功了。
2023-10-01 16:00:24
396
原创 hadoop：配置环境变量时，hadoop:command not found解决方法
当我们配置好hadoop的环境变量，更新环境变量后，验证hadoop是否安装成功时，显示hadoop:command not found，如下图。然后用 source /etc/profile 更新环境变量，再用 hadoop version 验证是否安装成功，可以看见安装成功了。我们可以重新打开我们的环境变量在第二句的后面加上:$HADOOP_HOME/sbin，如图所示。
2023-09-13 00:41:46
2140
原创 【无标题】解决数据库中this is incompatible with sql_mode=only_full_group_by错误
解决数据库Navicat Premium 中this is incompatible with sql_mode=only_full_group_by错误
2023-04-03 17:35:55
179
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人