weixin_73798572的博客

原创 当使用hive的beeline连接主机的时候出现Error: Could not open client transport with JDBC Uri: jdbc:hive2://hadoop01:

我在这段demo当中将oozie换成了很多，比如hadoop，root，然后在这段beeline>输入账号的时候就一股脑的输入root，但是一直报错拒绝连接。当我将oozie换成atguigu的时候，在beeline时输入的账号也是atguigu就可以解决。其实很早之前就添加了这段demo但在beeline的连接当中还是没有成功，仍然报错：拒绝连接。demo当中的oozie需要修改为自己的linux主机登录账户（至少目前我发现的是这样的）首先可以先去看一下hive的官方文档有关于如何解决拒接连接的问题。

原创 爬虫-搜狗搜索，基于request库的使用

pa里面的负载是从抓包工具里面找到的就直接使用了，query这个在我们搜索的时候也会出现在网络地址导航栏里面，就认为是“变量”了！最近有兴趣搞点爬虫，先从最简单的开始。

原创 Hadoop集群的基本配置步骤

原创 Hive初始化元数据库（默认是derby数据库）时候出现mian错误

这个就是我的Hive的版本号，我的hadoop也是3.1.3，guaua的版本也是27.0但是不知道为什会不一样。主要的原因就是Hive的guaua.jar的版本跟hadoop的版本不一样或者两者版本一样却有其他的不同。我出现的错误大概就是这个样子。

原创 Hadoop实例统计word，输出目录为空，或者结果不正确

第二个就是输出路径最后的part-r-0000里面的输出的结果跟我们的想要的不一样，第一个是错误的输出结果，第二个是正确的输出结果。重新写了一边代码，就成功了，一定是在导包的过程中出现了错误，还是要小心！在最后的worddriver里面的main函数开头加一句话。这样，输出目录就可以正常了。

原创 hadoop version出现：无法加载主类XXX

修改hadoop /etc目录下的cmd配置文件定位到最后一句,否则无法打开hadoop时查找系统路径过程中无法对空格进行转义。将默认的USERNAME改为你的用户名,注意一定要加双引号" "（

原创 ubuntu使用tar -xzvf安装软件时候出现No such file or directory

记得要使用软件安装包的绝对路径，这样问题就解决啦。

原创 ubuntu设置主机映射

首先更改一下主机的主机名，设置好主机的ip地址，这里可以根据。打开文件后把自己的主机名和ip地址写进去。

原创 使用java上传文件至hdfs时出现io.FileNotFoundException File xxx does not exist

把上传文件的格式给补上。例如上传txt的文本就补上xxx.txt。平时注意java的下划线，就是在提示警告哦！

原创 Ubuntu配置完整hadoop集群的简述步骤

如何创建Ubuntu的完整hadoop集群

原创 启用集群的时，三个datanode都启动，但是在web端只看到一个节点工作

datenode只有一个显示工作

原创 Ubuntu使用start-dfs.sh时JAVA_HOME is not set and could be found.

Ubuntu使用start-dfs.sh时JAVA_HOME is not set and could be found.

原创 Xftp向虚拟机传输文件时候，出现状态：错误

Xftp传输文件时，状态栏：错误。解决方案。

原创 Ubuntu如何设置静态ip（学生适用版本）

Ubuntu静态IP的设置以及注意事项。

原创 ubuntu右上角网络标志消失，使用ifconfig无法打印ens33的静态ip

(这里的01-installer-config.yaml每个人的电脑都不一样，可以在/etc/netplan目录下面两次tab键查看一下)去查看一下自己的静态IP设置正确没有，其次就是redender这个标签的设置应该是networkmanager.之所以出现这样的情况是因为之前我按照别人的博客设置静态IP的时候把renderer给更改了，更改完后就发现了异常。使用sudo vim /etc/netplan/01-installer-config.yaml。首先去查看一下自己的ip地址文件。