![](https://img-blog.csdnimg.cn/20201014180756919.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
爱憎分明丶
汇编,Vue,python,sql,Django,c,c ,java,ThinkPHP,php,solr,hadoop,小程序,公用号。
展开
-
hive schematool -initSchema com.google.common.base.Preconditions.checkArgument
Exception in thread "main" java.lang.NoSuchMethodError: com.google.common.base.Preconditions.checkArgument(ZLjava/lang/String;Ljava/lang/Object;)Vcom.google.common.base.Preconditions.checkArgument这个类所在的jar包为:guava.jarhadoop-3.2.3(路径:hadoop\share\hadoo.原创 2020-12-12 18:06:09 · 462 阅读 · 1 评论 -
Hadoop there is no HDFS_NAMENODE_USER/HDFS_DATANODE_USER/SECONDARYNAMENODE_USER等错误
因为没有新建hadoop用户而直接用root运行hadoop直接新建这几个环境变量即可打开/etc/profile文件vim /etc/rpofile在尾部追加export HDFS_NAMENODE_USER=rootexport HDFS_DATANODE_USER=rootexport HDFS_SECONDARYNAMENODE_USER=rootexport YARN_RESOURCEMANAGER_USER=rootexport YARN_NODEMANAGE..原创 2020-12-11 23:43:36 · 1389 阅读 · 2 评论 -
centos8 hadoop 伪分布式坑 拒绝访问
配置好配置文件后运行hadoop发现BUGCall From localhost.localdomain/127.0.0.1 to localhost:9000 failed on connection exception: java.net.ConnectException: connect refused; For more details see: http://wiki.apache.org/hadoop/ConnectionRefused原因是/ect/hostname下主机名配置..原创 2020-12-08 16:51:31 · 669 阅读 · 0 评论 -
hadoop 实验三 JAVA编程实践
hadoop java api 地址http://hadoop.apache.org/docs/r2.7.2/api/index.html 实验内容与完成情况: 1.编写一个Java程序,打开一个HDFS中的文件,并读取其中的数据,输出到标准 输出; 2.编写一个Java程序,新建一个HDFS文件,并向其中写入你的名字; 3.编写一个Java程序,判断HDFS上是否存在某个文件? ...原创 2020-10-11 19:37:32 · 2138 阅读 · 1 评论 -
hadoop 实验二 熟悉常用的HDFS操作 hadoop shell命令
hadoop shell命令 文档地址http://hadoop.apache.org/docs/r2.7.2/hadoop-project-dist/hadoop-common/FileSystemShell.html 实验内容与完成情况: 1.向HDFS中上传任意文本文件,如果指定的文件在HDFS中已经存在,由用户指定是追加到原有文件末尾还是覆盖原有的文件; 2.从HDFS中下载指定文件,如果本地文件与要下载的文件名称相同,则自动对下载的文件重命名;原创 2020-10-11 19:35:44 · 4250 阅读 · 0 评论 -
hadoop 实验一 安装配置 hadoop
实验内容与完成情况: 安装SSH 运行命令 sudo apt-get install ssh openssh-server 生成SSH-KEY 运行命令 ssh-keygen -t rsa -P "" 拷贝SSH认证秘钥 复制SSH公钥到/home/user/.ssh目录下,并重命名为authorized_keys(把这个认证文件拷贝到其他的salve机上) 运行命令 cat ~/.ssh/id_rsa.pub >>./....原创 2020-10-11 19:33:21 · 1146 阅读 · 0 评论