大数据技术原理及应用
飞花舞者
肾透爱好者,专注肾透。喜欢的东西太多了,慢慢搞吧!
展开
-
scp传输authorized_keys到另一台虚拟机出现密码不对且Permision denied
报错如下: 直接修改另一台虚拟机的密码: sudo passwd 修改之后用新的密码传输就没问题了原创 2021-05-10 21:34:33 · 471 阅读 · 1 评论 -
hive初始化成功后启动报错
报错如下: 网上搜了一通,说是jdk版本问题,我用的是ubuntu自带的,不兼容,所以换成了jdk1.8的,重新修改hive-env.sh,增加java环境,如下: 重新启动hadoop,stop-dfs.sh,后,start-dfs.sh,在来启动hive,此时已经可以启动了~ ...原创 2021-05-10 10:15:48 · 761 阅读 · 0 评论 -
ubuntu安装hive初始化数据库时报错
执行如下命令: 报错 解决方法:删除创建的数据库,重新再创建一次。 就没问题了 ~原创 2021-05-10 09:26:20 · 224 阅读 · 0 评论 -
Hadoop伪分布式安装测试wordcount
Hadoop伪分布式需要配置core-site.xml,hdfs-site.xml,mapred-site.xml,yarn-site.xml这四个文件。 1.配置core-site.xml #打开core-site.xml配置文件 root权限下命令vim $HADOOP_HOME/etc/hadoop/core-site.xml打开文件,用vim不用vi,vi修改配置容易出错。在标签之间添加如下代码: <property> <name>hadoop.tmp.dir</na原创 2021-03-25 19:55:27 · 338 阅读 · 1 评论 -
Linux Ubuntu安装单机Hadoop并运行WordCount测试
1.安装java JDK 在终端root下,直接输入java,提示没有安装java的话,根据提示可以选择apt install default-jre那个,安装完后使用java -version出现版本提示信息则安装成功,此时的默认路径一般为 /usr/lib/jvm/default-java,记住这个路径,等会配置hadoop的时候要用。 2.安装Hadoop 下载Hadoop,这里使用的版本为2.7.3,下载hadoop-2.7.3.tar.gz,放在/home/bluecap/desktop/目录下,原创 2021-03-23 20:55:35 · 713 阅读 · 1 评论