hadoop
缓缓归_
这个作者很懒,什么都没留下…
展开
-
Hadoop集群启动问题记录
问题:启动hadoop集群,namenode,datanode都不启动,重启虚拟机后问题依然存在查看日志:2020-12-30 09:53:09,627 WARN org.apache.hadoop.hdfs.server.common.Storage: java.io.FileNotFoundException: a/in_use.lock (权限不够)2020-12-30 09:53:09,628 FATAL org.apache.hadoop.hdfs.server.datanode.Da原创 2020-12-30 10:13:43 · 199 阅读 · 0 评论 -
vm8 Linux虚拟机配置hadoop集群-网络地址配置(傻瓜版)
虚拟机和主机ping不通解决办法,虚拟机ping不通外网的解决方法主要步骤(需要安装好VMware和CentOs6)1、修改VMnet8的IP地址右键VMnet8,选择属性,选择IPV4版本协议,点击右下角属性。使用下面的IP地址。设置一个倒数第二位(任意值),默认网关设置为2,(后面vm里也相关),Ip地址不与网关地址重复。2、设置VM中的虚拟网络编辑器...原创 2020-08-13 23:50:30 · 995 阅读 · 0 评论 -
Hbase中的Mapreduce操作求和(Hbase的数据读取与写入)
1、首先在Hbase中的mymoney数据库存入一组income数据,只用到了info:income,数据如下所示:hbase(main):019:0> scan 'mymoney'ROW COLUMN+CELL 01 ...原创 2019-11-26 20:06:13 · 790 阅读 · 0 评论 -
HDFS基本操作
hdfs dfs -ls . 表示列出HDFS某个目录下的所有内容,“.”表示HDFS中的当前用户目录,如果没有“.”为列出所有目录。 -h 使用方便人阅读的信息显示文件大小 -R 使用递归显示所有子目录的信息 hdfs dfs -mkdir input or /input 后者为在HDFS根目录下,前者为创建在当前的目录下? ...原创 2019-10-07 11:55:56 · 729 阅读 · 0 评论