hadoop
i_m_jack
这个作者很懒,什么都没留下…
展开
-
java 序列化,流,二进制的区别和联系
下面谈一谈:1 首先是序列化和反序列化,一般是用来对java bean进行操作,以提供远程接口调用。2 可能在不同机器上有不同的操作系统。在反序列化的时候就必然会有一些不确定性。3 而流则分为字符流和字节流。字符流为两个字节,字节流为1个字节,4 对象序列化与反序列化:将Java对象转变成字节流存储,称之为对象序列化。从字节流中恢复一个Java对象,称之为对象反序列化。序列化资格:只有...转载 2018-12-26 20:11:30 · 719 阅读 · 0 评论 -
Hadoop完全分布式 小bug -no.1 为啥我的集群只显示一个datanode!
问题如标题,先说一下我的搭建步骤1.在主节点主机下,配置好hadoop,yarn,mapred三个env文件以及site文件和salves文件2.确保tmp文件清空的情况下,格式化namenode3.将配置好的Hadoop软件包分发给另外两个克隆机4.用start-dfs.sh命令启动集群。用jps命令确认所需进程是否启动.访问主节点主机Ip:50070网站,把网页tab切换至datanodes,...转载 2019-06-26 22:58:11 · 2773 阅读 · 5 评论 -
访问HDFS报错:org.apache.hadoop.security.AccessControlException: Permission denied
Exception in thread “main” org.apache.hadoop.security.AccessControlException: Permission denied: useimport org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FileSystem;import org.apa...转载 2019-05-29 19:47:04 · 1404 阅读 · 1 评论 -
Could not find or load main class org.apache.hadoop.hdfs.server.namenode.NameNode
这是Hadoop中目录share/hadoop中找不到hdfs文件夹中的jar包[root@master hadoop]# bin/hdfs namenode -formatError: Could not find or load main class org.apache.hadoop.hdfs.server.namenode.NameNode可以用hadoop classpath检查...原创 2019-05-23 17:07:21 · 5015 阅读 · 0 评论 -
解决CentOS7下用ntpdate同步时间问题
https://blog.csdn.net/qq_27754983/article/details/69386408转载 2019-04-12 22:15:29 · 895 阅读 · 0 评论 -
Hadoop
Hadoop中的独立模式使用hadoop fs -ls /打开的时Linux的根目录原创 2019-04-12 22:15:02 · 94 阅读 · 0 评论