Hadoop
如何在5年薪百万
202110,如何5年内年薪百万
201901,如何3年内拿到50+,如果快速提升价值,拿到50k+的薪水
201801,如何在3年内拿到30+,我一工作6年,后面3年我要思考如何拿到30+
展开
-
hadoop 8088端口网页无法打开的原因分析
首先master和slaves的节点正常http://server71:50070 (HDFS管理界面)正常可以打开http:// server71:8088 yarn管理界面打不开Master(server71)Slaves(server72,73,74)[root@server71 bin]# jps2271 NameNode原创 2017-10-31 12:11:39 · 47872 阅读 · 2 评论 -
用eclipse插件执行时发生以下错误.AccessControlException: Permission denied
hadoop2.6.5版本,用eclipse插件执行时发生以下错误。可以看出来我的输出文件output权限对于非supergroup没有写入的权限。该如何解决这个问题呢?org.apache.hadoop.security.AccessControlException: Permission denied: user=new, access=WRITE, inode="/output":r原创 2017-10-31 16:29:38 · 1142 阅读 · 0 评论 -
利用ZooKeeper API模拟HDFS节点的监听模式
首先我们需要理解一件事情,虽然大多数人学习ZooKeeper是因为Hadoop和大数据,但实际上ZK只是分布式一致性算法的实现,和大数据以及Hadoop并无任何关系。ZK本身是一套树桩结构的文件系统,这个系统每个文件节点可以存放一点儿数据。重点是这个文件系统十分敏感,一旦任何数据发生变化,ZK就会检测到并且报告给客户端。我们利用这个特性来监管分布式系统的服务器,配置文件,命名空间等。这原创 2017-11-02 18:16:53 · 490 阅读 · 0 评论