hadoop
艺菲
这个作者很懒,什么都没留下…
展开
-
交换机断电后hdfs不可用
交换机断电后hdfs不可用org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.ipc.StandbyException): Operation category READ is not supported in state standby1.去几个datanode的机器上查看,输入jps发现datanode没有启动原创 2016-07-29 18:53:57 · 383 阅读 · 0 评论 -
服务器重启后,hostname改变,hdfs不能上传文件
服务器重启后,hostname改变,hdfs不能上传文件1.修改hostname#hostname newnamejava.net.NoRouteToHostException: 没有到主机的路由java.io.IOException: Bad connect ack with firstBadLink as 192.168.11.5:50011原创 2016-07-30 10:10:36 · 316 阅读 · 0 评论 -
Hadoop YARN官方介绍
Apache Hadoop YARNYARN基本的思想是将资源管理和作业调度/监控分开。在这个思想下出现了全局ResourceManager(RM)和每个应用的ApplicationMaster(AM)。一个应用要么是一个单独的作业要么是DAG(有向无环图)作业。ResourceManager和NodeManager组成了数据计算框架。ResourceManager原创 2017-05-19 10:43:19 · 408 阅读 · 0 评论 -
sqoop hive与mysql互导数据
sqoop mysql互导hivemysql导入到hive环境hive-1.1.1sqoop-1.4.6.bin__hadoop-2.0.4-alphamysql Ver 14.14 Distrib 5.1.73, for redhat-linux-gnu (x86_64) using readline 5.11.异常ERROR manager.Sql原创 2017-07-05 08:19:32 · 1376 阅读 · 0 评论