- 博客(5)
- 收藏
- 关注
原创 hadoop大数据平台手动搭建(八)HDFS High Availability Using the Quorum Journal Manager
前面我们已经搭建了hadoop基本平台。由于namenode节点唯一,出现故障,就会瘫痪,恢复时间长。如何做到高可用。修改两配置文件:1.core-site.xml hadoop.tmp.dir /opt/hadoop-2.6.0-cdh5.8.0/tmp fs.defaultFS hdfs://mycluster
2017-04-26 19:38:07 534
原创 Failed to initialize compiler: object scala.runtime in compiler mirror not found
Failed to initialize compiler: object scala.runtime in compiler mirror not found.** Note that as of 2.8 scala does not assume use of the java classpath.** For the old behavior pass -usejavacp to s
2017-04-10 11:08:41 3195
原创 sqoop导入错误
是由于导入表中有字段是关键字DESC. 换一张表就没问题。sqoop import --connect jdbc:mysql://master:3306/hive --drivercom.mysql.jdbc.Driver --table DBS--username root -password 123456 -m 1Error: java.io.IO
2017-04-06 20:06:30 3642
原创 hive常见错误
1.删除数据存放目录,重新格式化hadoop解决java.lang.RuntimeException: Error caching map.xml: org.apache.hadoop.ipc.RemoteException(java.io.IOException): File /tmp/hive/hadoop/97c28744-9396-409d-a714-ad71a548ec63/hive_2...
2017-04-06 15:45:43 4010
原创 hadoop常见错误
1. 解决:是缺少相关jar没配入classpath.这错报得有点不懂。或直接拷贝相关jar到bin下。 jar位置:F:\hadoop-2.6.0-cdh5.8.0\share\hadoop\mapreduce2 解决这耗费不少时间,坑。./hadoop jar /opt/hadoop-2.6.0-cdh5.8.0/share/hadoop/mapreduce2/hadoop
2017-04-06 15:23:49 718
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人