2017年08月_笨鸟先飞-天道酬勤

08月 03月

原创 Saprk 报错java.lang.IllegalArgumentException: Size exceeds Integer.MAX_VALUE

17/08/25 18:35:42 WARN scheduler.TaskSetManager: Lost task 1.1 in stage 176.0 (TID 25544, 192.168.3.20, executor 290): java.lang.IllegalArgumentException: Size exceeds Integer.MAX_VALUE at sun...

2017-08-25 22:46:48 9112 1

原创 Hadoop 获取Active Namenode的IP地址

由于工作需要，需要拿到当前集群的Active Namenode的Ip地址，所以写以下小代码，防止忘记，记录一下：import java.io.IOException;import java.net.InetSocketAddress;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.f...

2017-08-23 15:01:10 8958 1

原创 spark 启动sql Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient

问题：启动Spark时报错（Hive安装也有可能会出现该问题）Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient将hive.site.xml文件中的<property><name>hive.metastore.schema.verific...

2017-08-15 11:42:10 2692

hadoop-eclipse-plugin-2.6.0

新版hadoop（支持2.6.0以后，前面版本未测试）与eclipse连接插件

2016-09-30

hadoop-common-2.2.0-bin

解决 eclipse 操作hadoop 出现 Could not locate executable...问题

2016-09-30

hadoop2.6-common-bin.zip

hadoop2.6-common-bin 解决在Windows上操作hadoop出现 Could not locate executable问题

2016-09-30

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人