hive报错: Specified key was too long; max key length is 767 bytes(详解!!!)

这篇文章将hive的报错还是比较清楚的。   还是一句老话,菜鸡一只,如果有说错的地方,请大家海涵!!~也希望能够批评指出,让小弟能够学习到更多东西~ 废话不多说,报错如下: DataNucleus.Datastore (Log4JLogger.java:error(115)) - An...

2018-12-20 15:16:14

阅读数 63

评论数 0

cent6.5 设置open_files max_user_processes

  cent6.5 设置单用户的open_files 和max_user_processes的方法如下:   vi /etc/security/limits.conf   增加如下配置: root            hard    nproc   10000 root          ...

2018-12-11 15:27:36

阅读数 41

评论数 0

Bringing up interface eth0: Error: No suitable device found: no device found for connection 'System

经试验此方法在centos6.5测试没有问题 遇到的问题: # service network restart Shutting down loopback interface:                          [  OK  ] Bringing up loopback i...

2018-12-05 10:28:30

阅读数 99

评论数 0

解决Linux关闭终端(关闭SSH等)后运行的程序自动停止

问题描述: 之前在服务器上起一个python的服务,放到后台运行。 python pyserver.py &.  当我关闭这个SSH之后,该服务不可用,再次登入到服务器,已经没有这个python进程啦。 问题定位: 通过上面问题的表象,可以发现是跟SSH关闭有关。为什...

2018-11-04 19:16:43

阅读数 48

评论数 0

hadoop集群日常维护中遇到的一些问题汇总

 Connection reset by peer java.io.IOException: Connection reset by peer         at sun.nio.ch.FileDispatcherImpl.write0(Native Method)         at ...

2018-11-01 15:15:48

阅读数 347

评论数 0

Hive支持的数据类型

Hive支持原始数据类型和复杂类型,原始类型包括数值型,Boolean,字符串,时间戳。复杂类型包括array,map,struct,union。 一,原始数据类型 类型名称 大小 示例 TINYINT 1字节整数 45Y SMALLINT 2字节整数 ...

2018-11-01 13:35:51

阅读数 51

评论数 0

从tcp原理角度理解Broken pipe和Connection Reset by Peer的区别

以前我们经常会碰到Broken pipe或者Connection reset by peer之类的异常,但是tcp实现里什么情况下会抛出这些异常呢,以前我给对方的回答都是模棱两可的,自己说实话都没把握,因为自己也没有验证过,对它们的认识都是从网上看来的,正确与否也不知道,昨天独明突然又问到这个问题...

2018-11-01 13:21:11

阅读数 45

评论数 0

CXF拦截器介绍及自定义拦截器实现

这篇文章从理论角度描述CXF的拦截器,描述的比较清楚。 CXF拦截器是功能的主要实现单元,也是主要的扩展点,可以在不对核心模块进行修改的情况下,动态添加功能。 当服务被调用时,会经过多个拦截器链(Interceptor Chain)处理,拦截器链在服务输入(IN)或输出(OUT)阶段实现附加功能...

2018-09-20 14:37:46

阅读数 554

评论数 0

图解ByteBuffer

ByteBuffer前前后后看过好几次了,实际使用也用了一些,总觉得条理不够清晰。 《程序员的思维修炼》一本书讲过,主动学习,要比单纯看资料效果来的好,所以干脆写个详细点的文章来记录一下。 概述 ByteBuffer是NIO里用得最多的Buffer,它包含两个实现方式:HeapByteBuf...

2018-08-17 14:12:21

阅读数 45

评论数 0

java堆栈溢出怎么解决

当一个Java程序没有内存可用时就会导致堆栈溢出,从而抛出异常:java.lang.OutOfMemoryError: Java heap space,error, 此时可以通过增大jvm的堆内存来解决这个问题,当然了这个是最直接的方式,如果可以优化代码也是可以的,比如使用单例模式去优化代码。 ...

2018-08-15 10:51:37

阅读数 1358

评论数 0

远程debug调试java代码

远程debug调试java代码日常环境和预发环境遇到问题时,可以用远程调试的方法本地打断点,在本地调试。生产环境由于网络隔离和系统稳定性考虑,不能进行远程代码调试。整体过程是通过修改远程服务JAVA_OPTS参数,然后本地通过Eclipse或IDEA等工具调试。下面简单介绍下理论。 理论JPDA(...

2018-06-13 10:50:42

阅读数 125

评论数 0

UrlConnection 请求乱码的解决办法

原先的代码如下: public class GetMessage { private static final String v_url = ""; public static String getPostInfo(String v_methodnam...

2018-06-13 10:11:03

阅读数 367

评论数 0

maven 错误 invalid CEN header (bad signature)

一、发现问题右击pom.xml,run as —> maven install,会看到console中有时报mavenRepository\repos\org\mortbay\jetty\servlet-api-2.5\6.1H.14.1\servlet-api-2.5-6....

2018-06-11 09:10:45

阅读数 203

评论数 0

When can I get the "java.net.SocketException: Permission denied:connect" message? And how can it be

The "java.net.SocketException: Permission denied: connect" exception message may happen when you are working in Application Server ...

2018-05-16 16:04:06

阅读数 142

评论数 0

java项目中设置 System.getProperty(“XXX”)自定义变量

经测试,本方法在windows环境下安装的tomcat是起作用的。在java项目中设置自定义变量的方法有很多种,如果你项目中使用 System.getProperty(“XXX”)来获取自定义变量有以下两种办法:  一、选择项目按右键->Run as->...

2018-05-16 15:59:53

阅读数 6031

评论数 0

Hadoop 参数 mapred.map.child.java.opts

最近发现Hadoop Job集群的load非常高,最后发现是mapred.child.java.opts设置过大导致的,我们当初设置为-Xmx5120导致TaskTracker上内存资源耗尽,进而开始不断swap磁盘上数据,load升高 在执行一个Task的时候,首先会根据JobConf中设定的J...

2018-05-07 10:59:38

阅读数 101

评论数 0

java.net.SocketTimeoutException: 60000 millis timeout while waiting for channel to be ready for read

环境:- Spark 2.11-2.0.2- Hadoop 2.6.5使用Spark连接HDFS,在高并发的时候,偶尔会遇到以下异常:[plain] view plain copy2017-01-26 10:30:29,079 ERROR org.apache.hadoop.hdfs.server...

2018-04-25 14:05:11

阅读数 982

评论数 0

初次启动hive,解决 ls: cannot access /home/hadoop/spark-2.2.0-bin-hadoop2.6/lib/spark-assembly-*.jar: No su

刚刚安装好hive,进行第一次启动提君博客原创[hadoop@ltt1 bin]$ ./hive ls: cannot access /home/hadoop/spark-2.2.0-bin-hadoop2.6/lib/spark-assembly-*.jar: No such file or d...

2018-04-23 10:49:50

阅读数 2810

评论数 0

Hive安装配置指北(含Hive Metastore详解)

这篇文章对Metastore的讲解还是比较清楚的。Hive安装配置指北(含Hive Metastore详解)个人主页: http://www.linbingdong.com本文介绍Hive安装配置的整个过程,包括MySQL、Hive及Metastore的安装配置,并分析了Metastore三种配置...

2018-03-12 13:49:17

阅读数 249

评论数 0

Apache Kylin的入门安装

在hadoop启动时,要启动JobHistoryServer,否则kylin会出现各种各样的异常。 Apache Kylin™是一个开源的分布式分析引擎,提供Hadoop之上的SQL查询接口及多维分析(OLAP)能力以支持超大规模数据,最初由eBay Inc. 开发并贡献至开源社区。它能在亚...

2018-01-11 13:32:25

阅读数 1772

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭