![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
萧痕
我是一个工程师
展开
-
hive学习心得
此博文是自己学习hive的一些学习心得,可能有些地方理解的不对,如有不妥之后,忘能不吝赐教!!!目录hive是什么数据操作执行原理分区分桶hive是什么hive从本质上来说是一个仓库,是一个分析框架,它本身不存储数据,连最起码的元数据信息也不存储。它可以通过mysql或(Derby)对存放在hdfs上面的数据进行映射,其中元信息存放在mysql或Derby中。...原创 2019-03-10 21:05:28 · 3057 阅读 · 0 评论 -
FSDataOutputStream.writeUTF(String)写入文本乱码或空行详解
在使用IDEA中使用 FSDataOutputStream.writeUTF(String) 向hdfs中写文件时,如果把文件下载到本地,打开会看到如上图一样类似的乱码或有空行的情况,代码如下: public static void main(String[] args) throws IOException, URISyntaxException, InterruptedExce...原创 2019-03-10 19:31:24 · 2015 阅读 · 0 评论 -
Hadoop异常:java.lang.ClassCastException: interface javax.xml.soap.Text
本地调式WordCount代码时产生如下错误:2019-03-17 20:37:50,104 WARN [org.apache.hadoop.mapred.MapTask] - Unable to initialize MapOutputCollector org.apache.hadoop.mapred.MapTask$MapOutputBufferjava.lang.ClassCastEx...原创 2019-03-17 20:42:53 · 1206 阅读 · 4 评论