![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
HDFS
文章平均质量分 61
huo_火力全开
吃得苦中苦,方位人上人
展开
-
Hive客户端执行insert 可以,beeline 执行报错:org.apache.hadoop.hive.ql.exec.mr.MapRedTask (state=08S01,code=2)
Hive beeline:insert 的时候报错:Error: Error while processing statement: FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask (state=08S01,code=2)原创 2020-08-07 15:28:11 · 2472 阅读 · 0 评论 -
HDFS使用配置大全(持续整理中...)
hdfs-site.xml core-site.xmlHDFS 基本配置HDFS伪分布式配置原创 2018-11-13 15:14:28 · 632 阅读 · 0 评论 -
Hive(一):之Compression(1)----:谈谈HDFS/Hive里的压缩
在大数据存储、传送、读取中往往会跟进不同的业务应用场景选择不同的压缩技术,由于压缩方式的选择的不同,优势和弊端也不同,就像一个天平,要找到适合的那个平衡点原创 2018-11-29 11:07:00 · 538 阅读 · 0 评论 -
Hive(五):常见存储格式的性能测试、比较
Hive/HDFS里几种插件存储格式性能比较,原理分析原创 2018-12-04 18:11:39 · 865 阅读 · 0 评论 -
Hive(二):之Compression(2)----HDFS/Hive里的压缩配置和测试
通过简单的Demo学会Hive,HDFS里的压缩技术其中包括BZip2测试.Lzo压缩测试及索引创建原创 2018-12-01 11:41:46 · 897 阅读 · 0 评论 -
HDFS
HDFS架构 HSFS执行流程 1)读流程描述:1.client通过分布式FileSystem.open(path)方法,去与NN进行RPC通信,NN会校验是否存在 权限是否OK。2.校验完成后,返回文件的部分或全部的block列表(其实就是返回FSDataInputStream对象)3.Client调用FSDataInputStream对象的read...原创 2018-10-18 14:08:47 · 132 阅读 · 0 评论 -
Hive(三):之Compression(3)----Sqoop MySQL导入HDFS--使用Snappy压缩
Compression(三)Sqoop导入HDFS--使用Snappy压缩原创 2018-12-03 15:00:30 · 1346 阅读 · 0 评论