![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hive
商亮
算法和数据结构就是编程的一个重要部分,你若失掉了算法和数据结构,你就把一切都失掉了。
展开
-
Hive的基本原理与使用
Hive的基本原理与使用本文转自:http://tiechou.info/?p=33简介Hive是基于Hadoop构建的一套数据仓库分析系统,它提供了丰富的SQL查询方式来分析存储在Hadoop 分布式文件系统中的数据。Hive可以将结构化的数据存储在数据仓库中,通过自己的SQL去查询分析需要的内容,这套SQL简称Hive SQL。它与关系型数据库的SQL略有不同,但支持了转载 2014-11-25 15:51:57 · 535 阅读 · 0 评论 -
FAILED: Error in metadata: MetaException(message:Got exception: java.net.ConnectException Call to ha
这个必须记一笔:今天在安装配置完hive后,进入了hive的命令行执行show databases时抛出一下错误:FAILED: Error in metadata: MetaException(message:Got exception: java.net.ConnectException Call to hadoop0/192.168.0.10:9000 failed on c原创 2014-12-01 20:15:19 · 1064 阅读 · 0 评论 -
HIVE 窗口及分析函数
原文转载自:http://www.07net01.com/linux/HIVE_chuangkoujifenxihanshu_yingyongchangjing_532180_1373989446.html窗口函数应用场景:(1)用于分区排序(2)动态Group By(3)Top N(4)累计计算(5)层次查询一、分析函数用于等级、百分点、n分片等。转载 2015-01-12 14:07:36 · 615 阅读 · 1 评论 -
Hive 基础之:分区、桶、Sort Merge Bucket Join
转载自:http://blog.csdn.net/wisgood/article/details/17186107#t5目录(?)[-]Hive 分区表实现细节语法Hive 桶创建带桶的 table强制多个 reduce 进行输出往表中插入数据查看表的结构读取数据看每一个文件的数据对桶中的数据进行采样查询一半返回的桶数举个完整的小例子1建st转载 2014-12-12 14:17:58 · 400 阅读 · 0 评论 -
MapReduce中两表join的几种方案
转载自:http://my.oschina.net/leejun2005/blog/95186原文本未删改。1. 概述在传统数据库(如:MYSQL)中,JOIN操作是非常常见且非常耗时的。而在HADOOP中进行JOIN操作,同样常见且耗时,由于Hadoop的独特设计思想,当进行JOIN操作时,有一些特殊的技巧。本文首先介绍了Hadoop上通常的JOIN实现方法,然后转载 2014-12-12 16:14:13 · 722 阅读 · 0 评论 -
hive 桶相关特性分析
1. hive 桶相关概念 桶(bucket)是指将表或分区中指定列的值为key进行hash,hash到指定的桶中,这样可以支持高效采样工作。 抽样(sampling)可以在全体数据上进行采样,这样效率自然就低,它还是要去访问所有数据。而如果一个表已经对某一列制作了bucket,就可以采样所有桶中指定序号的某个桶,这就减少了访问量。 2. 桶作用转载 2014-12-12 14:14:57 · 394 阅读 · 0 评论 -
Hive SQL执行计划深度解析
转载:http://tech.meituan.com/hive-sql-to-mapreduce.html分类: hadoop&hive2014-06-17 11:12 25人阅读 评论(0) 收藏 举报目录(?)[+]美团网技术陈纯大作,值得拥有。Hive是基于Hadoop的一个数据仓库系统,在各大公司都有广泛的应用。美团数据仓库也是基转载 2015-01-22 22:51:11 · 998 阅读 · 0 评论