hive
文章平均质量分 79
驰驰的老爸
IT民工一枚,长期耕耘于JAVA, JS,LINUX一线,现在努力提高机器学习方面的技能。
展开
-
hive学习笔记
在使用hive进行开发时,我们往往需要获得一个已存在hive表的建表语句(DDL),然而hive本身并没有提供这样一个工具。要想还原建表DDL就必须从元数据入手,我们知道,hive的元数据并不存放在hdfs上,而是存放在传统的RDBMS中,典型的如mysql,derby等,这里我们以mysql为元数据库,结合0.4.2版本的hive为例进行研究。连接上mysql后可以看到hive元转载 2013-10-11 21:40:48 · 1045 阅读 · 0 评论 -
【Hadoop技术博客推荐】Hive的那些事
Hive是建立在Hadoop上的数据仓库基础构架,对存储在分布式中的大型数据集进行查询和管理。吴阳平发现目前关于Hive方面的资料很凌乱,于是开始写“Hive的那些事”系列文章,分享给大家。【编者按】Hive是Facebook数据团队基于Hadoop开发的数据仓库封装,对存储在分布式中的大型数据集进行查询和管理。吴阳平(目前就职于去哪儿网)在学习Hive的过程中,发现目前国内还没有一本转载 2014-02-17 21:13:36 · 814 阅读 · 0 评论 -
hive 入门教程
http://abloz.com2012.6.14下载[zhouhh@Hadoop48 ~]$ wget http://labs.renren.com/apache-mirror/hive/hive-0.9.0/hive-0.9.0.tar.gz配置[zhouhh@Hadoop48 ~]$ tar zxvf hive-0.9.0.tar.gz[zhouhh@Ha转载 2014-02-09 11:16:16 · 1098 阅读 · 0 评论 -
sqoop 从 hive 导到mysql遇到的问题
环境hive 版本hive-0.11.0sqoop 版本 sqoop-1.4.4.bin__hadoop-1.0.0从hive导到mysqlmysql 表:mysql> desc cps_activation;+————+————-+——+—–+———+—————-+| Field | Type | Null | Key |转载 2014-02-09 10:45:30 · 18672 阅读 · 0 评论 -
hive部署手册
安装环境: 机器 只需要安装一台机器 操作系统:Ubuntu 11.04 64操作系统 hadoop:版本是1.0.2,安装在/usr/local/hadoop sun jdk:版本是1.6.0_31 64bit,安装在/usr/local/jdk hive:版本是0.8.1,安装在/usr/local/hive转载 2014-02-08 19:24:41 · 820 阅读 · 0 评论 -
hive 结合执行计划 分析 limit 执行原理
转载自51cto :http://yaoyinjie.blog.51cto.com/3189782/923378 在hive查询中要限制查询输出条数, 可以用limit 关键词指定,如 select columnname1 from table1 limit 10; 这样hive将输出符合查询条件的10个记录,从根本上说, hive是hadoop提交作业的客户端,它使用antlr词法语法分转载 2014-01-26 20:18:41 · 16787 阅读 · 1 评论 -
hive sql执行计划
转载:http://blog.csdn.net/lpxuan151009/article/details/6645061https://cwiki.apache.org/confluence/display/Hive/LanguageManual+ExplainHive provides an EXPLAIN command that shows the execution转载 2014-01-26 19:25:55 · 1324 阅读 · 0 评论 -
安装hive-0.10.0-cdh4.5.0整合到hbase
1.下载一个hive版本,cdh4.5的配套版本hive-0.10.0-cdh4.5.0。 2.修改hive/conf下hive-site.xml文件,无则创建hive-site.xml,在底部添加如下内容: hive.querylog.location /hadoop/hive/logs hive.au原创 2014-01-06 17:27:59 · 3348 阅读 · 0 评论 -
HIVE元数据
HIVE元数据表数据字典:表名说明BUCKETING_COLSHive表CLUSTERED BY字段信息(字段名,字段序号)COLUMNSHive表字段信息(字段注释,字段名,字段类型,字段序号)DBS NU转载 2013-10-11 21:44:23 · 1740 阅读 · 0 评论 -
Hive集成Mysql作为元数据
默认情况下,Hive元数据保存在内嵌的 Derby 数据库中,只能允许一个会话连接,只适合简单的测试。为了支持多用户多会话,则需要一个独立的元数据库,我们使用 MySQL 作为元数据库,Hive 内部对 MySQL 提供了很好的支持,配置一个独立的元数据库需要增加以下几步骤:第一步:安装MySQL服务器端和MySQL客户端,并启动MySQL服务。此步省略,具体请看http://www.转载 2013-10-11 21:41:36 · 2120 阅读 · 0 评论