Hive
wind520
这个作者很懒,什么都没留下…
展开
-
Hive 0.13 数据类型
hive支持的数据类型路下数值类型 Numeric TypesTINYINT (1字节,数据范围: -128 to 127)SMALLINT (2字节,数据范围: -32,768 to 32,767)INT (4字节,数据范围:-2,147,483,648 to 2,147,483,647)BIGINT (8字节,数据范围: -9,223,372,036,854,775,808 to 9,223,372,036,854,775,807)FLOAT (4字节, 单精度浮点数)DOUBLE (8字翻译 2014-09-11 19:55:34 · 16565 阅读 · 0 评论 -
hive 1.1.1 Specified key was too long; max key length is 767 bytes
错误hive> create table shop(locationid int,name string,cnname string) row format delimited fields terminated by ',';FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask.原创 2015-09-05 14:41:14 · 693 阅读 · 0 评论 -
Spark1.4 和 Hive 1.1.1 启动错误
启动Spark-sql[jifeng@feng03 spark-1.4.0-bin-hadoop2.6]$ ./bin/spark-sql --master spark://feng03:7077Exception in thread "main" java.lang.RuntimeException: java.lang.NumberFormatException: For inpu原创 2015-09-05 16:02:50 · 2029 阅读 · 0 评论 -
Relative path in absolute URI: ${system:java.io.tmpdir%7D/$%7Bsystem:user.name%7D
hive启动报错:[jifeng@feng02 hive]$ hiveLogging initialized using configuration in jar:file:/home/jifeng/hive/apache-hive-1.1.1-bin/lib/hive-common-1.1.1.jar!/hive-log4j.propertiesSLF4J: Class path co原创 2015-09-05 10:06:12 · 2525 阅读 · 2 评论 -
Hive hiveserver2 配置运行
1:运行命令行模式:hive --service hiveserver2 --hiveconf hive.server2.thrift.port=10001服务模式:hiveserver2 start[jifeng@feng01 conf]$ hive --service hiveserver2 --hiveconf hive.server2.thrift.port原创 2015-03-05 17:16:32 · 36280 阅读 · 3 评论 -
spark sql and hive 3g数据测试
1:上传文件到hdfs[jifeng@feng01 hadoop]$ hadoop fs -mkdir /user/jifeng/fire15/03/05 13:29:28 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java class原创 2015-03-05 14:20:55 · 1754 阅读 · 1 评论 -
Apache Hive on Apache Tez
是Apache最新开源的支持DAG作业的计算框架,它直接源于MapReduce框架,核心思想是将Map和Reduce两个操作进一步拆分,即Map被拆分成Input、Processor、Sort、Merge和Output, Reduce被拆分成Input、Shuffle、Sort、Merge、Processor和Output等,这样,这些分解后的元操作可以任意灵活组合,产生新的操作,这些操作经过一些原创 2014-10-30 16:08:43 · 7504 阅读 · 0 评论 -
Hive 0.13.1 和HBase 0.98.6.1整合
1:安装hadoop和HBase2:安装原创 2014-10-07 22:53:03 · 5193 阅读 · 1 评论 -
hive.ql.exec.DDLTask. MetaException(message:java.io.IOException: Attempt to start meta tracker faile
hive> CREATE TABLE hbase_table_1(key int, value string) > STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' > WITH SERDEPROPERTIES ("hbase.columns.mapping" = ":key,cf1:val") >原创 2014-10-08 13:30:29 · 5593 阅读 · 0 评论 -
Hive 0.12.0安装配置
1:解压tar zxf hive-0.12.0-bin.tar.gzmv hive-0.12.0-bin hadoop移动到hadoop目录2:配置环境变量[jifeng@jifeng02 hive-0.12.0-bin]$ cat ../../.bash_profile# .bash_profile# Get the aliases and functionsif原创 2014-08-17 10:47:47 · 2103 阅读 · 0 评论 -
hive 简单操作和错误
[jifeng@jifeng02 ~]$ hiveLogging initialized using configuration in jar:file:/home/jifeng/hadoop/hive-0.12.0-bin/lib/hive-common-0.12.0.jar!/hive-log4j.propertieshive> create database test_hive;OK原创 2014-08-17 15:50:51 · 6745 阅读 · 0 评论 -
hive join测试
hive> create table course(id int,c1 string,c2 string,c3 string,c4 string)row format delimited fields terminated by ' ';OKTime taken: 0.07 secondshive> create table student(id int,name string,age in原创 2014-08-19 16:26:44 · 2052 阅读 · 0 评论 -
sqoop1.4.5 导入 hive IOException running import job: java.io.IOException: Hive exited with status 1
sqoop 导入 hivehive.HiveImport: Exception in thread "main" java.lang.NoSuchMethodError: org.apache.thrift.EncodingUtils.setBit(BIZ)BERROR tool.ImportTool: Encountered IOException running import原创 2014-09-08 02:11:25 · 21317 阅读 · 0 评论 -
hive中删除表的错误Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException
hive中删除表的错误Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaExceptionFAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(message:javax.jdo.JDODataStoreException: Iteration request failed :原创 2014-09-09 23:51:30 · 34121 阅读 · 4 评论 -
hive 简单操作搜狗实验室的词频文件
1:下载搜狗实验室的词频文件 http://www.sogou.com/labs/dl/w.html原创 2014-08-21 11:46:45 · 3412 阅读 · 0 评论 -
sqoop 1.4.5 增量导入hive 0.12.0
导入命令bin/sqoop import --connect jdbc:mysql://10.6.X.X:3306/lir --username dss --password abc123 --table bb_month --hive-import -m 100bin/sqoop import --connect jdbc:mysql://10.X.X.X:3306/lir --tabl原创 2014-09-08 21:03:03 · 7359 阅读 · 0 评论 -
hive加载大文件(3G)
1:上传文件到hadoop原创 2014-09-11 18:47:28 · 2201 阅读 · 0 评论 -
Hive学习和配置Mysql
1.Hive简介 起源自facebook由Jeff Hammerbacher领导的团队 构建在Hadoop上的数据仓库框架 设计目的是让SQL技能良好,但Java技能较弱的分析师可以查询海量数据 2008年facebook把hive项目贡献给Apache Hive的组件与体系架构 用户接口:shell, thrift, web等 Thrift服务原创 2014-08-17 12:11:14 · 4948 阅读 · 0 评论 -
Hive 1.1.1 启动错误
Hive启动错误[jifeng@feng02bin]$ ./hiveLogginginitialized using configuration injar:file:/home/jifeng/hive/apache-hive-1.1.1-bin/lib/hive-common-1.1.1.jar!/hive-log4j.propertiesSLF4J:Class原创 2015-09-05 15:18:57 · 1401 阅读 · 0 评论