hive
a11a2233445566
活泼
展开
-
hive安装配置
1.上传hive安装包 2.解压 3.配置Hive(在一台机器上即可) mv hive-env.sh.template hive-env.sh 4.运行hive 发现内置默认的metastore存在问题(1.换执行路径后,原来的表不存在了。2.只能有一个用户访问同一个表) 5.配置mysql的metastore 5.1上传两个mysql的rpm包 rpm -原创 2015-03-19 15:19:46 · 411 阅读 · 0 评论 -
hive transform脚本书写问题
问题描述: 集群环境发生变化,原来Python版本2.7,在其上写的udf.py(用Python写的udf),如下运行正常: ADD FILE /home/users/…../readlines.py; select transform(shw) using 'python readlines.py' as (shw bigin原创 2017-01-19 15:48:30 · 636 阅读 · 0 评论 -
NBA篮球运动员大数据分析决策支持系统
package com.dt.spark.sparksql import org.apache.hadoop.conf.Configuration import org.apache.hadoop.fs.{FileSystem, Path} import org.apache.spark.SparkConf import org.apache.spark.sql.SparkSess原创 2017-02-09 22:43:51 · 6803 阅读 · 0 评论 -
hive启动报错问题
Hive启动时报错:如图 原因:我们用的hive里jline-2.12.jar版本与hadoop的版本不一致所致。将hadoop里的jline jar包换成hive里的就可以解决了。 Hive里jline-2.12.jar 所在目录:HIVE_HOME/lib Hadoop 里jline jar包所在的目录(3个): 1、HADOOP_HOME/share/hadoop/原创 2017-01-23 16:54:40 · 872 阅读 · 2 评论