Hive
文章平均质量分 92
gmHappy
从不敢夜郎自大,但也不至于妄自菲薄,只是想做一个靠本事吃饭的手艺人
展开
-
Hive 搭建及开启Kerberos安全模式
一、前言完成Hadoop开启Kerberos安全模式,可参照:https://gaoming.blog.csdn.net/article/details/118958406二、Hive 安装2.1 下载下载地址:https://apache.website-solution.net/hive/配置说明:https://cwiki.apache.org/confluence/display/Hive/GettingStarted2.2 解压及重命名tar -zxvf /root/apache-h原创 2021-08-02 10:02:30 · 1042 阅读 · 0 评论 -
Linux基于Hadoop2.8.0集群安装配置Hive2.1.1及基础操作
前言安装Apache Hive前提是要先安装hadoop集群,并且hive只需要在hadoop的namenode节点集群里安装即可,安装前需保证Hadoop已启(动文中用到了hadoop的hdfs命令)。关于如何安装Hadoop集群请参照:CentOS7搭建Hadoop2.8.0集群及基础操作与测试下载Apache Hadoop下载地址:http://hive.apache.org/downloa...原创 2018-05-03 16:31:46 · 2547 阅读 · 0 评论 -
Linux安装Sqoop及基础使用
下载Sqoop官网地址http://sqoop.apache.org/wget http://mirrors.hust.edu.cn/apache/sqoop/1.4.7/sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz安装及配置解压tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz移动文件夹mv sqoop-1.4.7.bin__...原创 2018-05-04 11:15:10 · 3458 阅读 · 0 评论 -
总结可用的大数据分析软件对应版本
apache-flume-1.8.0-bin、kafka_2.11-0.10.0.0、spark-2.0.0-bin-hadoop2.7hadoop-2.8.0、hbase-1.2.6、apache-hive-2.1.1-bin、zookeeper-3.4.10、sqoop-1.4.7.bin__hadoop-2.6.0apache-storm-1.1.0未完待续......原创 2018-05-04 11:19:40 · 2951 阅读 · 0 评论 -
Spark2.0集成Hive操作的相关配置与注意事项
前言已完成安装Apache Hive,具体安装步骤请参照,Linux基于Hadoop2.8.0集群安装配置Hive2.1.1及基础操作补充说明Hive中metastore(元数据存储)的三种方式:内嵌Derby方式Local方式Remote方式[一]、内嵌Derby方式这个是Hive默认的启动模式,一般用于单元测试,这种存储方式有一个缺点:在同一时间只能有一个进程连接使用数据库。配置文件 hive...原创 2018-05-05 13:14:48 · 3551 阅读 · 0 评论 -
Spark2.0 Java实现将Hive运算结果保存到数据库
package com.gm.hive.SparkHive;import org.apache.spark.sql.Dataset;import org.apache.spark.sql.Row;import org.apache.spark.sql.SaveMode;import org.apache.spark.sql.SparkSession;import java.util.P...原创 2018-05-07 11:35:30 · 4773 阅读 · 0 评论