![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
hadoop集群搭建等
followmefollowme
这个作者很懒,什么都没留下…
展开
-
HIVE的四种表
HIVE的四种表 1.内部表 内部表:又称受控表,hive默认创建的表类型为内部表 特点:当表定义被删除的时候(如:drop table stu),表中的数据一并被删除(HDFS数据目录,源数据库表文件一并删除); 使用场景:多用来存储一些非业务类型数据,如:各省及对应区号表,而每天收集的业务数据尽量不要定义成内部表,这样即使表删除了,数据还在。 语法如下: create table tableNameA (fieldOne dataType,。。。。。) row format delimited原创 2020-09-15 09:06:18 · 2865 阅读 · 2 评论 -
Hive自定义函数
Hive自定义函数 自定义函数的三中类型 UDF:user define function ,输入单行,输出单行(最为常用) 类似Hive自带的部分函数,如:substr 例子:select subdtr(name,0,3) from order 3; 要求自定义类继承UDF,重写evaluate方法 UDTF:user define table-gen function,输入单行,输出多行,类似于explode(array); UDAF: user define aggr function ,输入多行,原创 2020-09-08 10:17:21 · 161 阅读 · 0 评论 -
HIVE内嵌模式和本地模式安装
Hive安装配置(内嵌模式): 1.拷贝解压文件:tar -zxvf apache-hive-2.1.1-bin.tar.gz 修改名字:mv apache-hive-2.1.1-bin.tar.gz hive 进入cd /opt/mysoft/hive目录下 创建文件夹mkdir myTmp 2.配置Hive cd /opt/mysoft/hive/conf 1)mv hive-env.sh...原创 2019-10-09 19:42:41 · 191 阅读 · 0 评论 -
虚拟机搭建Hadoop集群
先安装几台虚拟机: 命令:vi /etc/sysconfig/network-scripts/ifcfg-eth0 //配置静态IP和网络连接 ONBOOT=“yes” BOOTPROTO=“static” IPADDR=“192.168.110.10” NETMASK=“255.255.255.0” GATEWAY=“192.168.110.1” DNS1=“192.168.110.1” ...转载 2019-09-21 15:23:30 · 157 阅读 · 0 评论