hive
Java架构师联盟
这个作者很懒,什么都没留下…
展开
-
个人整理Hive安装手册(1)--后期不断更新
1.上传tar包2.解压 tar -zxvf hive-1.2.1.tar.gz3.安装mysql数据库 推荐yum 在线安装(运行脚本安装)4.配置hive (a)配置HIVE_HOME环境变量 vi conf/hive-env.sh 配置其中的$hadoop_home (b)配置元数据库信息 vi hive-site.xml 添加如下内容: <confi...原创 2020-08-20 20:28:39 · 136 阅读 · 0 评论 -
三个回答引发的深思:程序员是只会干活就可以还是需要更进一步
最近,我在某平台发的一篇文章,引起了粉丝或者读者的热烈讨论,讨论的内容如下文章的内容针对jdk底层的一些东西进行询问和讲解的一个面试流程,在这些网友的讨论中,主要包括以下两种声音一种是觉得只要会干活,懂那么多干什么,最后要的还不是会干活的 还有一种观念和小编一样,会不会干活另说,起码你要能先进去在证明自己会不会干活啊,毕竟在面试的时候,没人会让你现场解决一个bug或者实现一个功能,反正我以及身边的朋友是都没遇到过但是,这种情况的产生也不是无迹可寻,原因主要有以下几点人员的增多:无论.原创 2020-07-12 23:13:49 · 225 阅读 · 0 评论 -
基于Hadoop不同版本搭建hive集群(附配置文件)
本教程采用了两种方案一种是hive-1.21版本,hadoop版本为hadoop2.6.5还有一种是主要讲基于hadoop3.x hive的搭建先来第一种一、本地方式(内嵌derby)步骤这种存储方式需要在本地运行一个mysql服务器,并作如下配置解压修改安装包内conf文件夹下的hive-default.xml.template,并重命名为hite-site.xml<configuration> <property> ..原创 2020-05-28 22:59:52 · 449 阅读 · 0 评论 -
代码示例讲解Hive分区分桶以及自定义函数
导入数据:1、load data local inpath '/root/tes.txt' into table test.usr; 将本地的数据导入到hive中2、从hdfs集群导入数据load data inpath 'hdfs://node01:9000/user/tes.txt' into table test.te; LOAD DATA命令,可分为LOAD DA...原创 2020-04-13 21:23:15 · 429 阅读 · 0 评论 -
MR和HDFS的高端封装--Hive
在Hadoop的官方网站中说明了其拥有许多的组件,但是,最主要的组件就是HDFS、MapReduce,yarn以及相关的项目HBase,Hive,Zookeeper以及spark,在前面的几个博客里我们已经对于HDFS,MapReduce,yarn以及HBase进行了相应的讲解,今天,我们来交流一下有关于Hive的相关知识在Hadoop的存储处理方面提供了两种不同的机制,一种是之前介绍过的Hba...原创 2020-03-16 21:46:43 · 209 阅读 · 0 评论