大数据
文章平均质量分 75
Ever_glow
当命运需要你逆风飞翔的时候,就不能随风而去。
展开
-
HIVE简介及基础操作
一、简介来源:Tutorial参考博客:传送门、传送门、传送门Hive是什么Hive是一个基于Apache Hadoop的数据仓库。对于数据存储与处理,Hadoop提供了主要的扩展和容错能力。Hive设计的初衷是:对于大量的数据,使得数据汇总,查询和分析更加简单。它提供了SQL,允许用户更加简单地进行查询,汇总和数据分析。同时,Hive的SQL给予了用户多种方式来集成自己的功能,然后做定制化的查询,例如用户自定义函数.Hive不适合做什么Hive不是为在线事务处理而设计。它最适合原创 2021-05-08 12:17:43 · 474 阅读 · 0 评论 -
Ubuntu配置HIVE
一、安装准备首先需要配置Hadoop,如果没有配置的参考博客:传送门使用的是HIVE3.1.2版本,MySQL5.1.46,Hadoop2.10.1建议先测试一下Hadoop是否能正常启动,若是出现localhost Name or service not known 错误并且是阿里云服务器,首先需要修改/etc/hosts文件在hostname后加上阿里云默认的那一串数字的id,就可以解决。二、配置Mysql使用以下命令安装,安装过程需要自己设置密码sudo apt-g.原创 2021-03-16 21:31:44 · 1050 阅读 · 1 评论 -
Ubuntu安装Hadoop
首先准备两个安装包jdk和Hadoop,注意不要用Hadoop-src的tar包,需要的话可以联系我。注意:本文的所有环境变量以及文件夹命名都是我自主命名,请一定要注意自己配置时的设置一、安装JDK先将jdk包移动到/usr/local(上传时可直接上传到此处),然后解压。此处出现了二进制文件无法读取的问题,百度说是32位机器和64位安装包不匹配,所以使用了openjdk代替。安装命令 :apt-yinstallopenjdk-8-jreopenjdk-8-jdk配置环...原创 2021-03-13 21:30:08 · 4569 阅读 · 7 评论