- 博客(4)
- 收藏
- 关注
原创 集群搭建笔记
--所有组建版本依照公司生产集群版本 首先创建一台新的虚拟机,进行基础设置和公有部分的搭建,之后克隆,再向主节点中添加专有的软件 # 基础设置 【固定IP】(NET模式) <root> <!-- (新版镜像不管)vi /etc/udev/rules.d/70-persistent-ipoib.rules 主节点可以在这一步进入后不编辑,但是克隆出来的从节点需...
2019-04-28 15:11:13
199
原创 hive学习笔记
HIVE 基础 基于Hadoop的数据仓库-datawarehouse。【是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合】 2.数据基本不删除和修改;数据是面向主题的,数据是集成的,数据是不可更新的;数据由于不断灌入,所以是不断更新的。 3.提供雷SQL的查询,本质是将MR包装,简化为HQL的编写。 4.数据存在HDFS,HQL分析底层是由MR事先,执行程序运行在YARN上。 ...
2019-02-27 17:47:35
122
原创 hive3.0.0搭建记录
Mysql 查看是否安装过MySQL ```yum list installed mysql* ``` 或 rpm -qa | grep mysql* 安装前先删除Mysql相关的文件和包 ```yum -y remove mysql-libs* 安装mysql客户端: ```yum install mysql ``` 安装mysql 服务器端: yum install mysql-s...
2019-02-27 17:45:12
504
原创 Hadoop集群中MR任务一直卡住
集群三台,节点内存都是3G 版本 hadoop-2.7.4 hive-2.3.4 zookeeper-3.4.11 HIVE执行联合查询之后如下 WARNING: Hive-on-MR is deprecated in Hive 2 and may not be available in the future versions. Consider using a different e...
2019-02-26 19:08:50
2687
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人