大数据
莫问、
这个作者很懒,什么都没留下…
展开
-
Apache Kylin2.6.3简介与部署
Kylin简介Kylin的诞生背景Kylin的应用场景使用Kylin的公司为什么要使用KylinKylin的总体架构Kylin安装依赖环境集群规划安装HBase1.1.1<1>下载hbase 1.1.1版本<2>上传到一台服务器,解压缩<3>修改hbase-env.sh<4>修改hbase-site.xml,添加以下配置<5>修改regionservers,添加其他的节点<6>在hbase conf目录中创转载 2020-12-07 14:12:34 · 254 阅读 · 0 评论 -
Azkaban环境搭建与常见问题解决
1.解压azkaban-executor-server-2.5.0.tar.gzazkaban-sql-script-2.5.0.tar.gzazkaban-web-server-2.5.0.tar.gz2.mysql脚本导入mysql -u root -pcreate database azkaban;use azkaban;source azkaban-sql-script/...原创 2019-10-24 17:29:18 · 804 阅读 · 0 评论 -
kylin部署与问题解决
安装kylin的环境准备:hadoophivezookeeper(hbase依赖zookeeper,因为我没有使用hbase默认的zookeeper)hbasejdkspark可以选择性安装在官网下载kylin安装包后解压,配置好环境变量即可注意:在运行官方实例时物理机的内存最少要16g,分配给虚拟机主节点的内存最少4g,否则hbase会不停挂。也会影响其他集群的运行(比如我出现...原创 2019-09-03 11:29:26 · 1218 阅读 · 0 评论 -
Phoenix安装与HBase集成
Phoenix安装(单节点安装即可)1.下载安装包这是使用的是phoenix-4.8.2-HBase-1.2-bin.tar.gz2.解压tar zxvf phoenix-4.8.2-HBase-1.2-bin.tar.gz3.配置① 将phoenix下的phoenix-4.8.2-HBase-1.2-server.jar、phoenix-core-4.8.2-HBase-1.2.j...原创 2019-09-03 09:46:03 · 125 阅读 · 0 评论 -
Cenots7中HBase集群搭建(三节点)
01 下载安装包wget http://mirrors.hust.edu.cn/apache/hbase/1.3.1/hbase-1.3.1-bin.tar.gztar -zxvf hbase-1.3.1-bin.tar.gz -C /export/servers/cd …/servers/mv hbase-1.3.1 hbasevi /etc/profileexport HBASE_...原创 2019-09-03 09:42:49 · 145 阅读 · 0 评论 -
Centos7中Zookeeper三节点集群搭建
安装前需要安装好jdk检测集群时间是否同步检测防火墙是否关闭检测主机 ip映射有没有配置##下载安装包、解压tar -zxvf zookeeper-3.4.5.tar.gzmv zookeeper-3.4.5 zookeeper##修改环境变量(注意:3台zookeeper都需要修改)vi /etc/profileexport ZOOKEEPER_HOME=/home/hado...原创 2019-09-03 09:39:28 · 156 阅读 · 0 评论 -
Centos7下Hadoop2.7.4三节点集群搭建
一、准备linux环境1.准备三台虚拟机(最小化安装),采用NAT联网方式。修改IP为静态IP,示例如下:vi /etc/sysconfig/network-scripts/ifcfg-eth0DEVICE=“eth0”BOOTPROTO=“static” ###HWADDR=“00:0C:29:3C:BF:E7”IPV6INIT=“yes”NM_CONT...原创 2019-08-30 17:32:45 · 202 阅读 · 1 评论 -
Hive安装-单节点
一、Mysql安装(单节点即可)1.下载并安装mysql官方的yum repository进入安装包目录cd /AZB执行下面命令wget http://dev.mysql.com/get/mysql57-community-release-el7-10.noarch.rpmyum -y install mysql57-community-release-el7-10.noarch.r...原创 2019-09-03 11:05:58 · 771 阅读 · 0 评论 -
CM自动化安装CDH
CM自动化安装CDH5.14.0详解目前企业级大数据集群安装有两套方案:Ambari + hdp 或者Cloudera Manger + CDHCDH:一个对Apache Hadoop的集成环境的封装,可以使用Cloudera Manager进行自动化安装CDH5.14.0版本说明CDH最早版本只包含hadoop、hive、hbase等基础组件,CDH5.14.0版本目前已经封装了spar...原创 2020-12-02 15:46:13 · 183 阅读 · 0 评论