![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 80
theONLY0318
这个作者很懒,什么都没留下…
展开
-
HBase 分布式搭建
文章目录1. 环境2. 下载并解压HBase3. 环境变量4. 配置文件4.1 regionservers4.2 backup-masters4.3 hbase-env.sh4.4 hbase-site.xml4.5 HDFS客户端配置4.6 传给其他三台5. 启动与停止5.1 启动5.2 停止6. hbase shell7. WebUI8. HDFS信息1. 环境JDK1.8+Zookeeper集群+Hadoop集群配置四台主机免密钥NodeNameMasterZookeeperRe原创 2021-03-29 20:48:01 · 77 阅读 · 0 评论 -
Hive搭建
文章目录环境1. Hive三种搭建方式2. Hive下载3. 本地单用户模式(derby)4. 本地多用户模式(mysql)5. 多用户模式5.1 Remote一体5.2 Remote分离环境JDK1.8 + Hadoop2.6.5 HA + Hive 1.2.11. Hive三种搭建方式Hive中metastore的三种方式:内嵌Derby方式使用内嵌的默认元数据数据库Derby,单进程访问Local方式使用其他的关系型数据库,该关系型数据库和hive在同一个节点Remote方式使用原创 2021-03-28 16:09:21 · 171 阅读 · 0 评论 -
Hadoop Yarn-ResourceManager HA搭建
文章目录1. 配置文件mapred-site.xmlyarn-site.xml2. 启动3. 运行自带wordcount4. 停止模拟环境:四台虚拟机node1、node2、node3、node4node1node2node3node4NameNode-1NameNode-2DataNode-1DataNode-2DataNode-3Zookeeper-1Zookeeper-2Zookeeper-3zkfc-1zkfc-2Jour原创 2021-03-24 22:24:12 · 266 阅读 · 0 评论 -
Eclipse配置Hadoop开发环境
Eclipse配置Hadoop开发环境1. Windows 环境配置jdk的安装与配置1.1 下载hadoop1.2 配置环境变量1.3 查看命令2. Eclipse配置2.1 安装插件2.2 Eclipse配置1. Windows 环境配置jdk的安装与配置略1.1 下载hadoophttp://archive.apache.org/dist/hadoop/core/选择版本下载,并解压(解压到没有中文的目录)1.2 配置环境变量HADOOP_HOMEhadoop解压目录路径HADO原创 2021-03-24 21:27:13 · 270 阅读 · 0 评论 -
Hadoop HA 集群搭建
Hadoop HA 集群搭建1. zookeeper集群搭建2. hadoop配置3. HA Hadoop启动4. 测试NameNode active5. zookeeper信息查看6. 停止集群模拟环境:四台虚拟机node1、node2、node3、node4node1node2node3node4NameNode-1NameNode-2DataNode-1DataNode-2DataNode-3Zookeeper-1Zookeeper-2Zook原创 2021-03-18 20:45:06 · 274 阅读 · 0 评论 -
Zookeeper集群搭建
Zookeeper集群搭建1. 下载压缩包2. 配置环境变量3. 修改配置文件4. 另外两台5. 启动环境:3台安装了jdk的Linux1. 下载压缩包http://archive.apache.org/dist/zookeeper/此处使用zookeeper-3.4.6.tar.gz上传至服务器,并解压至指定目录tar -zxvf zookeeper-3.4.6.tar.gz -C /opt/2. 配置环境变量vim /etc/profile在文件末尾处添加配置export ZOOKE原创 2021-03-18 20:25:23 · 115 阅读 · 0 评论 -
hdfs分布式搭建
HDFS分布式搭建环境准备1. ssh免密钥设置2. Hadoop安装及配置3. hadoop环境变量4. 格式化hadoop并启动模拟环境:四台虚拟机node1、node2、node3、node4node1node2node3node4NameNodeSecondaryNameNodeDataNode-1DataNode-2DataNode-3/etc/hosts环境准备四台虚拟机 :/etc/hosts192.168.184.61 nod原创 2021-03-18 18:51:56 · 113 阅读 · 0 评论