3、Linux SSH免密登录
4、Linux zk高可用部署
5、hadoop集群安装部署
二、HBase安装
1、解压文件
2、创建软链接
三、HBASE配置
1、regionservers配置
2、hbase-site.xml配置
3、hbase-env.sh配置
4、backup-masters配置
四、环境变量配置
1、HBase环境变量配置
2、配置立即生效
五、启动HBase
1、启动Zookeeper
2、启动Hadoop
3、启动HBase
六、验证安装
1、HBase Shell
2、HBase WebUI
一、环境准备
1、HBase历史版本
2、HBase官方文档
Apache HBase ™ Reference Guide
3、Linux SSH免密登录
大数据入门之 ssh 免密码登录_qq262593421的博客-CSDN博客
4、Linux zk高可用部署
大数据高可用技术之zookeeper3.4.5安装配置_qq262593421的博客-CSDN博客
5、hadoop集群安装部署
大数据集群搭建之Linux安装hadoop3.0.0_qq262593421的博客-CSDN博客
二、HBase安装
1、解压文件
cd /usr/local/hadoop
tar zxpf hbase-2.1.0-bin.tar.gz -C /usr/local/hadoop
2、创建软链接
ln -s /usr/local/hadoop/hbase-2.1.0 /usr/local/hadoop/hbase
三、HBASE配置
1、regionservers配置
regionservers配置和hadoop的work一样,hadoop的DataNode节点是哪个regionservers就是哪几个
hadoop003
hadoop004
hadoop005
2、hbase-site.xml配置
<?xml version="1.0"?> <?xml-stylesheet type="text/xsl" href="configuration.xsl"?>hbase.master
60000
hbase.tmp.dir
/data/cluster/hbase/tmp
hbase.rootdir
hdfs://ns1/hbase
hbase.cluster.distributed
true
hbase.zookeeper.property.clientPort
2181
hbase.zookeeper.quorum
hadoop001,hadoop002,hadoop003
hbase.zookeeper.property.dataDir
/usr/local/zookeeper/data
dfs.datanode.max.transfer.threads
4096
hbase.master
hadoop1
hbase.unsafe.stream.capability.enforce
false
hfile.format.version
3
hbase.superuser
hbase,admin,root,hdfs,zookeeper,hive,hadoop,hue,impala,spark,kylin
hbase.table.sanity.checks
false
hbase.coprocessor.abortonerror
false
hfile.block.cache.size
stofile的读缓存占用Heap的大小百分比。该值直接影响数据读的性能当然是越大越好,如果写比读少很多,开到0.4-0.5也没问题,如果读写均衡,设置为0.3左右。如果写比读多,果断使用默认就行。
自我介绍一下,小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里一直到现在。
深知大多数大数据工程师,想要提升技能,往往是自己摸索成长或者是报班学习,但对于培训机构动则几千的学费,着实压力不小。自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!
因此收集整理了一份《2024年大数据全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友。
既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上大数据开发知识点,真正体系化!
由于文件比较大,这里只是将部分目录大纲截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且后续会持续更新
如果你觉得这些内容对你有帮助,可以添加VX:vip204888 (备注大数据获取)
深知大多数大数据工程师,想要提升技能,往往是自己摸索成长或者是报班学习,但对于培训机构动则几千的学费,着实压力不小。自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!*
因此收集整理了一份《2024年大数据全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友。
[外链图片转存中…(img-NSY3f6So-1712892059306)]
[外链图片转存中…(img-8BpM6LkX-1712892059306)]
[外链图片转存中…(img-tpFxhDII-1712892059307)]
[外链图片转存中…(img-U6OJg7K3-1712892059307)]
[外链图片转存中…(img-MAOzz7Zm-1712892059307)]
既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上大数据开发知识点,真正体系化!
由于文件比较大,这里只是将部分目录大纲截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且后续会持续更新
如果你觉得这些内容对你有帮助,可以添加VX:vip204888 (备注大数据获取)
[外链图片转存中…(img-I6f4jFQs-1712892059307)]