![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 54
不是七七子
默默努力,慢慢成长。
展开
-
HBase内部结构详解
最近在看《HBase不睡觉书》,挺不错的,很适合入门,推荐大家看看。宏观架构Master:负责启动的时候分配Region到具体的RegionServer,执行各种管理操作。(Master在HBase中的功能比较弱,假如Master挂了,依然可以对数据进行增删改查,但不能创建表、修改列族配置等)。RegionServer:RegionServer上有一个或多个Region,我们读写的数据就存储在Region上。Region:存储一张表的一部分数据。HDFS:真正存储数据的载体。Zoo.原创 2021-11-27 17:27:06 · 1221 阅读 · 0 评论 -
Hadoop集群部署—服务器出现的问题
阿里云服务器:腾讯云服务器:昨天部署了Hadoop集群,今天两台服务器都用不了?!还好阿里云的重启后服务器就可以用了。但腾讯云的重启了几遍还是暂无数据,根本登录不了。原创 2021-11-04 23:10:42 · 168 阅读 · 0 评论 -
HBase Java API基本增删改查操作
1、安装HBase【前提是已经安装好了Hadoop】解压:tar -xvf hbase-1.4.0-bin.tar.gz重命名:mv hbase-1.4.0 hbase在/etc/profile中配置环境变量:export HBASE_HOME=/usr/local/hbaseexport PATH=$PATH:$HBASE_HOME/bin使环境变量立即生效:source /etc/profile配置hbase-env.sh:修改下面的两处配置:export JAVA_HOME=/us原创 2021-11-17 23:21:42 · 1986 阅读 · 1 评论 -
HBase Java API连接出现的问题
代码:public class HelloHBase { public static void main(String[] args) throws Exception { //获取配置文件 Configuration configuration = HBaseConfiguration.create(); configuration.set("hbase.zookeeper.quorum","服务器公网ip:2181"); //创原创 2021-11-14 20:33:00 · 1548 阅读 · 0 评论 -
Hadoop相关问题—File /hdfs-api/test/a.txt could only be replicated to 0 nodes instead of minReplication
Hadoop伪分布部署后,使用Java API创建文件,并写入内容时,发现出现了以下问题。【可以新建文件但不能写入内容】报错:org.apache.hadoop.ipc.RemoteException(java.io.IOException): File /hdfs-api/test/a.txt could only be replicated to 0 nodes instead of minReplication (=1). There are 1 datanode(s) running and原创 2021-11-09 14:11:03 · 265 阅读 · 0 评论