JavaAPI连接HBase慢的问题

最新推荐文章于 2023-04-18 17:01:56 发布
最新推荐文章于 2023-04-18 17:01:56 发布
阅读量1.2k 收藏 2
点赞数
分类专栏： hbase 文章标签： hbase java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/a905793674/article/details/120334315
版权

使用Java代码连接HBase，获取连接需要10几秒，经过打断点发现是因为卡在zookeeper连接比较慢，然后又测试获取zookeeper连接，发现确实很慢，又经过打断点跟踪发现是卡在这行代码

InetAddress.getLocalHost().getCanonicalHostName()
在windows的hosts文件中增加

192.168.67.1 windows的主机名

  左边的ip地址是VMware Network Adapter VMnet8的虚拟机网卡的ip地址

  右边配置windows本地的主机名

大鹏coding
关注
专栏目录
java hbase 查询优化_JavaApi操作Hbase慢的问题
weixin_32150027的博客
02-16 1127
本帖最后由 北冥有鱼 于 2016-8-1 23:28 编辑我用java api操作hbase,测试的时候,3台机器,一台master,二台regionServer,自己搭的的zookeeper,建个表都是3秒多,,,,为什么这么慢呢.... 在很少的数据里面通过rowkey查询数据,也要好几秒..我用的1.2.1版本,论坛上的关于hbase优化的帖子我也看了,但是感觉我这问题不是优化的问题......
eclipse java连接hbase卡住不动
徐冉的博客
05-26 2034
问题   java连接hbase卡住 这个过程会持续一段时间 <span style="color:#ff0000">log4j:WARN No appenders could be found for logger (org.apache.hadoop.security.Groups). log4j:WARN Please initialize the log4j syst...
关于JAVA api连接Hbase一直卡着不动解决办法
叙话代码
05-10 2169
问题说明: 实验环境是阿里云服务器、centos7、hadoop、hbase、均是伪分布式，拿来学习足够使用。 hbase shell所有操作均正常，java创建数据库不成功 检查点1：检查自己的主机名字是否改写成功，这部分在重装系统时候就应该先考虑到。 检查点2：检查自己的/etc/hosts文件是否有ip 主机名的对应（PS：服务器上的hosts文件ip都是内网ip，不管你是虚拟机还是云服务器） 检查点3：不管你使用的IDE是啥，都要在你的本地环境里面的hosts文件里面填写上服务器主机对应的ip（P
解决java使用API连接HBase超时、连不上问题
weixin_48435461的博客
12-27 4347
连接超时报错、连不上问题的解决 一、连接超时的问题 我配置的HBase使用的是自带的zookeeper，所以一开始使用的配置文件里没有配zookeeper，导致连接超时并且挂掉。如果你使用的是HBase自带的zookeeper，那么在你maven工程的resources(资源文件)中的hbase-site.xml加入如下配置 <property> <name>hbase.zookeeper.quorum</name> <value&
HBase写入性能太低
m0_57320261的博客
04-18 1008
HBase 是基于 LSM tree 数据结构实现的，在写入时需要进行数据排序、合并等操作，相比 HDFS 的追加写入来说，延迟会更高。可以通过优化 HBase 的配置或者选择其他的 NoSQL 数据库来提升性能，同时也可以考虑在 Flink 中增加缓存等方式，提高写入效率。而 HBase 是分布式数据库，每个 RegionServer 只负责一部分数据，写入时可能存在热点问题，导致性能较差。Flink 在写入 HBase 时，默认只有一个并发度，如果数据量较大，可能会导致写入过慢。
Java程序连接Hbase集群
DreamsArchitects的博客
07-13 741
Java程序连接Hbase集群，并使用API增删改查
HBase的Java API操作
qq_40078490的博客
07-31 2469
HBase的Java API操作代码，实现增删改查，过滤功能
java api连接hbase
最新发布
04-26
可以使用 HBase Java API 来连接 HBase。首先，需要在代码中指定 HBase 的配置信息和连接参数，例如连接 HBase 的 ZooKeeper 地址和端口号。然后，可以通过 HBase Java API 来创建表、读写数据等操作。以下是一个...
java api 访问hbase demo（Maven）
11-22
在Java API中访问HBase是大数据处理中常见的一项任务，HBase作为一个分布式、列式存储的NoSQL数据库，常用于海量数据的实时读写。在这个Java API访问HBase的Maven项目中，我们将探讨如何配置项目，引入依赖，以及...
java 连接hbase 等待_使用JAVA连接HBase时查询数据时，无限等待问题
weixin_39924329的博客
02-13 253
16/07/21 09:22:36 INFO zookeeper.ZooKeeperWrapper: Reconnecting to zookeeper16/07/21 09:22:36 INFO zookeeper.ZooKeeper: Client environment:zookeeper.version=3.4.6-1569965, built on 02/20/2014 09:09 GM...
java 连接Hbase 所需jar包
10-25
java连接hbase 的jar包commons-configuration-1.6；hadoop-core-1.0.4；zookeeper-3.4.6；commons-cli-1.2等大家喜欢的话 就下载吧
Java 连接HBASE ，执行查询超时的解决方法
lyp5257918的博客
12-22 1万+
Hbase 的查询速度非常快，适合用于检索，但是，但待检索的数据量特别大的时候，很容易造成连接超时。通过修改java连接hbase的配置参数，可以有效解决这个问题。注意，单纯修改hbase的配置参数，如超时，并不会起作用。
windows端java程序连接虚拟机Hbase长时间连接，不报错也不停止--当然包含建表，读数据
maybewecan
12-18 359
首先我的hadoop集群，zookeeper集群都是正常的工作的，启动hbase后，在linux上都是正常工作的，建表都是可以的，因此错误只能出在java程序上，这是我的测试程序： public class HbaseTest { private HBaseAdmin admin; HConnection connection; /** * 执行Test之...
windows 环境下，IDEA 开发HBase与Java连接hbase长时间无反应问题
muyingmiao的专栏
08-28 4216
1.本地环境hbase1.2.1错用了hadoop-core.jar，应该使用hadoop2版本的jar 2.本地环境没有配置region Servers的host 要现在hbase安装主机上的ect\hosts文件里加上主机ip和主机名，如下第一行所示。192.168.187.209 ubuntu001 192.168.31.100 hadoop000 #192.168.187.209 ...
Java程序不报错就是卡住,Hbase Java客户端连接Hbase运行后长时间卡住，最后报错，这该怎么解决呢...
weixin_34121505的博客
03-10 1105
火山日常啰嗦运行hbase java客户端程序，运行后就一直卡着，经过很长一段时间后就报错了，那时候有点懵，不过幸好后来解决了。问题描述：Hbase Java客户端连接Hbase运行后长时间卡住，没有其他任何的提示了？到底是出了什么问题了呢？代码如下：package mapreduceHbase;import java.io.IOException;import java.util.ArrayLi...
java hbase 写入性能_hbase java写入性能提高
weixin_35955473的博客
03-02 406
批量数据通过java写入hbase，下面有一个小小的技巧，大大提高性能例子：写入10000行数据注意代码中有注释//############################ 的行，下面称之为 ”#代码“对比加入”#代码“ 前后的性能没有”#代码“，耗时31541ms含有 ”#代码“，耗时2455ms效果非常明显。贴上代码：import java.io.IOException;import ja...
HBase写入优化
u013887751的博客
03-17 4154
前言 在HBASE持续写入的时候遇到一种奇怪的情况，写着写着HBase就会出现一阵写入速度为0的情况。在网上查了很多资料，终于找到一篇外文的资料，有详尽的实验和解决方案，在此做一下翻译。原文连接 （需要翻墙） 翻译 问题 我们的程序是通过mapreduce job运行hive query。但mapper程序运行的时候会出现失败（不断的重复失败，最终导致job被kill），报错如下
分析、解决java访问HBase 1.2.4时put数据卡住很久并报错：Failed to get region location
热门推荐
爱我中华之笔耕不缀！
04-13 2万+
终于配置好了完全分布式的HBase1.2.4的环境，zookeeper集群是独立的，即HBase没有托管ZooKeeper的集群，研究清楚了新版本的api的变化，遂写好了简单的demo代码往某张表里put数据，api很简单从略，运行时卡住，程序一直卡着不动，也没有结束，执行到put那一行就彻底卡住了，一个小时后，控制台会报错
hbase 查询设置超时_hbase master挂掉-zookeeper连接超时原因
weixin_39779537的博客
12-19 459
并行运行hbase删表，建表操作，多个表多个region，导致hbase挂掉。查看日志：从日志中可以看出GC时间过长导致zookeeper连接超时，master退出。(是master退出而不是regionserver退出是因为进行的操作是建表，删表，是由master来进行操作的)。原因：hbase中和GC相关的参数：修改前(默认)：export HBASE_OPTS="$HBASE_OPTS -e...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值