HBase-客户端-超时机制设置

背景

当用户有一些大请求的时候,会报超时,但是用户觉得请求慢一些也能接受,如何设置?

如果用户觉得HBase默认超时时间太长,希望请求超过一定毫秒数就报超时退出来,而不是一直在等待,如何设置?

 

入手

从网上搜索可以看到很多有关hbase客户端超时设置的参数说明

不过并不是非常详细

不过至少我们能定位到这几个参数,以进行入手

hbase.rpc.timeout

hbase.client.operation.timeout

hbase.client.scanner.timeout.period

 

HConstants是一个重要的类,几乎所有hbase的参数都在这里定义参数名和参数默认值

 

1.hbase.rpc.timeout

 

/**

 * timeout for each RPC

 */

public static final String HBASE_RPC_TIMEOUT_KEY = "hbase.rpc.timeout";

 

 

很多地方引用,先看命名最有可能的地方

RpcRetryingCallerFactory中的用法:

在newCaller中用到,看过HBase读写链路的话,应该知道比如HTable.get里面就用到了newCaller

RpcRetryingCaller

RpcRetryingCaller中具体执行rpc操作,看注释可以看到,rpc timeout是每次rpc的超时时间(一个操作可能会有多次rpc(重试机制HBase-客户端-重试机制))

 

rpc timeout在哪里被用到了

1.rpcClient里面是实际的io交互,在caller中set了rpc timeout的值

2.以及判断整个操作是否超时

 

3. 一个rpc多条操作的时候

 

2.hbase.client.operation.timeout

 

/** Parameter name for HBase client operation timeout. */

public static final String HBASE_CLIENT_OPERATION_TIMEOUT = "hbase.client.operation.timeout";

依然看调用位置

1.HBaseAdmin

2.TableCpmfiguration<--HTable

 

都是赋值给operationTimeout

 

应用:

HTable.get中caller用到

 

是callWithRetries方法的最后一个参数 (之前在rpc timeout也讲到这个方法)

从代码可以看到:

hbase.client.operation.timeout对应operationTimeout变量

1.只有在catch中才被用到,

2.而且是重试次数大于1的情况下

 

点击图片查看大图

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
hbase-client-project-2.4.16.jar是一个用于连接HBase数据库的Java客户端项目。HBase是一个分布式、面向列的NoSQL数据库,它可以存储大规模数据,并提供高可靠性和高性能的数据访问。而hbase-client-project-2.4.16.jar则是用来连接HBase数据库的Java客户端库。通过这个库,开发人员可以在Java应用中方便地访问HBase数据库,进行数据的读取、写入和管理操作。 hbase-client-project-2.4.16.jar库提供了丰富的API,使得开发人员可以编写简洁、高效的代码来操作HBase数据库。通过这个库,可以轻松地建立与HBase集群的连接,创建、删除表格,进行数据的增删改查等操作。此外,hbase-client-project-2.4.16.jar也提供了一些高级特性,比如支持过滤器、批量操作、数据版本控制等功能,让开发人员能够更加灵活地利用HBase数据库进行数据处理。 除此之外,hbase-client-project-2.4.16.jar还支持与HBase的安全认证和权限控制,可以保障数据访问的安全性。开发人员可以使用这个库来编写安全的Java应用,确保对HBase数据库的数据进行合法、受控的访问。 总之,hbase-client-project-2.4.16.jar是一个强大、灵活的Java客户端库,为开发人员提供了便捷的方式来连接、操作HBase数据库。无论是小规模的应用还是大规模的数据处理需求,它都能够满足开发人员的要求,帮助他们更有效地利用HBase数据库。 (字数: 258)

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值