大数据
sx_1706
这个作者很懒,什么都没留下…
展开
-
NoRouteToHost
IOException当网络上的一台机器不知道如何将 TCP 数据包发送到指定的机器时,您会收到 TCP No Route To Host 错误 - 通常包含在 Java 中。我的问题是:本地ip修改后,未重启集群导致的。JVM中还缓存这原来的host映射关系其他原因:配置文件中远程机器的主机名错误客户端的主机表/etc/hosts具有目标主机的无效 IP 地址。DNS 服务器的主机表具有目标主机的无效 IP 地址。客户端的路由表(在 Linux 中为 iptables)是错误的。DHCP原创 2021-10-22 16:38:36 · 1075 阅读 · 0 评论 -
Hbase查询最新插入的数据
确定hbase表中最后更改的数据是哪一条。可以根据时间戳进行查询Hbase shell命令如下scan 'abc', { COLUMN => 'a:b', TIMERANGE => [1634101200000, 1634223600000]}"将最近的时间转化为时间戳。即可查询到指定时间范围修改对应列的rowkey...原创 2021-10-18 16:57:21 · 2540 阅读 · 0 评论 -
一致性Hash算法
一致性哈希算法(DHT)应用目前主要应用于分布式缓存当中。可以有效地解决分布式存储结构下动态增加和删除节点所带来的问题。原理客户端和服务器ip或id经过hash计算后都会落在一个hash环上,客户端请求会被分发到顺时针离他最近的服务器上当节点过少时,易照成数据倾斜。这是可以添加虚拟节点来均匀分布对比普通Hash算法,采用取模的形式,当节点数变化时。需要重新计算所有的hash值而一致性哈希只影响变化节点附近的部分值 有时间画画图!!!参考资料什么是一致性哈希?普通Hash与一致性H原创 2021-09-10 15:14:17 · 83 阅读 · 0 评论 -
Requests Per Second
HBase UI中Requests Per Second:当前region server中每秒接收到的rpc请求数参考文章:Hbase源码分析:Hbase UI中Requests Per Second的具体含义原创 2021-07-21 14:33:23 · 341 阅读 · 0 评论 -
CDH添加新节点小记
CDH新增节点的问题记录原创 2021-07-08 17:08:29 · 932 阅读 · 0 评论