通俗讲解 Kademlia 原理

我这好久没有学术性的文章出现了。。翻看了下日志,最早的是07年发表的做PCB电路板的日志,之后是08年PHP网页制作,之后是09年C# 的GPS定位软件(虽然自己都没怎么用过。。。)
今天就通俗介绍一下一个最常用,最简洁,最实用P2P的索引算法---Kademlia协议(简称 Kad)。 使用BT 的同学经常会发现DHT这个缩写,使用电驴的同学就会发现KAD缩写。 DHT的全称叫哈希表(Distributed Hash Table),KAD就是Kademlia的缩写。 Kademlia是DHT的一种,其实BT和电驴都是使用Kademlia 协议,只是电驴中加密方式不同。
好了,前面只是简单引入一下基本问题。 下面我将非常非常非常非常通俗俗俗俗的给大家介绍Kademlia协议的知识。目的只是在于让使用p2p软件的非专业同学对此协议有一个了解,主要针对对p2p好奇的同学。因为网上关于Kademlia的资源不是很多,而且都是给专业人准备的,很抽象笼统。 所以一般同学理解会有困难。 专业同学直接按(http://emule-fans.com/emule-kademlia-protocol-document/)连接参考Kademlia 协议原文。
在进入正题之前,先请看下面的一张图片。(我不是很懂的,感谢张junyuan同学提供精彩图片,这里只用来作为讲解工具,没有其他意思)熟悉的同学可能很容易看出这张图片是某国比较出名的影星集合照。 让我们的思绪回到纯真的高中或大学年代。。。。



首先,什么是P2P(peer to peer,点对点)? 简而言之,班上某个同学(假设班长)有上面某位明星影视作品一部。 你知道了,你找到该班长,复制一份。。。这就是P2P。
最早的P2P是使用索引服务器的。 什么是索引服务器? -- 班级很多同学有不同影视作品N部。但是你想找到某人的某部,这么多同学你怎么去找了拷贝呢? 这时候班上有个同学站起来了(还假设班长,班长嘛!),我来给大家登记信息。于是班长打开Excel,同学们过来,大家资源到我这登记一下,要找资源的同学可以直接来我这边来索引。这时候,班长所作的工作就是索引服务器。 由班长的好处是什么呢? 简单,方便,查询次数是O(1),也就是你唯一查询就可以找到目标。 但是坏处也是显而易见的,首先,班长很忙,其次,班长很脆弱,万一班长为班级出头被人家K了。。。不过最受不了的是,班主任发现班长的电脑里面文件,然后给delete了(04年电骡最大服务器Razorback2 由于侵权被关闭)。
所以需要一个更好的解决方案来处理。这时候就是Kademlia协议出现了(还有CAN,CHORD等),其实他不能算一个协议,就是一个查询方法吧。 班长不帮你查了,你总要自己找资源吧!

首先,班上每个同学有学号,这是入学的时候就给你唯一的ID。其次,对资源用key代替学号和key都是数值,在上面的途中就可以看出,个人的资源所代的key(eMule用160bits,号码多好记,又安全,你在班上问8号在哪不会有人管你,你要是问松岛枫在哪。。。嘿嘿,等着进办公室吧)。 我们假设班级有100个人。那每个人都有号码,我们就从1-100编号。这样的话学号和资源号是重复的。 Kademlia的思想就是把某一个资源的信息,给和资源key相同id的人保管。 举个例子,比如上面8号(石川XX), 有8号资源的人不知一个,比如班上1号,2号,10号等等。 但是8号石川(key)的号码,和班级8号同学(假设文艺委员)的号码是一样的,于是文艺委员就记下了所有有8号资源的人的信息(座位IP,资源在哪个盘port,学号ID)。 如果你想要找8号资源的时候就去找

8号同学文艺委员。 然后8号同学文艺委员就告诉资源在1号同学那,他坐在2组三排外面一个。直接去他座位上拷就行了。。。。。
不过问题又来了,你怎么知道8号文艺委员坐在哪呢?(现在为了防止不良竞争,学号都不公开的,你知道他名字但不晓得学号)。 怎么办? 好办,你自己不是也有张表嘛!假设你是60号, 你有资源60号(xx美子)的资源表。 你从你的表中找出靠8号最近的人的位置。比如你表中记录有 10号,坐在3组2排外面, 还有6号,坐在1组9排里面一个。你跑过去问他们:知道8号在哪不?!(这时候是2个人并行查询,也可以三个,或更多)他们就翻自己的档案,再返回他们最靠近8号的那个人给你。比如7号,9号,或7号,11号。 这里就有些难理解了。。。。那你就先认为他们返回8号坐的位置给你,你可以直接去拷了。 Ok,搞定,考到片子了。。。。
 
现在为什么找7号和10号的时候他们返回的是两个最相近的人的资料,而不是确切的资料。 因为你要考虑到万一有人没来呢(实际情况是ID没有分配给节点)。 比如8号今天生病没来,你又想拷。那不是找不到下文了?不用着急,其实8号的信息还在附近的人那备份了。 比如在7号那。当6号,和10号返回相同的7号的时候,就说明7号那边存有相关资料了。
 
下面一个问题就是如何自己记录信息(路由表)。 Kademlia 使用k 桶(buckets)。 在Kademlia里面使用 160bits ID,所以每个点维160个list。 比如k=2,就是你的一张list里面最多存两个数据。 数据范围是按指数增加。比如,你是25号,跟你距离是1(24,26,)记录在第一行, 2-4(22,23,27,28)的只记录两个,4-8(。。。。),可以看出,距离越近,其实记录的数据越多,这样一来,就可以方便其他人来找啦。这段还是有些抽象。。。更新列队的时候,如果新访问的那个人不在你k桶,那就塞到尾部。如果k桶满了,看看问问这个k桶的第一个人还在不在,如果不在的话就删掉,要是在的话,把第一个人移到最后,新来的不要。 这个意思是约是经常在线的人就越会经常在线。。。宅男也废电的。。。。
原理基本就讲完了。 Kademlia 有一个特别之处就是使用异或测算距离。
 
 
下面是我从我们学校偷出来的例子。。。嘿嘿。网上没有什么好的例子,更本就没有例子。。。把下面ID改为01110 ,打印错误

























 
csdn http://hi.csdn.net/mpanxiao

  • 3
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
在实现Kademlia算法时,可能会遇到以下问题: 1. 节点ID的生成方式:节点ID是Kademlia算法中非常重要的概念,节点ID必须是唯一的。可以使用随机数生成节点ID,但这可能会导致节点ID重复。一种解决方案是使用节点的公钥或哈希值作为节点ID。 2. 路由表的维护:Kademlia算法中每个节点都维护一个路由表,该路由表包含了其他节点的信息。节点需要定期更新路由表,加入新的节点信息,同时删除失效的节点。为了避免路由表中的节点信息太多,可以采用分桶的方式维护路由表。 3. 路由的选择:Kademlia算法中,路由的选择是非常重要的。为了提高路由的效率,节点需要选择与目标节点ID最接近的节点进行路由。可以使用异或运算计算节点ID之间的距离,并选择距离最小的节点进行路由。 4. 存储的可靠性:Kademlia算法中,节点需要存储数据。为了保证数据的可靠性,可以使用冗余存储的方式,在多个节点上存储同一份数据。同时,还可以设置数据过期时间,防止数据在网络中长时间存储而无法清除。 解决上述问题的方法包括: 1. 节点ID的生成可以采用公钥或哈希值作为节点ID,这样可以保证节点ID的唯一性。 2. 路由表的维护可以采用分桶的方式,同时定期更新路由表,加入新的节点信息,删除失效的节点。 3. 路由的选择可以使用异或运算计算节点ID之间的距离,并选择距离最小的节点进行路由。 4. 存储的可靠性可以采用冗余存储的方式,在多个节点上存储同一份数据,并设置数据过期时间,防止数据在网络中长时间存储而无法清除。 以上是一些常见的问题和解决方案,实际上在实现Kademlia算法时,还可能会遇到其他问题,需要根据具体情况进行解决。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值