复杂度为O(1)的最不常用[LFU]缓存算法

参考链接:http://python.jobbole.com/82424/

这篇文章描述了怎么用 Python 实现复杂度为 O(1) 的「最不常用」(Least Frequently Used, LFU)缓存回收算法。在 Ketan Shah、Anirban Mitra 和 Dhruv Matani的论文中有算法描述。实现中的命名是按照论文中的命名。

LFU 缓存回收机制对于 HTTP 缓存网络代理是非常有用的,我们可以从缓存中移除那些最不常使用的条目。
本文旨在设计一个其所有操作的时间复杂度都只有 O(1)的 LFU 缓存算法,这些操作包括了插入、访问和删除(回收)。

这个算法中用了双向链表。其一是用于访问频率,链表中的每个结点都包含一个链表,其中的元素有相同的访问频率。假设缓存中有5个元素。有两个元素被访问了一次,三个元素被访问了两次。在这个例子中,访问频率列表有两个结点(频率为1和2)。第一个频率结点的链表中有两个结点,第二个频率结点的链表中有三个结点。


相关的python代码如下:

class Node(object):
		def __init__(self,data):
				self.data= data
				self.prev = None
				self.next = None

class DoublyLinkedList(object):
		def __init__(self):
				self.head = None
				self.tail = None
				self.count= 0
		def add_node(self,cls,data):
				return self.insert_node(cls,data,self.tail,None)
		def insert_node(self,cls,data,prev,next):
				node = cls(data)
				node.prev = prev
				node.next = next
				if prev:
					prev.next = node
				if next:
					next.prev = node
				if not self.head or next is self.head:
					self.head = node
				if not self.tail or prev is self.tail:
					self.tail = node
				self.count +=1
				return node
		def remove_node(self,node):
				if node is self.head:
					self.head = node.next
				else:
					node.prev.next = node.next
				if node is self.tail:
					self.tail = node.prev
			   	else:
					node.next.prev = node.prev
				self.count -=1;
		def get_nodes_data(self):
				data=[]
				node = self.head
				while node:
					data.append(node.data)
#print "asd"
					node = node.next
				return data
class FreqNode(DoublyLinkedList,Node):
		def __init__(self,data):
				DoublyLinkedList.__init__(self)
				Node.__init__(self,data)
		def add_item_node(self,data):
				node = self.add_node(ItemNode,data)
				node.parent= self
				return node
		def insert_item_node(self,data,prev,next):
				self.insert_node(ItemNode,data,prev,next)
				node.parent = self
				return node
		def remove_item_node(self,node):
				self.remove_node(node)
class ItemNode(Node):
		def __init__(self,data):
				Node.__init__(self,data)
				self.parent = None
class LfuItem(object):
		def __init__(self,data,parent,node):
				self.data = data
				self.parent = parent
				self.node = node
class Cache(DoublyLinkedList):
		def __init__(self):
				DoublyLinkedList.__init__(self)
				self.items = {}
		def insert_freq_node(self,data,prev,next):
				return self.insert_node(FreqNode,data,prev,next)
		def remove_freq_node(self,node):
				self.remove_node(node)
		def insert(self,key,value):
				if key in self.items:
					raise DuplicateException('key exists')
				freq_node = self.head
				if not freq_node or freq_node.data != 1:
#print "adassd"
					freq_node = self.insert_freq_node(1,None,freq_node)
				item_node = freq_node.add_item_node(key)
				self.items[key] = LfuItem(value,freq_node,item_node)
		def access(self,key):
				try:
					tmp_node = self.items[key]
				except KeyError:
					raise NotFoundException('key not found')
				freq_node = tmp_node.parent
				next_freq_node = freq_node.next
				if not next_freq_node or next_freq_node.data != freq_node.data+1:
					next_freq_node = self.insert_freq_node(freq_node.data+1,freq_node,next_freq_node)
				item_node = next_freq_node.add_item_node(key)
				tmp_node.parent = next_freq_node

				freq_node.remove_item_node(tmp_node.node)
				if(freq_node.count == 0):
						self.remove_freq_node(freq_node)
				tmp_node.node = item_node
				return tmp_node.data
		def delete_lfu(self):
	  			if not self.head:
					raise NotFoundException('No frequency nodes found')
		 		freq_node = self.head
				item_node = freq_node.head
	 			del self.items[item_node.data]
				freq_node.remove_item_node(item_node)
 				if freq_node.count == 0:
					self.remove_freq_node(freq_node)				 

def funcs(da):
		for d in da:
			print d
if __name__ == '__main__':
		ca = Cache()
		ca.insert(1,"123")
		ca.insert(2,"122")
		ca.insert(3,"322")
		da = ca.get_nodes_data()
		print	ca.access(1)
		print ca.access(2)
		print ca.access(3)
		print ca.access(3)		
		funcs(ca.get_nodes_data())


评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值