书接上回,这期来说说HashMap和HashSet.
1.哈希表
1.1 概念
顺序结构以及平衡树中,元素关键码与其存储位置之间没有对应的关系,因此在查找一个元素时,必须要经过关键 码的多次比较。顺序查找时间复杂度为O(N),平衡树中为树的高度,即O( ),搜索的效率取决于搜索过程中 元素的比较次数。
理想的搜索方法:可以不经过任何比较,一次直接从表中得到要搜索的元素。 如果构造一种存储结构,通过某种函 数(hashFunc)使元素的存储位置与它的关键码之间能够建立一一映射的关系,那么在查找时通过该函数可以很快 找到该元素。
当向该结构中:
插入元素 根据待插入元素的关键码,以此函数计算出该元素的存储位置并按此位置进行存放
搜索元素 对元素的关键码进行同样的计算,把求得的函数值当做元素的存储位置,在结构中按此位置取元素比较,若 关键码相等,则搜索成功
该方式即为哈希(散列)方法,哈希方法中使用的转换函数称为哈希(散列)函数,构造出来的结构称为哈希表(Hash Table)(或者称散列表)
例如:数据集合{1,7,6,4,5,9};
哈希函数设置为:hash(key) = key % capacity; capacity为存储元素底层空间总的大小。
用该方法进行搜索不必进行多次关键码的比较,因此搜索的速度比较快.
1.2 冲突-概念
对于两个数据元素的关键字 和 (i != j),有 != ,但有:Hash( ) == Hash( ),即:不同关键字通过相同哈 希哈数计算出相同的哈希地址,该种现象称为哈希冲突或哈希碰撞。
把具有不同关键码而具有相同哈希地址的数据元素称为“同义词”。
1.3 冲突-避免
首先,我们需要明确一点,由于我们哈希表底层数组的容量往往是小于实际要存储的关键字的数量的,这就导致一 个问题,冲突的发生是必然的,但我们能做的应该是尽量的降低冲突率。
1.4 冲突-避免-哈希函数设计
引起哈希冲突的一个原因可能是:哈希函数设计不够合理。 哈希函数设计原则:
哈希函数的定义域必须包括需要存储的全部关键码,而如果散列表允许有m个地址时,其值域必须在0到m-1 之间
哈希函数计算出来的地址能均匀分布在整个空间中
哈希函数应该比较简单
常见哈希函数
1. 直接定制法
取关键字的某个线性函数为散列地址:Hash(Key)= A*Key + B 优点:简单、均匀 缺点:需要事先知道关 键字的分布情况 使用场景:适合查找比较小且连续的情况.
2. 除留余数法
设散列表中允许的地址数为m,取一个不大于m,但最接近或者等于m的质数p作为除数,按照哈希函数: Hash(key) = key% p(p将关键码转换成哈希地址.
1.5 冲突-避免-负载因子调节
负载因子和冲突率的关系粗略演示:
所以当冲突率达到一个无法忍受的程度时,我们需要通过降低负载因子来变相的降低冲突率。
已知哈希表中已有的关键字个数是不可变的,那我们能调整的就只有哈希表中的数组的大小。
1.6 冲突-解决
解决哈希冲突两种常见的方法是:闭散列和开散列
1.7 冲突-解决-闭散列
闭散列:也叫开放定址法,当发生哈希冲突时,如果哈希表未被装满,说明在哈希表中必然还有空位置,那么可以 把key存放到冲突位置中的“下一个” 空位置中去。
1. 线性探测 比如上面的场景,现在需要插入元素44,先通过哈希函数计算哈希地址,下标为4,因此44理论上应该插在该 位置,但是该位置已经放了值为4的元素,即发生哈希冲突。
线性探测:从发生冲突的位置开始,依次向后探测,直到寻找到下一个空位置为止。
插入
通过哈希函数获取待插入元素在哈希表中的位置
如果该位置中没有元素则直接插入新元素,如果该位置中有元素发生哈希冲突,使用线性探测找到 下一个空位置,插入新元素
采用闭散列处理哈希冲突时,不能随便物理删除哈希表中已有的元素,若直接删除元素会影响其他 元素的搜索。比如删除元素4,如果直接删除掉,44查找起来可能会受影响。因此线性探测采用标 记的伪删除法来删除一个元素。
2. 二次探测 线性探测的缺陷是产生冲突的数据堆积在一块,这与其找下一个空位置有关系,因为找空位置的方式就是挨 着往后逐个去找,因此二次探测为了避免该问题,找下一个空位置的方法为: = ( + )% m, 或者: = ( - )% m。其中:i = 1,2,3…, 是通过散列函数Hash(x)对元素的关键码 key 进行计算得到的位置, m是表的大小。 对于2.1中如果要插入44,产生冲突,使用解决后的情况为:
研究表明:当表的长度为质数且表装载因子a不超过0.5时,新的表项一定能够插入,而且任何一个位置都不 会被探查两次。因此只要表中有一半的空位置,就不会存在表满的问题。在搜索时可以不考虑表装满的情 况,但在插入时必须确保表的装载因子a不超过0.5,如果超出必须考虑增容。
因此:比散列最大的缺陷就是空间利用率比较低,这也是哈希的缺陷。
1.8 冲突-解决-开散列/哈希桶
开散列法又叫链地址法(开链法),首先对关键码集合用散列函数计算散列地址,具有相同地址的关键码归于同一子 集合,每一个子集合称为一个桶,各个桶中的元素通过一个单链表链接起来,各链表的头结点存储在哈希表中。
从上图可以看出,开散列中每个桶中放的都是发生哈希冲突的元素。
开散列,可以认为是把一个在大集合中的搜索问题转化为在小集合中做搜索了。
1.9 冲突严重时的解决办法
刚才我们提到了,哈希桶其实可以看作将大集合的搜索问题转化为小集合的搜索问题了,那如果冲突严重,就意味 着小集合的搜索性能其实也时不佳的,这个时候我们就可以将这个所谓的小集合搜索问题继续进行转化,例如:
1. 每个桶的背后是另一个哈希表
2. 每个桶的背后是一棵搜索树
1.10 实现
// key-value 模型 public class HashBucket<K,V> { private static class Node<K,V> { private K key; private V value; Node<K,V> next; public Node(K key, V value) { this.key = key; this.value = value; } } private Node<K,V>[] array; private int size; // 当前的数据个数 private static final double LOAD_FACTOR = 0.75; private static final int DEFAULT_SIZE = 8;//默认桶的大小 public void put(K key, V value) { int head = key.hashCode(); // 在链表中查找 key 所在的结点 // 如果找到了,更新 // 所有结点都不是 key,插入一个新的结点 int index = head % array.length; Node<K,V> cur = array[index]; Node<K,V> parent = null; while(cur != null){ if(cur.key.equals(key)){ cur.value = value; return; } parent = cur; cur = cur.next; } Node<K,V> node = new Node<>(key,value); if(cur == null){ node.next = array[index]; array[index] = node; return; } parent.next = node; cur.next = null; size++; if(loadFactor() >= LOAD_FACTOR){ resize(); } } private void resize() { Node<K,V>[] newArray = (Node<K,V>[])new Node[2*array.length]; for(int i = 0;i < array.length;i++){ Node<K, V> cur = array[i]; while(cur != null){ int index = cur.key.hashCode() % array.length; Node<K, V> curN = cur.next; cur.next = newArray[index]; newArray[index] = cur; cur = curN; } array = newArray; } } private double loadFactor() { return size * 1.0 / array.length; } public HashBucket() { array = (Node<K,V>[])new Node[10]; } public V get(K key) { int hash = key.hashCode(); int index = hash % array.length; Node<K,V> cur = array[index]; while(cur != null){ if(cur.key.equals(key)){ return cur.value; } cur = cur.next; } return null; } }
1.11 性能分析
虽然哈希表一直在和冲突做斗争,但在实际使用过程中,我们认为哈希表的冲突率是不高的,冲突个数是可控的, 也就是每个桶中的链表的长度是一个常数,所以,通常意义下,我们认为哈希表的插入/删除/查找时间复杂度是 O(1) 。
1.12 和 java 类集的关系
1. HashMap 和 HashSet 即 java 中利用哈希表实现的 Map 和 Set 2. java 中使用的是哈希桶方式解决冲突的 3. java 会在冲突链表长度大于一定阈值后,将链表转变为搜索树(红黑树) 4. java 中计算哈希值实际上是调用的类的 hashCode 方法,进行 key 的相等性比较是调用 key 的 equals 方 法。所以如果要用自定义类作为 HashMap 的 key 或者 HashSet 的值,必须覆写 hashCode 和 equals 方 法,而且要做到 equals 相等的对象,hashCode 一定是一致的。
2.HashMap和HashSet
2.1HashMap和HashSet区别
类别 | HashSet | HashMap |
底层结构 | 哈希桶 | 哈希桶 |
插入/删除/查找时间 复杂度 | O(1) | O(1) |
是否有序 | 不一定有序 | 无序 |
线程安全 | 不安全 | 不安全 |
插入/删除/查找区别 | 1. 先计算key哈希地址 2. 然后进行 插入和删除 | 通过哈希函数计算哈希地址 |
比较与覆写 | 自定义类型需要覆写equals和 hashCode方法 | 自定义类型需要覆写equals和 hashCode方法 |
应用场景 | Key是否有序不关心,需要更高的 时间性能 | Key是否有序不关心,需要更高的 时间性能 |
2.2HashSet使用案例
比如LeetCode上的这题:
思路:HashSet类是一个存储不可重复数据的集合,我们可以先遍历一遍数组,把值存入HashSet中,同时把出现两次的值给排除,再遍历一遍数组就只会有只出现一次的值了
用HashSet的解法:
1.先创建一个HashSet
2.遍历一遍数组,如果nums[i]里面的值不存在set里面就add,即把nums[i]放到set里面,如果存在就将其移除.(遍历完后set里面就只剩下出现一次的值了)
3再次遍历数组,当set里面存在nums[i]时返回nums[i]的值,否则返回-1即不存在.
2.3HashMap使用案例
比如LeetCode上的这题:
思路:先创建一个HashMap,我们可以通过映射关系让Key存储题目给的节点,Val存储拷贝后的节点,这样我们可以通过Key找到我们拷贝后的节点.(因为题目是深拷贝,所以我们在改变新的数组(对象)的时候,不改变原数组(对象))
用HashMap的解法:
1.先创建一个HashMap
2.创建一个新节点cur让其等于head(就是映射关系中的Key),遍历一遍链表.每次遍历都创建一个新节点node为拷贝后的节点(就是映射关系中的Val),这样我们cur和node就形成了映射关系.用put()方法,将Key与Val对应的对象存入map.比如:Key存第一个节点即head,Val存储第一个节点的拷贝.那么Key里面存在head这个完整的节点,而Val存的也是这个节点拷贝,但是目前里面只有val的值,random与next都为空.
3再次遍历一次链表(因为我们只拷贝了原始数据的val值,next和random值还没有拷贝),我们可以通过get()方法找到我们存入的Key对应的Val的值.比如:现在cur = head 那么map.get(cur)可以拿到head这个节点的拷贝,里面只有val的值,random与next都为空
map.get(cur).next = map.get(cur.next);的意思为:拷贝的节点的next 值等于拷贝前的节点的下一个节点的地址.
map.get(cur).random = map.get(cur.random);的意思为:拷贝的节点的random 值等与拷贝前的节点的random值
4.最后返回链表的头即可.