hash表如何形成，hash函数如何计算,什么是hash冲突 如何解决 ，Golang map的底层原理及扩容机制

已于 2024-07-30 20:12:59 修改
阅读量1.2k 收藏 25
点赞数 27
文章标签： 哈希算法 算法
于 2024-07-30 16:25:17 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xiao_xiao_w/article/details/140799987
版权

散列表

散列表（hash表）:根据给定的关键字来计算出关键字在表中的地址的数据结构。也就是说，散列表建立了关键字和
存储地址之间的一种直接映射关系。

问题：如何建立映射管血

散列函数:一个把查找表中的关键字映射成该关键字对应的地址的函数，记为Hash(key)=Addr.

hash冲突

散列函数可能会把两个或两个以上的不同关键字映射到同一地址，称这种情况为“冲突”
这些发生碰撞的不同关键字称为同义词。

image-20240730141829195

构造散列函数的条件:

  • 散列函数的定义域必须包含全部需要存储的关键字，而值域的范围则依赖于散列表的大小或地址范围。
  • 散列函数计算出来的地址应该能等概率、均匀地分布在整个地址空间，从而减少冲突的发生。
  • 散列函数应尽量简单，能够在较短的时间内就计算出任一关键字对应的散列地址。
1.常用的Hash函数的构造方法：
  • 直接定址法:直接取关键字的某个线性函数值为散列地址，散列函数为H(key)=axkey+b。式中，a和b是
    常数。这种方法计算最简单，并且不会产生冲突
  • 除留余数法:假定散列表表长为m，取一个不大于m但最接近或等于m的质数p，利用以下公式把关键字
    转换成散列地址。散列函数为H(kev)=key %p
    除留余数法的关键是选好p，使得每一个关键字通过该函数转换后等概率地映射到散列空间上的任一地址
    从而尽可能减少冲突的可能性
  • 数字分析法
    设关键字是r进制数(如十进制数)，而r个数码在各位上出现的频率不一定相同，
    可能在某些位上分布均匀些
    每种数码出现的机会均等;而在某些位上分布不均匀，只有某几种数码经常出现，
    则应选取数码分布较为均匀
    的若干位作为散列地址。这种方法适合于已知的关键字集合

image-20240730142613377

手机号后四位分布比较均与 如果key为手机号那么取手机号后四位为散列值

4.平方取中法
顾名思义，取关键字的平方值的中间几位作为散列地址。具体取多少位要看实际情况而定。这种方法得
到的散列地址与关键字的每一位都有关系，使得散列地址分布比较均匀。

Eg

12342=1522756 取中间三位227作为散列地址

23452=5499025 取中间三位990作为散列地址

5.折叠法

将关键字分割成位数相同的几部分 (最后一部分的位数可以短一些)，然后取这几部分的叠加和作为
散列地址，这种方法称为折叠法。关键字位数很多，而且关键字中每一位上数字分布大致均匀时，可
以采用折香法得到散列地址。
Eg:关键字为1234567890散列表表长为3位可以将关键字分为四组每组3位
123456|7890然后这四组叠加求和123+456+789+0=1368 然后取后3位就能得到散列地址为368

2.常用的Hash函数的冲突处理办法
1.开放定址法

​ :将产生冲突的Hash地址作为自变量，通过某种冲突解决函数得到一个新的空闲的Hash地址。

		1)   线性探测法: 冲突发生时，顺序查看表中下一个单元 (当探测到表尾地址m-1时，探测地址是表首地址0)，直到找出一个空闲单元 (当表未填满时一定能找到一个空闲单元)或查遍全表。

image-20240730154952929

如上图，11 、19、27经过运算后的映射下标都是3，由于3被最开始的11占用，那19就不得不后移占住后面空着的下表，这样就会产生连锁反应导致原来hash值是4的key也要后移，这样查找起来就非常麻烦

比如我找27，先计算得出27的hash值是3，但发下3下面存的11，只能往后找4 – 19不是，继续遍历到5 – 17 找到了

2)平方探测法:设发生冲突的地址为d,平方探测法得到的新的地址序列为d+12，d-12，d+22，d-22
平方探测法是一种较好的处理冲突的方法，可以避免出现“堆积”问题，它的缺点是不能探测到散列
表上的所有单元，但至少能探测到一半单元。

image-20240730155513651

3)再散列法:又称为双散列法。需要使用两个散列函数，当通过第一个散列函数H(Key)得到的地址发
生冲突时，则利用第二个散列函数Hash2(Kev)计算该关键字的地址增量。

image-20240730155651274

4)伪随机序列法:当发生地址冲突时，地址增量为伪随机数序列，称为伪随机序列法。

2.拉链法:

对于不同的关键字可能会通过散列函数映射到同一地址，为了避免非同义词
发生冲突，可以把所有的同义词存储在一个线性链表中，这个线性链表由其散列地址唯
标识。拉链法适用于经常进行插入和删除的情况

3.散列表的查找过程

类似于构造散列表，给定一个关键字Key。
先根据散列函数计算出其散列地址。然后检查散列地址位置有没有关键字.
1)如果没有，表明该关键字不存在，返回查找失败。
2)如果有，则检查该记录是否等于关键字。

  • 如果等于关键字，返回查找成功。
  • 如果不等于，则按照给定的冲突处理办法来计算下一个散列地址，再用该地址去执行上述过程。
4.散列表的查找性能

性能和装填因子有关

什么是装填因子？

image-20240730160416593

image-20240730160759116

Golang中map的hash值是如何计算如何存的？

在日常编程中，map的底层也是hash表，但map 的 key 键不仅仅是数字，还可能是字符串。由于我们之前讨论的哈希函数主要是针对数字进行计算的，因此，当 key 为字符串时，首先需要将字符串转化为整数，然后再经过哈希函数的运算产生哈希值。

在 Go 中，map 的哈希值会通过取模运算（或其他方式）转换成哈希表中的一个具体位置，这个位置称为映射地址。映射地址通常对应于一个桶，桶是一个存储多个键值对的容器。每个桶可以存储多个键值对，以处理哈希冲突。桶的数量通常与哈希表的容量有关。

溢出桶：如果主桶已满，则会创建一个溢出桶，将多余的键值对存储在溢出桶中。如果溢出桶也满了，就会继续创建新的溢出桶，形成一个链表结构。

image-20240730161624131

ps:个人认为桶和线性链表及其相似

go map的扩容机制

扩容的时机：装载因⼦超过⼀定的阈值或者使⽤了太多的溢出桶时。

扩容的规则：
  1. 等量扩容 使⽤溢出桶太多的时候会进⾏等量扩容。申请和原来等量的内容，将原来的数据重新整理

后，写⼊到新的内存中。可以简单的认为是⼀次内存整理，⽬的是提⾼查询效率。

  1. 增量扩容 分成两步： 第⼀步进⼊扩容状态，先申请⼀块新的内存，翻倍增加桶的数量，此时

buckets指向新分配的桶，oldbuckets指向原来的桶。 第⼆步，重新计算⽼的桶中的哈希值在新

的桶内的位置（取模或者位操作），将旧数据⽤渐进式的⽅式拷⻉到新的桶中。

渐进式迁移分两块，⼀⽅⾯会从第⼀个桶开始，顺序迁移每⼀个桶，如果下⼀个桶已经迁移，则跳

过。另⼀⽅⾯，当我们操作某⼀个桶的元素时，会迁移两个桶，进⽽保证经过⼀些操作后⼀定能够完

成迁移。

访问迁移的map时会放生什么？

当我们访问⼀个正在迁移的Map时，如果存在oldbuckets，那么直接去中oldbuckets寻找数据。当

我们遍历⼀个正在迁移的Map时，新的和旧的就会遍历，如果⼀个旧的的桶已经迁移⾛了，那么就直

接跳过，反正不在旧的就在新的⾥。Map遍历本⾝就是⽆序的。

定能够完

成迁移。

访问迁移的map时会放生什么？

当我们访问⼀个正在迁移的Map时，如果存在oldbuckets，那么直接去中oldbuckets寻找数据。当

我们遍历⼀个正在迁移的Map时，新的和旧的就会遍历，如果⼀个旧的的桶已经迁移⾛了，那么就直

接跳过，反正不在旧的就在新的⾥。Map遍历本⾝就是⽆序的。

晓看云起时
关注
  • 27
    点赞
  • 踩
  • 25
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
什么哈希冲突？怎么解决哈希冲突的问题？
Da_Bao_zi的博客
11-17 676
一、哈希表是基于数组的一种存储方式.它主要由哈希函数和数组构成。 （1）：当要存储一个数据的时候，首先用一个函数计算数据的地址，然后再将数据存进指定地址位置的数组里面。这个函数就是哈希函数，而这个数组就是哈希表。 （2）：哈希冲突是指哈希函数算出来的地址被别的元素占用了，也就是，这个位置有人了。 二、如何解决哈希冲突？ （1）开放定址法或散列法： 基本思想是：当关键字key的哈希地址p=H（key）出现冲突时，以p为基础，产生另一个哈希地址p1，如果p1仍然冲突，再以p...
golang map assign 赋值时hash冲突处理--开链算法
qfzhangwei的专栏
10-22 1019
1 源码 基于golang 1.6 // Like mapaccess, but allocates a slot for the key if it is not present in the map. func mapassign(t *maptype, h *hmap, key unsafe.Pointer) unsafe.Pointer { if h == nil { panic(plainError("assignment to entry in nil map")) } if r.
深入理解Golang之Map
Qiaoshurui的博客
07-30 1156
Map的实现主要有两种方式哈希表（hashtable）和搜索树（searchtree）。例如Java中的hashMap是基于哈希表实现，而C++中的Map是基于一种平衡搜索二叉树——红黑树而实现的。Go中map的基于哈希表（也被称为散列表）实现。...
HashMap是怎么解决哈希冲突的？
qq_42605393的博客
07-14 3447
Hash 一般翻译为“散列”，也有直接音译为“哈希”的，这就是把任意长度的输入通过散列算法，变换成 固定长度的输出，该输出就是散列值（哈希值）；这种转换是一种压缩映射，也就是，散列值的空间通 常远小于输入的空间，不同的输入可能会散列成相同的输出，所以不可能从散列值来唯一的确定输入 值。简单的说就是一种将任意长度的消息压缩到某一固定长度的消息摘要的函数。 所有散列函数都有如下一个基本特性：根据同一散列函数计算出的散列值如果不同，那么输入值肯定也 不同。但是，根据同一散列函数计算出的散列值如果相同，输入值
HashMap如何解决哈希冲突
qq_46130027的博客
04-25 1851
像这种情况，在Hash表索引1的位置存了一个key=name，再向它添加key=hobby的时候，假设Hash计算得到的索引也是1。在具体的实现上，我们通过Hash函数把key映射到表中的某个位置，来获取这个位置的数据，从而去加快数据的查找。也称线性探测法，就是从发生冲突的那个位置开始，按照一定次序，从Hash表中去找到一个空闲的位置，然后把发生冲突的元素存入到这个位置。某个Hash函数计算的Key存在冲突的时候，再用另外一个Hash函数对这个Key进行Hash，一直运算直到不再产生冲突为止。
geohash:Golang geohash库
04-23
哈希Go 库提供字符串和整数geohash的编码和解码。安装使用以下方法获取软件包go get github.com/mmcloughlin/geohash并将其导入到您的程序中import "github.com/mmcloughlin/geohash"用法func ConvertIntToString ...
Golang Map实现赋值和扩容的示例代码
01-20
因为当赋值时，为了减少hash 冲突链的长度过长问题，会做map 的扩容以及数据的迁移。而map 的扩容以及数据的迁移也是关注的重点。 数据结构 首先，我们需要重新学习下map实现的数据结构： type hmap struct { ...
passwordHash:Go的密码哈希兼容功能
04-12
Generate ( testPassword , nil ) // Test correct password in constant time valid := passwordHash . Verify ( hashedPassword , testPassword ) log . Printf ( "The password validity is %t against
merkle:Golang Merkle树实现。 带有hash.Hash接口用于流媒体支持
05-01
默克尔 Golang Merkle树实现，带有hash.Hash接口，用于支持流。 文件 下一步是什么？ 更多测试和审查 流式HashTreeer类型，可以验证提供的节点，以进行流式验证 执照 参见许可
geohash:用于golang的geohash
04-30
## geohash geohash算法： : package mainimport ("fmt""github.com/gansidui/geohash")func main () {latitude := 39.92324longitude := 116.3906precision := 5hash , box := geohash . Encode ( latitude , ...
初窥：golang 中 map实现与使用
weixin_42228815的博客
04-18 501
待写。。。。。。。。。。。
golang map实现原理浅析
qq_49723651的博客
11-10 1060
golang map实现原理浅析 文章目录golang map实现原理浅析map使用实例内存模型map的扩容加载因子 总体来说golang的map是hashmap，是使用数组+链表的形式实现的，使用拉链法消除hash冲突。 map使用实例 先来看下面一个样例： package main import "fmt" func main() { fmt.Println("--------------- m ---------------") m := make(map[string]string)
数据结构STL——golang实现哈希映射hashMap
l2975的博客
12-25 889
github仓库存储地址：https://github.com/hlccd/goSTL 概述 ​ 哈希映射（hash map），它是一个两层结构，即第一层以动态数组作为桶去存储元素，第二层存储hash值冲突的元素。 ​ 对于插入其中的任意一个元素来说，都可以计算其key的hash值然后将其映射到桶内对应位置，随后再插入即可。 ​ hash映射最大的特点在于其查找、插入和删除都是O（1）的，但可能存在扩容和缩容的问题，此时其时间开销会增加。 原理 ​ 对于哈希映射来说，它需要做的主要是对key进行ha
Golang 异步对象序列化Map并发冲突和解决方法
weixin_34124651的博客
07-10 1293
冲突过程 异步对象序列化，对象里面如果有map，并且使用json.marshal to string,或者其他方式对map 执行了read、write操作。而业务逻辑同步写对象map值，那么，就会触发: fatal error: concurrent map read and map write本质原因在于：两个goroute对同一个map执行了读写并发...
golang中map的一些注意事项
热门推荐
TigerwolfC的博客
09-01 2万+
map 类似其它语言中的哈希表或字典，以key-value形式存储数据 key必须是支持==或!=比较运算的类型，不可以是函数、map或slice Map通过key查找value比线性搜索快很多 Map使用make()创建，支持:=这种简写方式 make([keyType]valueType,cap),cap表示容量，可省略 超出容量时会自动扩容，但尽量提供一个合理的初始值 ...
hashmap冲突的解决方法以及原理分析：
weixin_30813225的博客
08-20 5060
在Java编程语言中，最基本的结构就是两种，一种是数组，一种是模拟指针(引用),所有的数据结构都可以用这两个基本结构构造，HashMap也一样。当程序试图将多个 key-value 放入 HashMap 中时，以如下代码片段为例： HashMap<String,Object> m=new HashMap<String,Object>();m.put("a", "rrr1...
哈希表哪家强？几大编程语言吵起来了！
程序人生的博客
09-07 278
来源 | 编程技术宇宙责编 | 王晓曼封图 |CSDN 付费下载自东方IC哈希表华山论剑比特宇宙编程语言联合委员会准备举办一次大会，主题为哈希表，给各大编程语言帝国都发去了邀请函。很快...
Go语言之map：map的用法到map底层实现分析
chen
12-30 6077
带着几个问题阅读本文： 1. go map 实现方法？如何解决hash冲突的？ 2. go map是否线程安全？ 3. go map 的扩容机制？ 什么是map？ 由一组 <key, value> 对组成的抽象数据结构，并且同一个 key 在map中只会出现一次 map 的设计也被称为 “The dictionary problem”，它的任务是设计一种数据结构用来维护一个集合的...
golang 国密
最新发布
06-17
在Go语言（Golang）中，支持国家安全（国密）相关的加密库通常指的是`golang.org/x/crypto/ctb`包，它提供了对中国的商用密码算法（Commonly Used Cryptographic Algorithms，简称国密）的支持，比如SM2、SM3、SM4和...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值