Redis运维实践（二）——python多线程方式快速遍历集群

Redis单实例的遍历我们都知道，使用scan就可以了。但是对于集群，遍历功能的支持就不是这么友好了，所以本次我就想到用单实例scan+多线程的形式去实现集群的快速遍历。

---

今日内容预览

• scan功能简介
• python多线程简介
• scan+多线程集群遍历实现

scan功能简介

---

redis全库遍历key使用的是keys 命令，而keys命令会造成阻塞，所以出现了scan增量式迭代的命令来支持非阻塞遍历。
对于SCAN这类增量式迭代命令来说，有可能在增量迭代过程中，集合元素被修改，对返回值无法提供完全准确的保证。
SCAN命令是一个基于游标的迭代器。这意味着命令每次被调用都需要使用上一次这个调用返回的游标作为该次调用的游标参数，以此来延续之前的迭代过程

当SCAN命令的游标参数被设置为 0 时， 服务器将开始一次新的迭代， 而当服务器向用户返回值为 0 的游标时， 表示迭代已结束。
SCAN命令的返回值 是一个包含两个元素的数组， 第一个数组元素是用于进行下一次迭代的新游标， 而第二个数组元素则是一个数组， 这个数组中包含了所有被迭代的元素。

在第二次调用 SCAN 命令时， 命令返回了游标 0 ， 这表示迭代已经结束， 整个数据集已经被完整遍历过了。
full iteration ：以 0 作为游标开始一次新的迭代， 一直调用 SCAN 命令， 直到命令返回游标 0 ， 我们称这个过程为一次完整遍历。

scan的两个绝对：

1、从完整遍历开始直到完整遍历结束期间， 一直存在于数据集内的所有元素都会被完整遍历返回； 这意味着， 如果有一个元素， 它从遍历开始直到遍历结束期间都存在于被遍历的数据集当中， 那么 SCAN 命令总会在某次迭代中将这个元素返回给用户。
2、同样，如果一个元素在开始遍历之前被移出