给大家的福利
零基础入门
对于从来没有接触过网络安全的同学,我们帮你准备了详细的学习成长路线图。可以说是最科学最系统的学习路线,大家跟着这个大的方向学习准没问题。
同时每个成长路线对应的板块都有配套的视频提供:
因篇幅有限,仅展示部分资料
网络安全面试题
绿盟护网行动
还有大家最喜欢的黑客技术
网络安全源码合集+工具包
所有资料共282G,朋友们如果有需要全套《网络安全入门+黑客进阶学习资源包》,可以扫描下方二维码领取(如遇扫码问题,可以在评论区留言领取哦)~
网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。
一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!
NoSQL
什么是NoSQL?
NoSQL=Not Only SQL(不仅仅是SQL)泛指非关系型数据库的,随着web2.0互联网的诞生!传统的关系型数据库很难对付web2.0时代!尤其是超大规模的高并发的社区!NoSQL用于超大规模数据的存储。(例如谷歌或Facebook每天为他们的用户收集万亿比特的数据)。这些类型的数据存储不需要固定的模式,无需多余操作就可以横向扩展。
NoSQL的优点/缺点
优点:
-
- 高可扩展性
-
- 分布式计算
-
- 低成本
-
- 架构的灵活性,半结构化数据
-
- 没有复杂的关系
缺点:
-
- 没有标准化
-
- 有限的查询功能(到目前为止)
-
- 最终一致是不直观的程序
NoSQL的四大分类
键值对数据库
Redis、Tair、memecache
查找速度快
文档型数据库
MongoDB、CouchDB
查询效率不高,没有统一的查询语句
列存储数据库
HBase、Riak
同一列数据存储在一起,查找速度快,功能局限
图形关系数据库
Neo4j、InfoGrid
图结构存储社交网络等,不太好做分布式集群方案
Redis概述
Redis(Remote Dictionary Server)即远程字典服务!是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库,并提供多种语言的API。 免费和开源!是当下最热门的NoSQL技术之一!也被人们称之为结构化数据库!
功能
1、内存存储、持久化,内存中是断电即失、所以说持久化很重要(rdb、aof)
2、效率高,可以用于高速缓存
3、发布订阅系统
4、地图信息分析
5、计时器、计数器(浏览量!)
安装
Windows
不推荐,已经5年没更新了,但是Issue有最近的,虽然博主也是Windows系统,但还是建议大家使用Linux,后面演示也是基于Linux。
Linux
/opt 目录下,下载好redis-5.0.12.tar.gz
解压
tar -zxvf redis-5.0.12
redis.conf 配置文件
编译,需要gcc
make
安装
make install PREFIX=/usr/local/redis
加了前缀后就在前缀下面了,否则默认在/usr/local/bin下面
配置
复制一份到bin下面
mkdir config && cp /opt/redis-5.0.12/redis.conf config
配置redis后台启动,修改daemonize 为yes
开启redis
复制服务端和客户端到/usr/local/bin目录下,使命令全局可用
查看服务
ps -ef|grep redis
使用Docker安装
docker pull redis:5.0.12
基础知识
连接
redis-cli -p 6379
默认数据库16(0-15)个,在服务器端,使用select命令+数字进行切换,例如
select 3
查看大小
DBSIZE
清空当前数据库
FLUSHDB
清空所有数据库
FLUSHALL
Redis是单线程的:Redis是基于内存的,CPU不是Redis性能瓶颈,而是内存和网络带宽
基本命令
命令忽略大小写
键(key)
常用命令列表
常用命令
命令 | 描述 |
---|---|
SET key value | 该命令设置key及对应的value |
GET key | 该命令用于得到key对应的value |
DEL key | 该命令用于在 key 存在时删除 key。 |
DUMP key | 序列化给定 key ,并返回被序列化的值。 |
EXISTS key | 检查给定 key 是否存在。 |
EXPTRE key seconds | 为给定 key 设置过期时间,以秒计。 |
EXPIREAT key timestamp | EXPIREAT 的作用和 EXPIRE 类似,都用于为 key 设置过期时间。 不同在于 EXPIREAT 命令接受的时间参数是 UNIX 时间戳(unix timestamp)。 |
PEXPIRE key milliseconds | 设置 key 的过期时间以毫秒计。 |
PEXPIREAT key milliseconds-timestamp | 设置 key 过期时间的时间戳(unix timestamp) 以毫秒计 |
KEYS pattern | 查找所有符合给定模式( pattern)的 key 。 |
MOVE key db | 将当前数据库的 key 移动到给定的数据库 db 当中。 |
PERSIST key | 移除 key 的过期时间,key 将持久保持。 |
PTTL key | 以毫秒为单位返回 key 的剩余的过期时间。 |
TTL key | 以秒为单位,返回给定 key 的剩余生存时间(TTL, time to live)。 |
RANDOMKEY | 从当前数据库中随机返回一个 key 。 |
RENAME key newkey | 修改 key 的名称 |
RENAMENX key newkey | 仅当 newkey 不存在时,将 key 改名为 newkey 。 |
SCAN cursor [MATCH pattern] [COUNT count] | 迭代数据库中的数据库键。 |
TYPE key | 返回 key 所储存的值的类型。 |
更多命令查看:redis中文网 命令-keys
连接redis(服务端已启动redis-server即可)
举例
填加key value对,lady:killer,name:frank,age:24
127.0.0.1:6379> SET lady killer
OK
127.0.0.1:6379> SET name frank
OK
127.0.0.1:6379> SET age 24
OK
获取name的值,sex的值
127.0.0.1:6379> GET name
“frank”
127.0.0.1:6379> GET sex
(nil)
不存在时,返回nil
删除name的值,sex的值
127.0.0.1:6379> DEL name
(integer) 1
127.0.0.1:6379> DEL sex
(integer) 0
存在时删除并返回1,否则返回0
判断name、age是否存在
127.0.0.1:6379> EXISTS name
(integer) 0
127.0.0.1:6379> EXISTS age
(integer) 1
存在的返回1,不存在的返回0
查看所有key
127.0.0.1:6379> keys *
- “age”
- “lady”
没有时显示(empty list or set)
查看age、lady的值类型
127.0.0.1:6379> TYPE age
string
127.0.0.1:6379> TYPE lady
string
默认为string类型,不存在时返回none
给age设置过期时间20秒
127.0.0.1:6379> EXPIRE age 20
(integer) 1
设置成功返回1,否则返回0
查看age剩余时间,获取age的值
127.0.0.1:6379> TTL age
(integer) 3
127.0.0.1:6379> GET age
(nil)
127.0.0.1:6379> TTL age
(integer) -2
将lady移动到数据库1
127.0.0.1:6379> keys *
- “lady”
127.0.0.1:6379> MOVE lady 1
(integer) 1
127.0.0.1:6379> keys *
(empty list or set)
127.0.0.1:6379> select 1
OK
127.0.0.1:6379[1]> keys *- “lady”
字符串(String)
常用命令列表
常用命令
命令 | 描述 |
---|---|
GETRANGE key start end | 返回 key 中字符串值的子字符key[start,end] |
GETSET key value | 将给定 key 的值设为 value ,并返回 key 的旧值(old value)。 |
GETBBIT key offset | 对 key 所储存的字符串值,获取指定偏移量上的位(bit)。 |
MGET key1 [key2 …] | 获取所有(一个或多个)给定 key 的值。 |
SETBIT key offset value | 对 key 所储存的字符串值,设置或清除指定偏移量上的位(bit)。 |
SETEX key seconds value | 将值 value 关联到 key ,并将 key 的过期时间设为 seconds (以秒为单位)。 |
SETNX key value | 只有在 key 不存在时设置 key 的值。set命令存在时会覆盖掉。 |
SETRANGE key offset value | 用 value 参数覆写给定 key 所储存的字符串值,从偏移量 offset 开始。 |
STRLEN key | 返回 key 所储存的字符串值的长度。 |
MSET key value [key value …] | 同时设置一个或多个 key-value 对。 |
MSETNX key value [key value …] | 同时设置一个或多个 key-value 对,当且仅当所有给定 key 都不存在。 |
PSETEX key milliseconds value | 这个命令和 SETEX 命令相似,但它以毫秒为单位设置 key 的生存时间,而不是像 SETEX 命令那样,以秒为单位。 |
INCR key | 将 key 中储存的数字值增一。 |
INCRBY key increment | 将 key 所储存的值加上给定的增量值(increment) 。 |
INCRBYFLOAT key increment | 将 key 所储存的值加上给定的浮点增量值(increment) 。 |
DECR key | 将 key 中储存的数字值减一。 |
DECRBY key decrement | key 所储存的值减去给定的减量值(decrement) 。 |
APPEND key value | 如果 key 已经存在并且是一个字符串, APPEND 命令将指定的 value 追加到该 key 原来值(value)的末尾。 |
GET、SET同keys,更多命令查看:redis中文网-strings
举例
设置字符串 name:lady view:0
127.0.0.1:6379> mset name lady view 0
OK
127.0.0.1:6379> get name
“lady”
追加 _killer9到name后
127.0.0.1:6379> append name _killer9
(integer) 12
返回总长度
获取name、view的值
127.0.0.1:6379> mget name view
- “lady_killer9”
- “0”
获取name的长度
127.0.0.1:6379> strlen name
(integer) 12
获取name[5,10]
127.0.0.1:6379> getrange name 5 10
“killer”
view增加1
127.0.0.1:6379> incr name
(error) ERR value is not an integer or out of range
127.0.0.1:6379> incr view
(integer) 1
非数字时报错value is not an integer
view增加10
127.0.0.1:6379> incrby view 10
(integer) 11
view减少1
127.0.0.1:6379> decr view
(integer) 10
view减少10
127.0.0.1:6379> decrby view 10
(integer) 0
设置字符串nums:30,过期时间20秒
127.0.0.1:6379> setex nums 20 30
OK
设置字符串nums:50,如果nums不存在
127.0.0.1:6379> setnx nums 50
(integer) 0
127.0.0.1:6379> ttl nums
(integer) 13
127.0.0.1:6379> setnx nums 50
(integer) 1
与set不同,setnx存在时为返回0,不会覆盖掉
应用
- 计数器(微信阅读量)
- 对象存储
计数器很简单,使用incr和decr即可。
对象存储可使用规定格式key,来获得属性,例如,对象名:{id}:{field}
用户类 User 包含id(唯一),姓名,年龄
保存 user 1 frankyu 20
127.0.0.1:6379> mset user:1:name frankyu user:1:age 20
OK
127.0.0.1:6379> mget user:1:name user:1:age
- “frankyu”
- “20”
注意:使用哈希存储更合适
列表(List)
常用命令列表
常用命令
命令 | 描述 |
---|---|
BLPOP key1 [key2] timeout | 移出并获取列表的第一个元素, 如果列表没有元素会阻塞列表直到等待超时或发现可弹出元素为止。 |
BRPOP key1 [key2] timeout | 移出并获取列表的最后一个元素, 如果列表没有元素会阻塞列表直到等待超时或发现可弹出元素为止。 |
BRPOPLPUSH source destination timeout | 从列表中弹出一个值,将弹出的元素插入到另外一个列表中并返回它; 如果列表没有元素会阻塞列表直到等待超时或发现可弹出元素为止。 |
LINDEX key index | 通过索引获取列表中的元素 |
**LINSERT key BEFORE | AFTER pivot value** |
LLEN key | 获取列表长度 |
LPOP key | 移出并获取列表的第一个元素 |
LPUSH key value1 [value2] | 将一个或多个值插入到列表头部 |
LPUSHX key value | 将一个值插入到已存在的列表头部 |
LRANGE key start stop | 获取列表指定范围内的元素 |
LREM key count stop | 移除列表元素, count > 0: 从头往尾移除值为 value 的元素。 count < 0: 从尾往头移除值为 value 的元素。 count = 0: 移除所有值为 value 的元素。 |
LSET key index value | 通过索引设置列表元素的值 |
LTRIM key start stop | 对一个列表进行修剪(trim),就是说,让列表只保留指定区间内的元素,不在指定区间之内的元素都将被删除。 |
RPOP key | 移除列表的最后一个元素,返回值为移除的元素。 |
RPOPLPUSH source destination | 移除列表的最后一个元素,并将该元素添加到另一个列表并返回 |
RPUSH key value1 [value2] | 在列表中添加一个或多个值 |
RPUSHX key value | 为已存在的列表添加值 |
更多命令查看:redis中文网-lists
举例
当做列表/双向链表
添加
索引
更新
插入
当做栈
当做队列
当做循环队列
当阻塞队列
应用
- 链表
集合(Set)
常用命令列表
常用命令
命令 | 描述 |
---|---|
SADD key member1 [member2] | 向集合添加一个或多个成员 |
SCARD key | 获取集合的成员数 |
SDIFF key1 [key2] | 返回第一个集合与其他集合之间的差异。 |
SDIFFSTORE destination key1 [key2] | 返回给定所有集合的差集并存储在 destination 中 |
SINTER key1 [key2] | 返回给定所有集合的交集 |
SINTERSTORE destination key1 [key2] | 返回给定所有集合的交集并存储在 destination 中 |
SISMEMBER key member | 判断 member 元素是否是集合 key 的成员 |
SMEMBERS key | 返回集合中的所有成员 |
SMOVE source destination member | 将 member 元素从 source 集合移动到 destination 集合 |
SPOP key | 移除并返回集合中的一个随机元素 |
SRANDMEMBER key [count] | 返回集合中一个或多个随机数 |
SREM key member1 [member2] | 移除集合中一个或多个成员 |
SUNION key1 [key2] | 返回所有给定集合的并集 |
SUNIONSTORE destination key1 [key2] | 所有给定集合的并集存储在 destination 集合中 |
SSCAN key cursor [MATCH pattern][COUNT count] | 迭代集合中的元素 |
更多命令查看:redis中文网-sets
举例
应用
- 共同关注
- 推荐好友
- UV(网站独立访客)
有序集合(Zset)
常用命令列表
常用命令
命令 | 描述 |
---|---|
ZADD key score1 member1 [score2 member2] | 向有序集合添加一个或多个成员,或者更新已存在成员的分数 |
ZCARD key | 获取有序集合的成员数 |
ZCOUNT key min max | 计算在有序集合中指定区间分数的成员数 |
ZINCRBY key increment member | 有序集合中对指定成员的分数加上增量 increment |
ZINTERSTORE destination numkeys key [key…] | 计算给定的一个或多个有序集的交集并将结果集存储在新的有序集合 destination 中 |
ZLEXCOUNT key min max | 在有序集合中计算指定字典区间内成员数量 |
ZRANGE key start stop [WITHSTORES] | 通过索引区间返回有序集合指定区间内的成员 |
ZRANGEBYLEX key min max [LIMIT offset count] | 通过字典区间返回有序集合的成员 |
ZRANGEBYSCORE key min max [WITHSCORES][LIMIT] | 通过分数返回有序集合指定区间内的成员 |
ZRANK key member | 返回有序集合中指定成员的索引 |
ZREM key member [member …] | 移除有序集合中的一个或多个成员 |
ZREMRANGEBYLEX key min max | 移除有序集合中给定的字典区间的所有成员 |
ZREMRANGEBYRANK key start stop | 移除有序集合中给定的排名区间的所有成员 |
ZREMRANGEBYSCORE key min max | 除有序集合中给定的分数区间的所有成员 |
ZREVRANGE key start stop [WITHSCORES] | 返回有序集中指定区间内的成员,通过索引,分数从高到低 |
ZREVRANGEBYSCORE key max min [WITHSCORES] | 返回有序集中指定分数区间内的成员,分数从高到低排序 |
ZREVRANK key member | 返回有序集合中指定成员的排名,有序集成员按分数值递减(从大到小)排序 |
ZSCORE key member | 返回有序集中,成员的分数值 |
ZUNIONSTORE destination numkeys key [key…] | 计算给定的一个或多个有序集的并集,并存储在新的 key 中 |
ZSCAN key cursor [MATCH pattern] [COUNT count] | ZSCAN key cursor [MATCH pattern] [COUNT count] 迭代有序集合中的元素(包括元素成员和元素分值) |
更多命令查看:redis中文网-sorted set
举例
应用
哈希(Hash)
常用命令列表
常用命令
命令 | 描述 |
---|---|
HDEL key field1 [field2] | 删除一个或多个哈希表字段 |
HEXISTS key field | 查看哈希表 key 中,指定的字段是否存在。 |
HGET key field | 获取存储在哈希表中指定字段的值。 |
HGETALL key | 获取在哈希表中指定 key 的所有字段和值 |
给大家的福利
零基础入门
对于从来没有接触过网络安全的同学,我们帮你准备了详细的学习成长路线图。可以说是最科学最系统的学习路线,大家跟着这个大的方向学习准没问题。
同时每个成长路线对应的板块都有配套的视频提供:
因篇幅有限,仅展示部分资料
网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。
一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!