腾讯云大神亲码“redis 深度笔记”,不讲一句废话,全是精华
前言
作为这个时代码代码的秃头人员,对 Redis 肯定是不陌生的,如果连 Redis 都没用过,还真不好意思出去面试,指不定被面试官吊打多少次。
毕竟现在互联网公司和一些创业公司都要用到 Redis,像亚马逊、谷歌、阿里、腾讯都要使用,可见精通 Redis 使用真的很有必要。
所以,今天则分享出腾讯云大神亲自码出的“redis 深度笔记”,笔记内容没有讲一句废话,全篇看下来都是精华!
资料已整理成文档,需要获取的小伙伴可以+ VX: mxk6072
![](https://static001.geekbang.org/infoq/89/8924b3f42cec8bc3dc25962c6b6334c1.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
PART1:Redis 深度笔记开篇
1.Redis 可以用来做什么?
由 Redis 面试想到的
Redis 可以做什么?
![](https://static001.geekbang.org/infoq/2c/2c5ef7318dd28f5ac0c5bf515307c4b3.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
2.Redis 基础数据结构
Redis 安装
Redis 基础的数据结构
容器型数据结构的通用规则
关于 Redis 使用的一些思考
![](https://static001.geekbang.org/infoq/c9/c9e56291f344ee9608eecdb89cbc654d.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
PART2:Redis 的应用总结
1.分布式锁
分布式锁
超时问题
可重入性
![](https://static001.geekbang.org/infoq/34/348fde0f2eb604c218f8a7a620dac92b.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
2.延时队列
异步消息队列?
队列空了怎么办?
队列延迟
空闲连接自动断开
锁冲突处理
延时队列的实现
进一步优化
![](https://static001.geekbang.org/infoq/8b/8bff3d3fc9ac42587ecc2d75bf6d73c1.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
3.位图
基本使用
统计和查找
魔术指令 bitfield
![](https://static001.geekbang.org/infoq/f1/f191a98c18bbeae14fc3f002d7ab82e8.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
4.HyperLogLog
使用方法
pfadd 这个 pf 是什么意思?
pfmerge 适合什么场合用?
注意事项
HyperLogLog 实现原理
pf 的内存占用为什么是 12k?
![](https://static001.geekbang.org/infoq/74/746c1b4f5f88e7add3fa74a1899b8f1a.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
5.布隆过滤器
布隆过滤器是什么?
Redis 中的布隆过滤器
布隆过滤器的基本使用
注意事项
布隆过滤器的原理
空间占用估计
实际元素超出时,误判率会怎样变化?
用不上 Redis4.0 怎么办?
布隆过滤器的其他应用
![](https://static001.geekbang.org/infoq/0b/0b1411a7dee400f8b266a3ea38bcd6db.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
6.简单限流
如何使用 Redis 来实现简单限流策略?
![](https://static001.geekbang.org/infoq/d3/d399be50714bf42d6a3d4777b720ae4b.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
7.漏斗限流
Redis-Cell
一些思考
![](https://static001.geekbang.org/infoq/04/04e9438d81c7ff09bc92a17ed627f804.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
8.GeoHash
用数据库来算附近的人
GeoHash 算法
Redis 的 Geo 指令基本使用
![](https://static001.geekbang.org/infoq/e2/e26d707fdf7b97a28294c4b01e63fdeb.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
9.Scan
scan 基础使用
字典的结构
scan 遍历顺序
字典扩容
对比扩容缩容前后的遍历顺序
渐进式 rehash
更多的 scan 指令
大 Key 扫描
![](https://static001.geekbang.org/infoq/fe/feadd85bb75b05c3370bfa2904dd8460.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
PART3:Redis 的原理
1.线程 IO 模型
非阻塞 IO
事件轮询(多路复用)
指令队列
响应队列
定时任务
![](https://static001.geekbang.org/infoq/ca/cabd976cb092893842199c55001b99d7.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
2.通信协议
RESP(Redis Serialization Protocol)
客户端->服务端
服务端->客户端
![](https://static001.geekbang.org/infoq/1b/1bb70987b77dbf9354ebff4740a043c0.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
3.持久化
快照原理
fork(多进程)
AOF 原理
AOF 重写
fsync
运维
Redis4.0 混合持久化
![](https://static001.geekbang.org/infoq/95/956aef2181f99fd6d47392c95a05e538.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
4.管道
Redis 的消息交互
管道压力测试
深入理解管道本质
![](https://static001.geekbang.org/infoq/79/795c3dc10082f0f8e6e522c88849b2f3.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
5.事务
Redis 事务的基本使用
原子性
discard(丢弃)
优化
Watch
![](https://static001.geekbang.org/infoq/ae/ae13cd27b09d433481042ef59575176d.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
6.PubSub
消息多播
PubSub
模式订阅
消息结构
PubSub 缺点
![](https://static001.geekbang.org/infoq/2a/2a944679fc2ffd6f282086f23d908dbc.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
7.小对象压缩
32bit vs 64bit
小对象压缩存储(ziplist)
内存回收机制
内存分配算法
![](https://static001.geekbang.org/infoq/09/09d68ed6cbfd16b263d5293ff8c91727.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
8.主从同步
CAP 原理
最终一致
主从同步
增量同步
快照同步
增加从节点
无盘复制
Wait 指令
![](https://static001.geekbang.org/infoq/66/66a8c4cff69423c14e9d6f4d3f1444e3.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
PART4:Redis 集群
1.Sentinel
消息丢失
Sentinel 基本使用
![](https://static001.geekbang.org/infoq/12/125f892552259baf1c56928ed043c6f8.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
2.Codis
Codis 分片原理
不同的 Codis 实例之间槽位关系如何同步?
扩容
自动均衡
Codis 的代价
Codis 的优点
MGET 指令的操作过程
架构变迁
Codis 的尴尬
Codis 的后台管理
![](https://static001.geekbang.org/infoq/a9/a949862b89c747d70a47e397d737613b.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
3.Cluster
槽位定位算法
跳转
迁移
容错
网络抖动
可能下线(PFAIL-Possibly Fail)与确定下线(Fail)
Cluster 基本使用
槽位迁移感知
集群变更感知
![](https://static001.geekbang.org/infoq/d8/d8028c0d54c53fa4148f077c0db01815.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
PART5:Redis 拓展
1.Stream
消息 ID
消息内容
增删改查
独立消费
创建消费组
消费
Stream 消息太多怎么办?
消息如果忘记 ACK 会怎样?
PEL 如何避免消息丢失?
Stream 的高可用
分区 Partition
![](https://static001.geekbang.org/infoq/20/20151aaae494bb063d0c487b48c8d135.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
Redis 每秒执行多少次指令?
Redis 连接了多少客户端?
Redisn 内存占用多大?
复制积压缓存区多大?
![](https://static001.geekbang.org/infoq/0b/0bd2a8e09a7b72b86f250a545a8918e2.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
3.再谈分布式锁
Redlock 算法
Redlock 使用场景
![](https://static001.geekbang.org/infoq/3e/3eaa6a95cc30f4cd1c91f6d78e53cc72.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
4.过期策略
过期的 key 集合
定时扫描策略
从库的过期策略
![](https://static001.geekbang.org/infoq/4a/4a0a07c03d9dc7dd98602b009d49f776.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
5.LRU
LRU 算法
近似 LRU 算法
![](https://static001.geekbang.org/infoq/8c/8c56667e755d2a0d31fe0b6851911312.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
6.懒惰删除
Redis 为什么要懒惰删除(lazy free)?
flush
异步队列
AOF Sync 也很慢
更多异步删除点
![](https://static001.geekbang.org/infoq/51/51adc82c215186e1ef200e15b7230e29.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
7.优雅地使用 Jedis
重试
![](https://static001.geekbang.org/infoq/23/239c5a26ff82d2ea5e69e0adb276f01e.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
8.保护 Redis
指令安全
端口安全
Lua 脚本安全
SSL 代理
![](https://static001.geekbang.org/infoq/ac/ac361505b4104c1c4fb1727568b08d60.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
9.Redis 安全通信
spiped 原理
spiped 使用入门
![](https://static001.geekbang.org/infoq/f8/f899e5a6f4849318fce0886579714ba1.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
PART6:源码
1.探索字符串内部结构
embstr vs raw
扩容策略
![](https://static001.geekbang.org/infoq/31/31d407d31c89bb4411a40933ffba92df.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
2.探索字典内部
dict 内部结构
渐进式 rehash
查找过程
hash 函数
hash 攻击
扩容条件
缩容条件
set 的结构
![](https://static001.geekbang.org/infoq/17/171d61a3b65dce33129768daefc1c0a5.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
3.探索压缩列表内部
增加元素
级联更新
IntSet 小整数集合
![](https://static001.geekbang.org/infoq/1c/1cf3ae22a31519ca7cc0c2d15c68d640.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
4.探索快速列表内部
每个 ziplist 存多少元素?
压缩深度
![](https://static001.geekbang.org/infoq/1a/1a528fbc427490e3483e8f23f39526fa.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
5.探索跳跃列表内部结构
基本结构
查找过程
随机层数
插入过程
删除过程
更新过程
如果 score 值都一样呢?
元素排名是怎么算出来的?
![](https://static001.geekbang.org/infoq/f0/f0044875538ace4427ee8ff512ca14de.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
6.探索紧凑列表内部
级联更新
取代 ziplist
![](https://static001.geekbang.org/infoq/a8/a8deb73492d63909c786b339a0fff2c8.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
7.探索基数树内部
应用
结构
增删节点
![](https://static001.geekbang.org/infoq/00/0079ca6280907c85378d2a3128052869.webp?x-oss-process=image%2Fresize%2Cp_80%2Fformat%2Cpng)
总结
最后,我想说的是,学习并非难事,而贵在坚持,尤其是在我们参与工作之后,要继续坚持学习就更不容易了。但对于程序员来说,学习是立业之根本,如若放弃学习,被市场淘汰是迟早的事情。所以,学习更多新的知识对于自己来说才是一种更大的投资。
以上,到此结束。
资料已整理成文档,需要获取的小伙伴可以+ VX: mxk6072
评论