redis aof 重写疑问

2021-03-30 23:22:42 +08:00
 q15673355

redis aof 重写的时候,主线程依然可以进行写操作,并把写操作记录到重写缓冲区,以便重写完成后,更新重写期间改变的数据。

不是很清楚 redis aof 重写(不起用混合持久化)的具体流程 我的疑问是会不会出现下面的情况:

重写开始的时候,内存中某个键 A 的值是 1,然后有一条命令把它+1,改成了 2,并且这条命令也写到了重写缓冲区,但是此时这条数据还没有被重写到新的 aof 文件。等重写过程已经遍历完整个内存中的数据,此时键 A 的值是 2,开始读取重写缓存中的命令时,会不会被+1 的命令重新修改变成 3

2248 次点击
所在节点    Redis
8 条回复
sujin190
2021-03-30 23:28:05 +08:00
重写都是单独 fork 进程处理的,和当前数据完全是隔离独立的,而且这个地方说的是重写过程中写指令追加到重写缓冲区,重写完成后再追加到重写文件,数据操作早就完成
q15673355
2021-03-30 23:36:44 +08:00
和当前数据完全是隔离独立的,具体是怎么隔离的? COW?
就我说的情况,在 aof 文件中,键 A 的值是 1 还是 2 ?如果按你说的数据的完全隔离独立的话应该就是 1 吧
q15673355
2021-03-30 23:38:57 +08:00
cubecube
2021-03-31 00:16:20 +08:00
aof 中应该是 set 1 add1 两条分别的记录。终值为 2 而已。

根本不存在:等重写过程已经遍历完整个内存中的数据,此时键 A 的值是 2,这个过程。
他把 aof 文件读完后直接去追 buffer 中的缓存命令,追上就完事儿。
securityCoding
2021-03-31 09:31:58 +08:00
记住一点 aof 是写操作命令记录,重写 aof 也是重放所有 kv 的写操作命令而已。期间除了 fork 子进程瞬间操作外不会阻塞 io 线程。

1. fork 进程重写 aof
2. 不能阻塞 io 线程,此时会通过 cow 将写操作记录到缓冲区
3.aof 重写完成时再追加写入期间的写操作记录
4.完成替换
sujin190
2021-03-31 09:42:46 +08:00
aof 重写是单独 fork 的进程,啥咋隔离? aof 文件记录的是所有的操作,又不是当前值,哪来的是 1 还是 2 的问题
shanghai1943
2021-03-31 09:50:22 +08:00
aof 文件里应该是所有执行过的指令的记录。一个 key 执行了多次那就会在 aof 文件里记录多次。Redis 重启的时候可以从 aof 文件里读取,相当于把 aof 文件里的指令重新执行一次。
q15673355
2021-03-31 10:03:40 +08:00
我想我有这个疑问的根本原因是不了解 fork 子进程的机制,或者有人在说 aof 重写的时候明确提到 cow,那样的话我就不会有这个疑问了。 @sujin190 的回答对我的问题来说是很合适的,谢谢各位

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/766676

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX