system-design-notes:Quorum共识机制全解,N/R/W参数如何决定读写一致性?
system-design-notesQuorum共识机制全解N/R/W参数如何决定读写一致性【免费下载链接】system-design-notesNotes of the book System Desgin Interview - An Insiders Guide项目地址: https://gitcode.com/GitHub_Trending/sy/system-design-notes在开源笔记项目system-design-notes中第 6 章分布式键值存储以Quorum 共识为核心用 N、R、W 三个参数讲透了分布式系统读写一致性是如何被决定的。本文带你快速理解为什么需要 Quorum三个参数怎么配如何根据业务调优为什么分布式系统绕不开 Quorum 共识单台服务器内存有限数据要扩展到多台服务器就必须数据分片 多副本复制。但副本一多问题就来了客户端读到的一定是最新写入的值吗按CAP 定理网络分区无法避免系统只能在一致性和可用性之间权衡——这正是 N/R/W 参数要解决的矛盾。比如节点 n3 宕机后n1/n2 上的写入无法同步给它读请求就可能读到过期数据三个核心参数N、W、R 分别是什么数据通过一致性哈希分布在多个服务器上并从环上顺时针选出 N 台服务器保存副本建议分布在不同数据中心Quorum 机制用三个参数控制读写参数含义作用N副本总数数据一共存几份W写 Quorum写入至少被 W 个副本确认才算成功R读 Quorum读取至少从 R 个副本收到响应才算成功核心规则W R N 保证强一致性这是全章最重要的一条规则W R N读写副本集合必然有交集抽屉原理交集副本上一定有最新值 →强一致性W R ≤ N读写可能完全擦肩而过 → 强一致性不保证只能做到弱一致性/最终一致性N/R/W 配置速查表以 N 3 为例NWRW R结果3224 3✅ 强一致性最常用3213 3⚠️ 不保证一致性读更快3123 3⚠️ 不保证一致性写更快3112 3⚠️ 只保证可用性读最快黄金法则N 2W − 1即 W R (N 1) / 2。例如 N 3 时取 W R 2是可用性与一致性的经典平衡点。如何根据业务场景调优 N/R/WW、R、N 的取值本质是延迟与一致性的权衡 读多写少优化快速读R 1W N读取任意 1 个副本立即返回延迟极低写入需所有副本确认强一致。适合缓存型、读为主的场景。 写多读少优化快速写W 1R N写入只需 1 个副本确认写延迟极低读取汇总所有副本返回最新值。适合日志采集等写密集场景。⚖️ 读写均衡强一致性W R N通常 N 3W R 2金融、库存等对数据正确性敏感的场景首选。节点故障了怎么办Sloppy Quorum 与 Hinted Handoff严格坚持 W 个副本在线节点一挂系统就不可用。Sloppy Quorum宽松 Quorum的思路是不执着于固定节点哈希环上选取前 W 个健康节点写入、前 R 个健康节点读取离线节点自动被跳过用短暂的一致性放宽换取持续可用Hinted Handoff提示传递故障节点恢复后其他节点把宕机期间的变更推给它数据重新对齐Merkle Tree默克尔树节点永久故障时双方先比较根哈希再递归定位不一致的桶只同步有差异的数据块同步开销极小冲突如何解决向量时钟追踪数据版本并发写入会产生兄弟版本冲突。系统用向量时钟D([S1, v1], [S2, v2], …, [Sn, vn]) 追踪每个数据项的版本数据在某服务器被修改时该服务器对应的版本计数器 1若版本 X 的所有计数器都 ≤ 版本 Y则 X 是 Y 的祖先无冲突若存在某计数器在 Y 中反而更小则两者是兄弟版本冲突交由应用逻辑或客户端介入调和完整键值存储架构总览把数据分片、复制、Quorum 共识、故障处理组装起来就得到了一个完全去中心化、无单点的分布式键值存储客户端只通过get(key)和put(key, value)两个简单 API 访问协调节点负责代理请求增删节点全自动相关章节与延伸阅读本章完整笔记06.%20Key-Value%20Store/Readme.md前置知识——一致性哈希分片05.%20Consistent%20Hashing/Readme.md全书目录Readme.md掌握 N/R/W 三个参数你就掌握了在延迟、可用性与一致性之间按需拨盘的核心手段。下次系统设计面试中再遇到如何保证读写一致性不妨就从 Quorum 开始答起。【免费下载链接】system-design-notesNotes of the book System Desgin Interview - An Insiders Guide项目地址: https://gitcode.com/GitHub_Trending/sy/system-design-notes创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考