infoq 上微信后台存储架构 视频很是值得认真一听,大概内容摘要如下:
主要内容:同城分布式强一致,园区级容灾KV存储系统
- sync 序列号发生器
移动互联网场景下,频繁掉线重连,使用 sync 消息协议是非常理想的。相比于推送协议,更加
可靠、实现简洁(不需要考虑离线消息)。从陌陌分享看,也使用sync机制。
可靠高效的序号发生器特别重要的,遗憾的是没给讲讲消息的存储机制。
- 一致性hash 实现方式
节点hash 值可能冲突
快速初始化
方案:用机器跑出一堆“神奇”数字,分配给节点,预置算好的hash 值,不需要启动时临时计算
- 数据一致性
- bitcask 小表系统
- 通信合包
- 协程 libco
- 错误积累
全量扫描,自动修复