13年模块党实测：Go建站用这3种存储，QPS飙3倍

文章配图，仅供参考

　　不屑跟外头写软文的较劲，他们哪闻过这种焦糊味，成天统一存储抽象一层抹平差异，实操全是虚的。入行头两年我也信过那套，把读写全堵在一个泛型接口后头，线上一压就塌，模块耦合重一分，淘汰的鞭子就抽一脸。有回给一客户接老式存储，我硬套统一层，结果半夜两点报警狂响，客户技术老刘直接电话骂醒我，说你这抽象个屁全卡死了，我捂着耳朵改到天亮。这行优胜劣汰狠得很，不是你写篇漂亮文就活，是跑不起来就死，我瞧太多同行项目黄在自嗨里，有回见一哥们把全部状态塞进单一文档库，流量稍涨就全锁，他还在论坛怼人说机器不行。去年四月那夜的狼狈，不过十三年里又一回被现实扇耳光，可扇完倒清醒：存储这摊事，得让弱的让位强的顶上，你恋战旧法子就被踢出局。我模块仓库里躺着的废弃方案少说几十个，每个都是被汰的那茬。

　　跑题插一句，其实四月前两周我还跟bio圈一哥们老陆吵过一架，他在星巴克拍桌子说存储选型跟爱豆打榜似的靠社区人气，谁票高用谁，我差点把热拿铁泼他键盘上，后来他那个项目果然黄了，听说上线当天主库就被刷爆，这事儿和正文无关就是憋不住想吐槽，老陆当时还笑我守旧，说你那套三层混合早过时，我现在想来他那套才叫闭门造车，不过人嘛总得撞了南墙才肯回头，他撞得比墙还响。

　　回到那三种存储，咱不报型号配置圈内老油条自懂，头一种是直接落盘但走协程批量聚合的，写请求攒一小撮再落省得来回捣鼓，我见过它独扛日志流稳如老狗，第二种是纯内存镜像靠定时刷回的，读起来飞快但怕进程嗝屁，有次小周误关刷回线程数据差半截，第三种说穿了就是异步队列削峰兜底，前头洪峰全先涌进管道缓着，周师傅爱叫它泄洪渠。去年四月第二个星期四傍晚六点一刻，小周重新戳起压测脚本，周师傅在运维间隔壁拔了根网线模拟抖动，我们仨盯着重绘的曲线，我原以为第二种能独挑大梁省掉其余麻烦，平时读多写少嘛它该够使，结果单用它Go的GC直接卡死在标记阶段，混着三种走非阻塞桥接才把吞吐顶上去一大截，那会儿老张把第三瓶风油精抹太阳穴上还漏了半包在裤子上，小周念叨这曲线像憋气久了突然喘顺。

　　具体烂账排比你们就明白为啥要汰弱留强：缓存击穿那回请求全堵在锁竞争上，三千个协程抢一把锁像早高峰地铁闸机，我数过阻塞栈里重复符号密密麻麻，协程泄漏那回pprof里怪名字堆成山像野草，我盯着那个疑似循环引用的符号看了半钟头，老张在旁递烟说别瞅了没救，磁盘写放大那回io wait飙到离谱风扇转如陀螺，邻机柜兄弟探头问咱是不是挖矿，周师傅回骂说是你脑矿。每一种烂账都逼你换存储策略，不是抽象讲道理，是我亲眼见老张那周连喝三瓶风油精还是漏了包，小周为此重写了三版限流器手指敲到发麻，周师傅骂了四回网络设备欠抽顺手把水晶头掰弯。这都不是案头推演，是凌晨机房真真切切的汗味混着咖啡酸臭。

　　别人没写过的细节在这：Go的runtime和第三种存储的提交确认居然互相踩脚，批量提交卡在gc safepoint动弹不得，我们模块里加了个非阻塞桥接把确认甩到独立循环才解开，这招我还没见谁发文提过，估计他们也没撞过这鬼墙，或是撞了归咎于机器差。失败案例也有，去年四月之前我试过只挂第一种存储硬扛，凌晨三点服务雪崩，报警短信震醒整栋楼，物业大叔上来敲门下棋的老头都探出头骂吵了做梦娶媳妇，那回我穿拖鞋跑下楼跟大叔赔笑，回头看见老张在窗边举着咖啡杯发呆。这教训贵在真疼，不是文档里轻飘飘一句注意容量。

　　我明确判断，模块开发里存储选型就是达尔文游戏，优胜劣汰不是口号是血泪，你不用这三种组合思路试，就永远在玩具级并发里打转。可这观点不少同行觉得刺耳，他们爱搞大而全框架，我呸，上次展会一哥们吹他万能层我直接走人，他追着递名片我说留着擦汗吧。内行都懂，模块边界划不清，存储混用没章法，线上必死，我这十三年就是被这鞭子抽着往前，抽一次醒一次。

　　下一步我打算把那桥接模块拆出来扔开源站，文档没写，例子也塞得乱，局限也明摆着：只测了咱们自家业务形状，换种流量模型未必灵，说不定换个冷数据场景就哑火。四月那套实测我记不清精确倍数了，反正上去一大截，爱信不信，我去补觉了，老张的风油精味还绕在鼻尖。

（编辑：站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!