嵌入式工程师建站手记：裸机到高可用全链路实践

　　微信公众号。跟人吵架。先扔结论后补细节。后怕。

　　“裸机到高可用全链路实践”这标题我盯着看了十八秒，手抖删掉又粘回去三次——不是卡在技术上，是卡在“实践”俩字。去年3月那会儿，我蹲在IDC机柜前拧完最后一颗M3螺丝，抬头看见对面墙上的消防栓锈迹连成片，像一张没调试好的PWM波形图。我说：这事儿能立住，靠的不是设计多漂亮，是活下来的全比死了的多。

　　张工当时蹲在冷通道里用万用表量PDU输出，表笔歪了两毫米，读数跳了三格，他直接把表塞进我手里说“你来”，我没接，顺手扯了根没剥皮的杜邦线当临时探针——后来才发现那根线根本没焊锡芯，纯靠压接硬撑了七十二小时。这事跟高可用没关系，但跟“能跑”有关系。嵌入式工程师建站，第一步不是选K8s还是Nomad，是确认自己敢不敢把SSH密钥丢进/dev/random里重生成三次。

　　凉掉的外卖在桌角结了层油膜，我撕开筷子包装时听见隔壁运维组吼了一句“谁动了etcd的--initial-cluster-state？！”。没人应。我扒拉两口饭，筷子尖戳破塑料膜发出那种脆响，特别像STM32调试口热插拔时的ESD击穿声。这声儿让我想起上周五晚十点二十七分，我们用OpenWRT路由器当BMC代理，在没光模块的情况下硬顶了四十三分钟SNMP轮询——直到光电模块发货单被钉在白板上，底下贴着三张不同颜色的便签，最上面那张墨水晕开了，“已签收”仨字只留下“已”和半个“签”。

　　我原以为负载均衡层必须上硬件F5，结果老李——就是那个总在会议室吃薄荷糖、糖纸折成船型摆在笔记本边上的老李——用NGINX加自研心跳包劫持了整条链路的健康检查。他改配置不提PR，直接rsync推到三台节点，然后微信发我一条语音：“听好了啊，六十秒，你记不住算我输。” 我听完回放三次，第四次才听清他含混带出的“timeout=1800”……结果部署当天，DNS缓存失效窗口卡在1798秒，差两秒崩。这个我敢打包票。

　　审稿间的灯是坏的，只有左半边亮，右边那排LED隔一个灭一个，跟SPI总线上掉帧似的。运营姑娘敲门进来问封面要不要加“零信任”三个字，我说加，她点头出去，两分钟后又探头说“领导觉得‘裸机’太糙，建议改成‘底层’”。我没说话。她转身时把门虚掩着，风一吹，门缝刚好卡在三厘米，发出高频啸叫——跟去年我们用I2C扩展GPIO时，SDA线耦合进DC-DC噪声一模一样。这种啸叫你听十分钟就头疼，但你查不出源阻抗偏差到底是0.4Ω还是0.47Ω。我说不准。

　　印刷对接的电话打来问校样上“watchdog_timeout_ms”的“ms”要不要改成“毫秒”，我说不改。对方顿了半拍，说“可你们前一页单位全是中文”。我答：“前一页是需求文档，这页是代码注释。” 他没再吭声。挂电话前我瞥见显示器右下角任务栏弹出个Win11更新提示，进度条停在98%，像死机，又像在等什么信号沿中断线传过来。这事儿跟高可用毫无关系，但它发生了。

　　真到了切流那天，我们拿裸金属跑的Consul集群崩了两次。第一次是Leader选举时，Raft日志索引错了一位；第二次是某个节点重启后，本地快照时间戳比NTP授时慢了三百七十二毫秒，导致整个成员列表判为“疑似分区”——其实就差半拍，半拍而已。我们没上任何混沌工程平台，只在灰度机器上手动kill -9掉consul进程十五次。第十一次之后，小陈突然说：“要不……把watchdog周期设成偶数？” 谁也没拦他。现在那套逻辑还活着，因为所有奇数周期都进了墓碑段。

　　失败案例倒是有两个：一个是用RT-Thread做反向代理中间件，结果HTTP header解析器没处理\

文章配图，仅供参考

　　优胜劣汰是真的。不是市场意义的淘汰，是字面意义：同一套配置模板发给二十个人，七个人的实例凌晨三点自动愈合，九个人手动修到天亮，剩下四个还在翻手册找CONFIG_RT_GROUP_SCHED要不要开。他们不是不努力，是工具链里缺了一段别人早就编译进romfs里的init脚本。这点我不屑说破。

　　打印机卡纸了。我抽出来的时候，纸面上还印着半行还没过审的文案：“……真正决定系统韧性的，从来不是故障恢复SLO，而是第一次通电时，LED灯有没有亮。” 纸背面沾着一点蓝色圆珠笔印，应该是上次会议记录蹭上去的，写着“LDO温漂校准未完成”。这事我懒得改。

　　所以别跟我谈“最佳实践”。去年3月到现在，我们拆了四次CDN回源策略，重写了三次日志采集agent，但始终没动过启动流程里那段十六行汇编——因为它的入口地址映射在MMU页表第十一项，改它就得连带刷三块Flash芯片，而产线烧录工装的JTAG固件，三年没升级。我明天要去仓库翻老版烧录盒，看看还能不能找出带v1.2固件的那台。要是找不着……就真得重写bootloader了。

（编辑：站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!