一个假烟感差点淹掉 Jane Street 在纽约的唯一机房
来源:michael.bacarella.com — 2026-11-10
📋 概述
一篇机房战争故事。承包商施工扬尘触发了烟感,消防逻辑随即切断机房空调、给喷淋管加压——现场没有火,但机柜温度一路飙升,而喷淋头只等温度到位就开喷。作者当时住在步行九分钟的地方,半夜被香港办公室的电话叫醒,赶去抢在喷淋启动前把电源线全部拔掉。
🔑 核心要点
- 机房长期紧贴交易大厅,一是怕策略被窃,二是要保留「跑过走廊直接拔电源」这个最后手段
- 喷淋管平时不充水,烟感触发后才加压,真正开喷靠喷头里的热敏元件,所以没火也不安全
- 烟感同时会切断 CRAC 空调,而满屋机柜最不能停的恰恰是制冷,温度于是单边上行
- 事后他们写了一个 OCaml 守护进程:每分钟直接问每台服务器要温度,均值偏高就向全组告警
- 作者说这事如果只监控空调状态或机房温感,可靠性远不如直接问那批 Linux 机器
💡 金句
有时候最耐用的办法,真的就是挨个问你这批 Linux 机器的温度,然后均温稍微高一点就炸锅。
← 返回 Lobsters 首页