Jane Street纽约数据中心因烟雾报警误报险些被淹

Jane Street 位于曼哈顿的数据中心因一次虚假烟雾报警险些触发喷淋系统。承包商在数据中心旁准备室切割材料产生粉尘，触发烟雾报警器；报警随后使平时空置的喷淋管道被充入加压水。喷淋头由热量而非烟雾触发释放。^[1]

同一报警还关闭了机房空调。服务器继续运行，机房温度上升，加压管道与持续升温使设备面临水浸风险。香港办公室因看到大量服务器同时报告温度上升而致电通知 Michael Bacarella；他赶到 Water Street，乘电梯至33层进入机房，逐排、逐柜用双手拔掉设备电源线。断电后，温度读数依次升至141、142、143、143.5和143.6华氏度后停止。^[1]

当天纽约主要市场已收盘，公司次日早晨恢复服务。Jane Street 保留了喷淋系统，收紧了流程与监控，并继续在交易楼层旁的办公楼托管服务器。次日早晨，Michael Bacarella 用 OCaml 编写监控程序，每分钟查询各地每台服务器的板载传感器，计算平均温度，并在平均温度超过阈值时向系统团队发送警报。^[1]