Conversaciones
Un ex ingeniero de sistemas recuerda una falsa alarma de humo que casi afecta al centro de datos de Jane Street en Nueva York
Un artículo de recuerdos personales en Hacker News relata que, en sus inicios, Jane Street ubicaba su centro de datos en el edificio de oficinas 1 New York Plaza de Nueva York, cerca de la sala de operaciones. Un exmiembro del equipo de sistemas afirma que el polvo generado por unas obras en la sala de preparación contigua activó una vez la alarma de humo. En el punto donde se corta el material, el artículo presenta el contexto de la alarma y la cultura de riesgo de la empresa, que daba importancia al corte físico de la electricidad; el proceso posterior de inundación no se proporciona completo.
El autor del artículo recuerda, como exmiembro del equipo de sistemas de Jane Street, que en los primeros años la empresa insistió durante mucho tiempo en situar el centro de datos cerca de la sala de operaciones. Cuando el equipo tenía solo unas 10 personas, esa práctica podía aceptarse, pero cuando llegó a unas 150 ya parecía extraña. Una de las razones era la preocupación por la propiedad intelectual: no querían que, si se llevaban los servidores, se filtraran las estrategias de negociación. Otra razón era el control de riesgos técnicos: querían que un sistema de negociación automatizada fuera de control siempre pudiera ser desconectado por alguien corriendo por el pasillo.
El autor afirma que la empresa no carecía de herramientas para mitigar esos riesgos, pero avanzaba con lentitud en los cambios correspondientes y quería conservar el desenchufe físico como último recurso. Esa cultura de riesgo estaba influida por un socio que había servido en un submarino nuclear: en el entorno de un submarino, no se debía confiar plenamente en la automatización a menos que existiera una gran palanca de control roja y conectada mecánicamente.
A medida que la empresa se expandió, aquel centro de datos rudimentario se convirtió en un centro de datos de tamaño considerable, equipado con SAI en línea, aire acondicionado de precisión para salas de equipos, conmutadores de red del tamaño de neveras, un generador diésel de reserva subterráneo y unos 10 pasillos con armarios de servidores de una profundidad equivalente a 10 racks por pasillo. Estaban ubicados en 1 New York Plaza, un edificio de oficinas rascacielos común en Nueva York.
El autor recuerda que entonces vivía en un pequeño apartamento a unos nueve minutos a pie de la oficina, por lo que era una persona fácil de localizar en emergencias. Una tarde, justo después del trabajo y cuando se disponía a entrar en el ascensor de su apartamento, recibió una llamada de la oficina de Hong Kong informándole de que había saltado la alarma de humo en el centro de datos de Nueva York. El material indica que había contratistas trabajando en la sala de preparación junto al centro de datos y que los trabajos de corte levantaron polvo, activando la alarma; pero el texto proporcionado se corta en ese punto y no ofrece los detalles posteriores del título sobre cómo «casi se inunda el centro de datos».