Escrito por: Zhou Xiaoyan
Fuente: Tecnología Tencent
James Wardy, ingeniero principal del centro de datos Ashburn de Digital Realty. Imágenes procesadas por IA
James Waddy camina 30.000 pasos al día.
Su lugar de trabajo está ubicado en un centro de datos de más de 90.000 metros cuadrados en Ashburn, Virginia. Todos los días revisa el equipo de tratamiento de aire, la sala de servidores, los conductos, los cables y los condensadores del techo. A veces tiene que oler olores a quemado, palpar anomalías en los conductos y ver si los pájaros han picoteado el equipo.
Puede que no parezca que tengan mucho que ver con la IA, pero aquí es exactamente donde finalmente llega el poder informático de la IA.
El año pasado, cuando la gente hablaba de infraestructura de IA, se centraba más en GPU, plantas de energía, transformadores, terrenos, financiación y cientos de miles de millones de dólares en gastos de capital. Pero cuando realmente ingresa al centro de datos, encontrará que no se trata solo de una industria informática, sino también de un enorme sistema físico que requiere un funcionamiento continuo las 24 horas del día.
Actualmente hay alrededor de 2.700 centros de datos en funcionamiento en Estados Unidos. A medida que aumenta la demanda de potencia informática generada por la IA, constantemente se construyen nuevas instalaciones y los requisitos de energía, refrigeración, redes y otros sistemas son cada vez mayores.
Detrás de estos sistemas, se requiere que un grupo de personas los proteja durante mucho tiempo. Puede que no sean ingenieros que desarrollen modelos de IA, ni sean responsables de entrenar modelos de gran tamaño, pero deben asegurarse de que el edificio donde se encuentra el servidor no se detenga por sobrecalentamiento, corte de energía, falla del equipo o un problema de fibra óptica.
En cierto sentido, se parecen más a "niñeras" en la era de la IA.
Inspección de treinta mil pasos: no hay “pequeños problemas” en el centro de datos
Wardy es el ingeniero principal del centro de datos Ashburn de Digital Realty, donde ha trabajado durante tres años.
Centro de datos de Digital Realty en Ashburn, oeste de Washington
Tiene un título en negocios y anteriormente trabajó en ventas para una empresa de HVAC, ascendiendo desde el turno de noche hasta ahora dirigiendo a docenas de ingenieros y llamándose a sí mismo el "general" del equipo.
Su trabajo principal es garantizar que la infraestructura crítica del centro de datos continúe funcionando. Las inspecciones diarias comienzan en la sala de tratamiento de aire, donde enormes equipos de aire acondicionado suministran continuamente aire frío al centro de datos.
El equipo de alquiler del centro de datos de Digital Realty Ashburn no tiene logotipos ni nombres de clientes.
Más arriba, la sala de datos se parece un poco a un vestuario gigante, con filas de servidores colocados en gabinetes o jaulas para que diferentes empresas los alquilen. Aquí no puede ver el logotipo del cliente y rara vez puede saber a quién pertenece el servidor. Los equipos de los competidores pueden estar funcionando al mismo tiempo a lo largo de una fila de gabinetes. Cuanto más cerca esté del servidor, más fuerte será el rugido y los trabajadores deben usar tapones para los oídos.
Equipo en el centro de datos de Digital Realty Ashburn
Continuando hasta el techo, Wardy revisa las filas de condensadores en busca de mal funcionamiento y busca daños causados por pájaros. Desde el tejado podía ver a lo lejos las grúas donde se estaba construyendo el centro de datos de otra empresa.
"Es lindo aquí arriba", dijo Wardy. "Me gustan las inspecciones como ésta".
El centro de datos lleva nueve años en funcionamiento y sus pasillos son tan largos que algunos técnicos se desplazan en scooter. En el interior hay imponentes jaulas para cables, así como catres y duchas para el personal estacionado durante condiciones climáticas extremas.
Algunos días puede haber hasta 120 personas en el lugar, de las cuales alrededor de 50 son empleados regulares y el resto incluye personal de seguridad contratado y personal de clientes. Aun así, muchas habitaciones del enorme edificio permanecen vacías durante la semana.
Aunque el puesto de Wardy se llama "ingeniero", en términos de contenido de trabajo específico, no es lo mismo que un ingeniero de I+D o de diseño en el sentido tradicional.
Winston Smith, analista del campo tecnológico, señaló que este tipo de puesto se acerca más a un técnico de instalaciones críticas (CFT) o a un técnico de operación y mantenimiento de centros de datos (DCO Technician). Las tareas principales son las inspecciones in situ, el mantenimiento de la infraestructura y la respuesta a emergencias.
Cree que Wardy se basa en el oído, el olfato y el tacto para detectar anomalías todos los días, actuando esencialmente como un "sensor humano" para el centro de datos: descubriendo posibles problemas con los sistemas mecánicos, eléctricos o de refrigeración antes de que el sistema de monitorización emita una alarma o incluso antes de que el equipo realmente funcione mal.
Este tipo de trabajo puede parecer trivial, pero no se puede perder ningún detalle, porque lo que más temen los centros de datos son los accidentes. Una llegada inesperada de equipos grandes, una falla menor del sistema o incluso una anomalía aparentemente discreta pueden afectar los programas de redundancia y mantenimiento de una instalación.
Por eso, para Wardy, los llamados "días buenos" no son cuántos grandes problemas se han resuelto, sino que no ha ocurrido ningún problema.
Wardie caminó sobre el piso elevado, donde las cámaras inferiores hacían circular aire para disipar el calor de los servidores. Mientras caminaba, revisó el equipo. Ni ruidos ni olores extraños, todo es normal.
Esto es lo que quieren ver los operadores de centros de datos.
Six Nines: una fibra óptica con una décima parte del grosor de un cabello no puede salir mal
Lo que persigue el centro de datos es estabilidad hasta el punto de resultar aburrido.
Digital Realty estima que el tiempo de actividad de su centro de datos ha alcanzado el 99,999% y actualmente espera aumentarlo aún más hasta el 99,9999%. Parece que sólo hay un "9" más, pero el tiempo de inactividad anual correspondiente se reducirá de unos 6 minutos a unos 30 segundos.
Para ganar estas decenas de segundos, cada enlace del centro de datos debe ser lo suficientemente confiable.
Lo que Jeff Hansen, técnico de centros de datos de CC&N, enfrenta todos los días es el enlace más pequeño: la fibra óptica.
El diámetro del núcleo de la fibra monomodo es de sólo 8 a 9 micrones, y un cabello humano tiene aproximadamente 75 micrones de espesor. Cuando se conectan dos fibras ópticas, la empalmadora por fusión debe alinear el núcleo de la fibra con un aumento de 1000x y luego fusionar el vidrio mediante un arco. Hansen lo llama "soldadura microscópica".
“Trabajar con fibras ópticas es como jugar con láseres”, afirmó. "Una fibra óptica es una hebra microscópica de vidrio que transporta una cantidad increíble de información. Eso me fascina".
Dentro del centro de datos Ashburn de Digital Realty
Puede haber miles de conexiones de este tipo en una habitación de un centro de datos a hiperescala. Durante la instalación, cada fibra se enruta, termina y prueba individualmente. Una vez que una prueba falla, puede haber millones de razones detrás y los técnicos deben confiar en la experiencia y los procesos para investigar paso a paso.
cableado del centro de datos
Por lo tanto, rara vez se permite el "avión" en el centro de datos. Antes de que el equipo de Hansen vaya al sitio cada vez, se reúnen para confirmar el trabajo, las herramientas y el alcance del proyecto. El responsable deberá preparar una sesión informativa para comprender de antemano cómo ha cambiado el lugar desde la última visita.
Porque los centros de datos cambian rápidamente. Es posible que un sitio que todavía estaba en construcción hace seis meses ya esté en pleno funcionamiento. Los derechos de acceso, los protocolos operativos y los niveles de riesgo están sujetos a cambios.
"No se puede improvisar el trabajo del centro de datos", afirmó Hansen. "Se requiere mucha planificación para hacerlo bien, y eso comienza incluso antes de poner un pie en el lugar".
Lo mismo ocurre con el control de acceso. El acceso a centros de datos de hiperescala a menudo requiere controles de credenciales, verificación de identidad e incluso escaneos de iris. Es posible que se prohíban el cartón y el papel debido a la generación de polvo, y también se pueden prohibir los dispositivos de almacenamiento como unidades flash USB.
Un trabajo que parece que sólo lleva cinco minutos no se puede hacer tan pronto como lo dices. Reemplazar equipos, agregar sistemas, mover cables y realizar mantenimiento requieren aplicación anticipada, evaluación de riesgos, programación y coordinación con otros equipos.
Cada excepción debe registrarse. Pequeñas fluctuaciones en el suministro eléctrico, luces parpadeantes, ruidos inusuales de los equipos de refrigeración o incluso un pequeño charco de agua en el suelo pueden convertirse en incidentes denunciables.
Para los técnicos de cableado, la palabra "seguridad" incluye incluso tres significados al mismo tiempo: ellos no pueden sufrir lesiones, sus compañeros no pueden resultar heridos y el equipo no puede sufrir daños. Porque en un centro de datos que ya está en funcionamiento, mover una fibra óptica en funcionamiento puede tener consecuencias directas.
Lo que el centro de datos realmente necesita no son héroes en el acto, sino un conjunto de procesos que no dependan de los héroes tanto como sea posible.
La IA convierte a la "niñera" en una profesión popular: detrás del alto salario está la escasez de talento
En el pasado, los centros de datos eran una industria relativamente invisible. Ahora, la IA lo ha puesto en el centro de atención.
Según el proveedor de datos de la industria Data Center Map, actualmente hay alrededor de 2.700 centros de datos operativos en los Estados Unidos, casi 400 están en construcción y al menos 1.500 están en etapa de planificación. Ashburn, donde se encuentra Wardy, está ubicado en el "Data Center Alley" (Callejón del centro de datos), aproximadamente a una hora en automóvil a las afueras de Washington, DC.
El centro de datos en sí no es una industria que requiera mucha mano de obra. El funcionamiento a largo plazo de una instalación normalmente requiere sólo de decenas a cientos de empleados. Pero cuando se construyen y operan miles de instalaciones simultáneamente, la necesidad de ingenieros, técnicos, personal de mantenimiento y gerentes de proyectos se expande rápidamente.
El sitio web de contratación Indeed ha tenido más de 1 millón de solicitantes de empleo que buscaron puestos relacionados con centros de datos este año, y el volumen de búsqueda en agosto se multiplicó por ocho en comparación con principios de 2022.
La investigación de Indeed también muestra que los salarios de los centros de datos para los trabajadores por horas dedicados a trabajos de mantenimiento e instalación son aproximadamente un 42% más altos que los de puestos similares en otras industrias. El salario anual de un director de proyectos de centro de datos es de aproximadamente 115.000 dólares. La información proporcionada por Digital Realty muestra que el salario anual de sus ingenieros principiantes es de aproximadamente 66.000 dólares estadounidenses, y el salario promedio de los ingenieros experimentados puede superar los 120.000 dólares estadounidenses.
El comentarista de tecnología Evan Kirstel también destacó este cambio salarial. Dijo en las redes sociales que la construcción de centros de datos está generando mayores ingresos para puestos como electricistas, técnicos, HVAC y seguridad, y que la inversión en infraestructura de inteligencia artificial se está transformando en algunas oportunidades específicas de empleo manual.
Pero lo que realmente escasea son personas que puedan manejar infraestructuras complejas.
Brandi Galvin Morandi, directora de personal de la empresa de infraestructura digital Equinix, dijo que los profesionales en sistemas eléctricos, ingeniería de redes y sistemas de refrigeración tienen una gran demanda.
En el centro de datos de Ashburn, hay una combinación de trabajos administrativos y manuales. Alguien es responsable de la seguridad, alguien es responsable de configurar el cableado del cliente, alguien compra materiales y hay ingenieros que supervisan toda la instalación. Esta combinación de trabajos es más o menos similar en otros centros de datos de Estados Unidos.
El problema es que la tasa de crecimiento del talento no puede seguir el ritmo de la construcción de instalaciones. Cindy Fiedelman, directora de recursos humanos de Digital Realty, dijo que estas instalaciones deben funcionar las 24 horas del día, por lo que los profesionales necesitan tanto capacitación técnica como disciplina de seguridad y experiencia práctica, y la oferta de ese talento es más lenta que la tasa de expansión de la industria.
Como resultado, los colegios comunitarios comenzaron a ofrecer cursos relacionados con los centros de datos y las grandes empresas de tecnología comenzaron a invertir en programas de capacitación. En Virginia, Northern Virginia Community College ha lanzado un programa de empleo en centros de datos con apoyo del sector privado. Las empresas de tecnología, incluida Meta, también participan en el desarrollo de mano de obra calificada.
Michael E. Webber, autor del sitio web Energy 101 y profesor de la Universidad de Texas, cree que los centros de datos de IA están creando empleos manuales y también pueden reducir algunos empleos administrativos, pero es relativamente más fácil para los trabajadores administrativos cambiar a otras ocupaciones.
Digital Realty opera actualmente más de 300 centros de datos en seis continentes. En instalaciones como Ashburn, alquila espacio a grandes empresas tecnológicas que necesitan potencia informática, incluidas Oracle, Meta e IBM.
Los servidores pueden provenir de diferentes compañías y los ingenieros pueden provenir de diferentes equipos, pero en última instancia todos enfrentan el mismo requisito: el sistema no se puede detener.
Cada vez hay más centros de datos y cada vez es más difícil ser "niñera"
El auge de la construcción provocado por la IA ha transformado los centros de datos de una infraestructura detrás de escena a una industria cada vez más visible para el público.
Don Atkinson, de 53 años, ha trabajado en Digital Realty durante aproximadamente 14 años y también ha realizado mantenimiento del sistema de energía de respaldo. Hoy dirige a jóvenes ingenieros.
Don Atkinson, director del centro de datos de Ashburn, Digital Realty
Lo que lo hizo sentir incómodo fue el cambio de actitud del mundo exterior. También dijo que no usa mucho la IA. "Es un momento extraño ahora".
Otro empleado, Malcolm Mosely, fue más directo: "Sólo estoy aquí para hacer mi trabajo".
Malcolm Moseley, empleado del centro de datos de Digital Realty Ashburn
Pero a la industria le ha resultado difícil mantenerse al margen. En Atlanta, Digital Realty busca una exención de una prohibición de construcción local. La prohibición restringe la construcción de centros de datos cerca de centros de transporte, donde la compañía espera construir un centro de datos de 500 millones de dólares. Los vecinos de la zona se han opuesto al proyecto, que actualmente se encuentra paralizado.
Controversias similares están surgiendo con la expansión de los centros de datos. En el pasado se prestaba poca atención a lo que ocurría en estos edificios. Hoy en día, el consumo de energía, el uso del agua y los impactos en las comunidades están entrando en el debate público.
La industria se está redefiniendo. Ya no es sólo el backend de Internet, sino también la infraestructura de la era de la IA. Salarios altos, contrataciones calientes, controversias comunitarias, presiones energéticas: todo sucede al mismo tiempo. Pero escondido detrás de todo el ruido, todavía hay un grupo de ingenieros silenciosos que mantienen el funcionamiento de todo el mundo digital a un ritmo de 30.000 pasos diarios.
Buen tiempo o clima donde no pasa nada. Buenos días y días en los que no pasa nada. Probablemente esto nunca cambie.