Turno de noche
Una GPU está ocupada sin ningún trabajo planificado. Investiga, contén y elimina la persistencia.
Briefingclic para contraer
El monitoreo disparó GpuBusyWithoutJob en node-2: una GPU está al máximo, pero Slurm dice que no hay nada asignado ahí. Este es un simulacro defensivo de respuesta a incidentes en un clúster simulado.
Contenlo como corresponde:
- Detén la carga no autorizada.
- Cierra la puerta de entrada. Algo en node-2 está expuesto a la red.
- Bloquea la cuenta comprometida.
- Elimina la persistencia, para que no vuelva sola.
El objetivo solo se cumple cuando la GPU sigue limpia durante 2 minutos. Útil: ssh node-2, nvidia-smi, ps aux, ss -tnp, systemctl, journalctl -u <svc>, crontab -l -u <usuario>, sudo.
tiempo sim. 0:30energía 0.13 kWhcosto $0.18carbono 0.05 kg CO₂e
Clúster4 × 8 H100 SXM 80GB · IB-NDR
node-1
job 101 · llama7b
node-2
inactivo
node-3
inactivo
node-4
inactivo
0%100% util▲ limitada✕ perdidatoca una GPU para ver detalles
Misión: Turno de noche. Eres ops@login-1 con sudo.
Escribe `help` para ver comandos y `cat README.md` para las notas. Los objetivos se verifican solos (panel derecho). La salida de la terminal está en inglés, como en un clúster real.
ops@login-1:~$
Objetivos0/4 cumplidos
- Persistencia eliminada (sin entrada maliciosa en cron)
- Servidor Jupyter expuesto detenido
- Cuenta 'intern' bloqueada
- Ningún minero corriendo durante 2 minutos
−33 pts cada una
Alertas1 activas
GpuBusyWithoutJob node-2/gpu3 · warning
GPU 97% busy but no Slurm job is allocated here
Panelesúltimos 30s · pasa el cursor para ver valores
Rendimiento de entrenamiento131.3k tok/s
MFU (mejor trabajo)66.7%
Utilización media de GPU28%
Potencia de la instalación16.4 kW
GPU más caliente77°C