Almacenamiento#
Salvo casos particulares, las cuentas tendrán asociadas el siguiente esquema de almacenamiento:
| Almacenamiento | Capacidad | Descripción |
|---|---|---|
/home |
5 GB | Recomendable no almacenar datos o código en esta partición. Cuando se alcance su máxima capacidad, tendrá que mover los archivos a /data |
/data |
1 TB | Partición con una "cuota soft" sobre el almacenamiento contratado. Para grandes volumenes será necesario solicitarlo mediante el email de soporte (support@hpc.iter.es). Es accesible en /home/<usuario>/data |
/local/jobs/<username\>/<jobid\> |
300GB | Partición que se encuentra en el disco duro local del nodo. Este directorio se crea automáticamente cuando se ejecuta el trabajo en el nodo. El jobid es acccesible a través de la variable de entorno $SLURM_JOBID. El contenido de esta partición se elimina una vez finalizada la ejecución. |
Info
La idea es que los usuarios trabajen siempre desde /data, dejando el /home ficheros o directorios de de menor importancia o para ficheros de configuración de programas. Por tanto, recomendamos instalar entornos virtuales o paquetes de software de, por ejemplo, Python o R en /data.
La partición /local está enfocada en mejorar el rendimiento de los trabajos cuando éstos acceden al almacenamiento. Hay casos concretos donde el software necesita leer y escribir de forma continua sobre ficheros que se encuentran en el almacenamiento en lugar de hacerlo sobre la memoria. En casos así, se ha visto una mejora de rendimento cuando el acceso, en lugar de ser por red es directo al disco duro local del nodo, puesto que es más rápido. A la hora de trabajar con este directorio,en el mismo script de ejecución hay que copiar los ficheros con los que vamos a trabajar a este directorio, /local/jobs/<username\>/<jobid\>, y antes de terminar, también dentro del mismo script, hay que copiar los resultados de vuelta al directorio /data. Esto es así, porque una vez que el trabajo termine, se borrará todo el contenido de este directorio. Cualquier duda al respecto pueden escribirnos a support@hpc.iter.es.
Cualquier cambio sobre este esquema de almacenamiento será notificado.
Copias de seguridad#
Los datos de los usuarios están respaldados por el sistema de copias de seguridad del sistema de almacenamiento. El esquema actual de copias de seguridad es el siguiente:
- Para
/home, 6 copias horarias, 2 copias diarias y 2 semanales. - Para
/data, 6 copias horarias, 2 copias diarias y 2 semanales.
Para la partición /local no hay copias de seguridad porque es un almacenamiento situado en los discos duros de los propios nodos de cómputo y está pensado para que sea utilizado durante las ejecuciones y se limpie cuando éstas acaben.
Cualquier cambio al respecto será notificado.