SISTEMAS Y RECURSOS

IMPULSAMOS LA COOPERACIÓN CIENTÍFICA

Hemos diseñado nuestro sistema con un PUE (Power Usage Efectiveness) muy bajo y hemos marcado la línea a seguir en otros centros en España y en Europa.

IMG_9629

Dependencias

Físicamente la instalación se compone de dos salas de IT adyacentes. La primera de ellas es el CPD o Sala de Sistemas. Se trata de una estancia de 90 m2 en la que se ubica el equipamiento IT en dos filas de racks. Es obvio que 90 m2 es un espacio muy reducido, y que el número de racks que pueden alojarse en él es pequeño.

En segundo lugar está la Sala Técnica. Esta estancia, de unos 45 m2, alberga los sistemas de apoyo, principalmente eléctricos y de extinción; específicamente el cuadro eléctrico principal, los sistemas de alimentación ininterrumpida con sus correspondientes cuadros de distribución, las unidades de distribución de agua, las baterías de extinción de incendios y el control del sistema de refrigeración.

Control de accesos

El acceso a las instalaciones está restringido, de forma que solamente el personal autorizado puede acceder a las salas de IT. Siguiendo buenas prácticas el acceso se realiza mediante tarjeta y código en la puerta principal y mediante sistema biométrico (huella dactilar) en las salas de IT. 

El sistema se completa con un sistema de alarma para intrusiones no deseadas y un circuito cerrado de grabación de video en todas las dependencias.

Sistemas de cálculo

Supercomputación Castilla y León dispone de varios clústeres de cálculo con diferentes arquitecturas tecnológicas de computación para una optima adaptación a diferentes tipos de cálculos.

En total son 345 servidores que cuentan con diferentes generaciones de procesadores, cantidad de memoria (desde 32 GB a 1024 GB), redes Infiniband (FDR y HDR) y tarjetas GPU NVidia V100/A100 y coprocesadoras Intel Xeon Phi.

Puede encontrar información técnica más detallada en la página.

EN RESUMEN

La potencia de cálculo total de nuestros sistemas de cálculo es en la actualidad de 509 Teraflops.

Virtualización

SCAYLE presta servicios de IaaS sobre una plataforma de virtualización.

Esta plataforma está formada por un cluster VMWare VSphere 5.1 de 8 máquinas HP Proliant DL580 con las siguientes características:

  • 4 procesadores Intel Xeon X7350 @ 2.93GHz
  • 196 GB/Ram.
  • 2 Interfaces GbE.
  • 4 Interfaces  10GbE.
  • 2 Interfaces Fiber Channel 4GbE.
  • Hypervisor VMWare VSphere 5.1.

 

A nivel de red, los hypervisores están conectados a un backbone 10GbE con agregaciones de dos puertos LACP para acceso al almacenamiento y producción.

El backbone de almacenamiento de la plataforma está conectado por iSCSI y consiste en 4 cabinas de almacenamiento Dell Equallogic 61xx de unos 80TB de capacidad.

Para la gestión y administración se dispone, además, de una serie de servidores que realizan estas tareas. Concretamente un servidor VMWare VSphere Server 5.1.

Almacenamiento y backup

Se dispone de múltiples sistemas de almacenamiento que soportan todos los servicios de SCAYLE.
Desde el punto de vista estrictamente físico se dispone de dos sistemas de almacenamiento en disco y uno en cinta. Sobre los sistemas en disco se construyen a su vez los sistemas de archivos (filesystem) que usan los diferentes sistemas.

Sistema de almacenamiento paralelo Lustre

El sistema de ficheros paralelo Lustre está dedicado en exclusiva a proporcionar el almacenamiento necesario para nuestros usuarios del servicio de cálculo científico. Proporciona una capacidad total disponible de 600 TB con la versión Lustre 2.7.

Está compuesto por:

  • 2 MDS MetaData Servers
  • 2 OSS Object Storage Servers
  • 12 OST Object Storage Target

Proporciona 3 puntos de montaje para usuarios:

  • /home
  • /soft
  • /scratch

Puede encontrar más información sobre estos puntos de montaje aquí.

Sistema de almacenamiento NetAPP.

Cabina de almacenamiento FAS 3140 con las siguientes características:

  • Doble controladora activo-activo.
  • Funciones SAN (FCC, iSCSI).
  • Funciones NAS (CIFS, NFS).
  • 6 Interfaces FCC 4Gbs por controladora.
  • 2 Interfaces Gbe por controladora.
  • 2 Interfaces 10Gbe por controladora.
  • 98 discos SATA 1TB.
  • 28 discos FC 330GB.
  • Capacidad bruta de 100TB.
  • Software ONTAP 8.x.

Sistema de almacenamiento Dell Equallogic.

2 cabinas PS6110 con las siguientes características:

  • Doble controladora Activo-pasivo.
  • Funciones SAN (iSCSI).
  • 1 Interfaz 10Gbe por controladora.
  • 24 discos NL-SAS de 2TB.

2 cabinas PS6110 con las siguientes características:

  • Doble controladora Activo-pasivo.
  • Funciones SAN (iSCSI).
  • 1 Interfaz 10Gbe por controladora.
  • 24 discos NL-SAS de 600 GB.

Las cabinas se unifican en un único "grupo" dando una capacidad bruta total de 124TBs.
El sistema NetApp se utiliza principalmente en modo NAS para los sistemas de cálculo (NFS) y en modo SAN también para sistemas de cálculo con filesystem paralelos (Lustre, FhGFS). También se utiliza como sistema de backup.
El sistema Dell se utiliza únicamente para virtualización.

  • Sistema de backup en cinta Overland: Las copias de seguridad se realizan mediante una librería robotizada Overland NEO 8000, dotada de cuatro driverl LTO2 y hasta 580 cartuchos.
  • Software de backup de plataforma de virtualización: El respaldo de la plataforma de virtualización se realiza usando el software Veeam Backup.
  • Software de backup para sistemas de cálculo: El backup de los datos de usuario en los sistemas de cálculo se realiza usando el software Bacula.