El estado de Florida da un giro a los SMP virtuales - Calendae | Informática, Electrónica, CMS, Ciberseguridad

El estado de Florida da un giro a los SMP virtuales

Hola, ¿qué tal colega?. En el teclado Simón Sánchez y en esta ocasión te voy a contar sobre El estado de Florida da un giro a los SMP virtuales

El panorama para la tecnología SMP virtual recibió un impulso adicional el mes pasado cuando la Florida State University (FSU) anunció que había instalado un nuevo sistema HPC de 3Leaf Systems. Los servidores están alojados en las instalaciones de HPC de la universidad y se utilizarán en una amplia gama de disciplinas científicas. Representa el primer envío anunciado de la oferta SMP virtual de 3Leaf.

Un recién llegado al espacio HPC, 3Leaf lanzó su producto de servidor inicial, llamado «Dynamic Data Center Server» (DDC-Server) en noviembre de 2009. Usando hardware y software especiales, le permite agregar un conjunto de nodos de servidor x86 en uno o más máquinas SMP virtuales. El servidor 3Leaf a la venta hoy se basa en placas base Opteron de dos sockets suministradas por Supermicro.

La idea es proporcionar una plataforma para aplicaciones que requieren una gran cantidad de núcleos y / o entornos con mucha memoria, pero sin el gasto de un sistema SMP cableado. Y debido a que la agregación se realiza virtualmente, los usuarios pueden restablecer la configuración SMP sobre la marcha para satisfacer las diferentes necesidades de las aplicaciones. Básicamente es tener un montón y también comérselo.

En general, la tecnología 3Leaf refleja la del competidor ScaleMP. A diferencia de ScaleMP, que hace toda su magia de virtualización en software, 3Leaf ha diseñado un ASIC personalizado que gestiona la coherencia de la caché a nivel de hardware. Además, a diferencia de ScaleMP, el producto 3Leaf está integrado con placas base basadas en AMD Opteron. Actualmente, ScaleMP solo es compatible con servidores basados ​​en Intel Xeon.

En realidad, esto resultó ser una consideración importante para la universidad. Dado que FSU es principalmente una tienda AMD, apegarse al hardware de Opteron significaba dejar de lado la solución ScaleMP. El otro atractivo de 3Leaf fue el mejor rendimiento prometido para el mecanismo de coherencia de caché basado en ASIC.

El nuevo sistema de FSU se basa en CPU Istanbul de seis núcleos y consta de 12 servidores de dos sockets conectados a través de QDR InfiniBand. El sistema tiene 576 GB de memoria y 6 TB de espacio en disco. Del total de 144 núcleos, 138 están disponibles para aplicaciones de usuario, y el resto está dedicado al sistema operativo. Si bien FSU no dice cuánto pagaron por los servidores, según 3Leaf, el precio de lista para un sistema de este tamaño es de $ 206,000.

Además del hardware está el software de asignación de recursos. 3Leaf ofrece diferentes variantes de gestión de recursos, dependiendo de cómo desee dividir los servidores. El software elegido por FSU fue DDC-Pool, que puede construir máquinas SMP virtuales con granularidad de nodo de clúster. Además, con DDC-Pool, la reconfiguración requiere reiniciar el sistema. Obviamente, este tipo de configuración implica que se utilizará para aplicaciones que se ejecuten durante un tiempo relativamente largo antes de que se requiera una reasignación de CPU y memoria.

Como el nuevo sistema es parte de la instalación HPC compartida de la universidad, está destinado a apoyar a cualquier investigador de la FSU. Actualmente, la instalación admite aproximadamente 450. Jim Wilgenbusch, que dirige la instalación HPC compartida en la universidad, estima que aproximadamente el 25 por ciento de estos usuarios comparten la necesidad de sistemas de tipo SMP con más memoria o más núcleos de CPU. Para satisfacer la demanda, crearon una «cola SMP» en la que cualquiera puede solicitar un número específico de procesadores y una huella de memoria. Si es necesario, las CPU y la RAM del sistema se asignan a los usuarios como un sistema virtual y luego se vuelven a colocar en el grupo de recursos cuando finaliza la aplicación.

Wilgenbusch cree que las principales áreas de aplicación que harán un buen uso de la tecnología SMP son la astrofísica, la ciencia de la tierra y la atmósfera y las aplicaciones de imágenes. FSU recibió recientemente una gran subvención de los NIH para un microscopio crioelectrónico, que genera resmas de imágenes en 3D para su posprocesamiento. Wilgenbusch dice que este es el tipo de aplicación adecuada para la plataforma 3Leaf, ya que tiende a requerir una huella de memoria mucho mayor que la que se puede tener en un solo nodo físico.

En teoría, una aplicación podría ocupar los 138 núcleos, pero la mayoría de las solicitudes de los usuarios que recibe son para asignaciones de 44 a 128 núcleos, con alrededor de 44 GB por núcleo. Como ocurre con la mayoría de los sistemas compartidos, cuanto mayor es la demanda, mayor es la espera de recursos.

El sistema 3Leaf marca un regreso a una arquitectura de nodo gordo para FSU. Durante la última década, la instalación de HPC contenía una serie de grandes computadoras SMP basadas en SGI Altix e IBM Power. Estos se han eliminado gradualmente a mediados de la última década y han sido reemplazados por clústeres de HPC. «El problema que encontramos con los sistemas más antiguos fue que era muy difícil encontrar una ruta de financiamiento para actualizar y mantener ese hardware a menos que se adquiriera con una subvención especial única», explica Wilgenbusch.

En la actualidad, la mayor parte de la infraestructura informática en la instalación HPC compartida es un gran clúster Dell PowerEdge (398 nodos) conectado a DDR InfiniBand. Se utilizan principalmente para códigos MPI tradicionales. Los investigadores universitarios también tienen acceso a un sistema Condor para trabajos de alto rendimiento que no dependen de un acoplamiento estrecho entre nodos. La adquisición del sistema 3Leaf le da a la estructura HPC esa dimensión adicional para las aplicaciones.

Wilgenbusch dice que su primera experiencia con el producto 3Leaf fue muy positiva. Una vez que los investigadores tienen acceso a un gran entorno consistente en caché SMP, la primera queja es que normalmente quieren más. A corto plazo, planea expandir el sistema actual a 192 núcleos y aproximadamente un terabyte de memoria.

Ese tamaño del sistema maximizaría la capacidad de agregación de la oferta actual de 3Leaf. La compañía planea desarrollar una versión basada en Intel Xeon basada en futuros procesadores «Sandy Bridge» en algún momento. Esta tecnología se ampliará hasta 32 nodos, cientos de núcleos y 64 TB de memoria.

Deberías compartir en tus redes sociales para que tus colegas lo vean

??? ? ? ???

Comparte