El almacenamiento HPC entra en una nueva era - Calendae | Informática, Electrónica, CMS, Ciberseguridad

El almacenamiento HPC entra en una nueva era

Hola y mil gracias por leerme. Te escribe Simón Sánchez y esta vez te voy a contar sobre El almacenamiento HPC entra en una nueva era

Hasta hace relativamente poco tiempo, los sistemas de almacenamiento HPC eran casi una ocurrencia tardía, una combinación de componentes del jurado ensamblados para apoyar a la estrella del espectáculo: una supercomputadora o un gran clúster informático.

Una solución de almacenamiento HPC heredada típica consistía en matrices RAID, archivadores de red o discos conectados directamente disponibles comercialmente. El problema es que estos simplemente se han reunido para cubrir un diseño de puntos en el pasado. Sin embargo, estas configuraciones no pueden proporcionar E / S paralelas de manera eficiente a miles de nodos de cómputo que ahora vemos comúnmente en instalaciones de sistemas HPC medianos a grandes. El «cuello de botella de E / S», la dificultad de mover las lecturas y escrituras más allá del controlador de interfaz de E / S de almacenamiento, se ha convertido en un gran problema. Por sí mismas, estas partes de almacenamiento ad hoc separadas no se han escalado de forma inherente para lograr las características deseadas, como un rendimiento lineal masivo que escala de terabytes a petabytes de capacidad de almacenamiento, junto con un único espacio de nombres consistente globalmente.

Todavía no es suficiente

El desarrollo de Luster® ha establecido los medios para resolver estos problemas: el sistema de archivos Luster tiene la arquitectura adecuada para ofrecer el rendimiento y la capacidad masivos requeridos, así como la capacidad de presentar un único espacio de nombres consistente globalmente. Donde las cosas van mal es en la implementación: el culpable es el uso continuo del enfoque ad hoc descrito anteriormente.

Desafortunadamente, la implementación del sistema de archivos Lustre usando una combinación de componentes separados de diferentes proveedores impacta los proyectos de HPC en forma de tiempo perdido, ineficiencia, gasto excesivo y pérdida de productividad. Para agravar los problemas causados ​​por la falta de interoperabilidad y compatibilidad entre componentes separados, sin herramientas de soporte y administración de extremo a extremo, los administradores de sistemas son los únicos que corrigen los errores. Además, los administradores de sistemas se enfrentan constantemente a problemas de optimización y condiciones de competencia intermitentes que resultan de la interacción de servidores, almacenamiento y software no integrados. Esto representa problemas inaceptables y, sin embargo, completamente evitables que impactan directamente en los resultados de una organización.

Hoy en día hay una tremenda explosión de Big Data comercial generado por industrias como las de ciencias de la vida, petróleo y gas, manufactura, defensa e informática técnica en general. Esto impulsa la demanda de garantía total de la solución, medida en almacenamiento HPC de grado industrial eficiente, confiable y rentable que puede manejar cantidades masivas de carga de trabajo sostenida de datos estructurados y no estructurados.

Archivado de próxima generación

Afortunadamente, el almacenamiento HPC está evolucionando para abordar estos desafíos. La industria está desarrollando sistemas de almacenamiento de escalamiento horizontal preintegrados y probados de próxima generación diseñados para una alta productividad y confiabilidad a bajo costo.

Estos sistemas se caracterizan por:

  • Escalabilidad eficiente y rentable mediante bloques de almacenamiento modular, que incluyen todo el hardware, software, red y sistema de archivos paralelos
  • Acceso rápido y simultáneo a los datos para una gran cantidad de usuarios que trabajan en colaboración
  • Alta solidez y resiliencia del sistema para garantizar una alta disponibilidad
  • La implementación del sistema más rápida y sencilla es posible gracias a las soluciones de rack probadas e instaladas en fábrica con una complejidad de cable significativamente reducida; las soluciones se implementan en horas, no en días o semanas.
  • Expansión del sistema simplificada con la adición de nodos de almacenamiento y procesamiento integrados llave en mano
  • Huella pequeña, configuración de alta densidad para reducir el espacio en el piso, la huella del rack y los requisitos de energía y enfriamiento
  • Gestión de extremo a extremo integrada eficiente a través de una única interfaz de usuario junto con soporte integrado de extremo a extremo

Una solución innovadora y eficiente

los ClusterStor™ de la familia de soluciones de almacenamiento escalables HPC, presentada en 2011, ofrece estas capacidades. ClusterStor está optimizado de disco a sistema de archivos creando la única solución de almacenamiento HPC verdaderamente diseñada de un solo proveedor. Los sistemas van desde ClusterStor 1500 para uso de clústeres departamentales hasta ClusterStor 9000, diseñado específicamente para las instalaciones de HPC y Big Data más grandes y rápidas del planeta.

Ningún otro sistema de almacenamiento HPC iguala la capacidad económica probada de ClusterStor para sostener de manera confiable el rendimiento de E / S del sistema de archivos Lustre más rápido disponible actualmente con la menor cantidad de hardware, que admite instalaciones desde decenas de terabytes hasta decenas de petabytes de datos.

La clave de la funcionalidad de ClusterStor es la arquitectura de software y hardware de almacenamiento escalable integrado de la solución. La solución de ingeniería de ClusterStor abarca elementos de almacenamiento informático distribuido de alto rendimiento que incluyen todo lo que necesita: desde el contenedor de disco y la plataforma informática de almacenamiento hasta el sistema operativo integrado, el sistema de archivos, la capa de protección de datos, la red y la interfaz de usuario avanzada. .

En el corazón de la arquitectura de almacenamiento escalable de ClusterStor se encuentra la Unidad de almacenamiento escalable (SSU). La SSU integra completamente lo que solían ser componentes de sistema de archivos, red y almacenamiento completamente separados en un solo bloque de construcción modular fácil de usar y de montaje en rack. La SSU funciona como una unidad de escala lineal que proporciona un nivel predecible de rendimiento y capacidad de almacenamiento de datos sin el desperdicio, el gasto y la demora asociados con los métodos heredados.

En general, el entorno operativo consolidado y resistente de ClusterStor de un único proveedor de soluciones aprovecha al máximo el rendimiento y las capacidades de escalado del sistema de archivos Luster al eliminar los problemas asociados con la implementación de componentes separados de diferentes proveedores. El enfoque de ClusterStor para el almacenamiento HPC aumenta la productividad al tiempo que reduce el TCO. El tiempo de actividad operativo y la disponibilidad de las aplicaciones se maximizan con el diseño integrado de alta disponibilidad de ClusterStor y el conjunto completo de servicios de administración distribuidos.

Preintegrada, probada y diseñada para una alta productividad y confiabilidad a un bajo costo, la familia ClusterStor proporciona soluciones de almacenamiento de clase empresarial diseñadas para la resiliencia, para aplicaciones de HPC y Big Data de grado industrial.

Afrontando el desafío

El auge del big data ha catapultado al almacenamiento HPC al centro de atención. Xyratex, una empresa de Seagate, con sus ofertas ClusterStor, ha asumido el desafío al crear una familia innovadora de dispositivos de almacenamiento diseñados específicamente para el entorno operativo de computación intensiva actual que son fáciles de usar, fáciles de administrar y proporcione los resultados más rápidos en cualquier escala.

Deberías compartir en tu Facebook para que tus colegas opinen

??? ? ? ???

Comparte