Bright simplifica la explosión de la nube con una planificación basada en datos - Calendae | Informática, Electrónica, CMS, Ciberseguridad

Bright simplifica la explosión de la nube con una planificación basada en datos

Hola y mil gracias por leerme. Te escribe Simón Sánchez y esta vez te voy a contar sobre Bright simplifica la explosión de la nube con una planificación basada en datos

Bright Computing, un proveedor de software de gestión de clústeres y nube, anunció que ya está disponible Administrador de clústeres brillante 6.0 con funciones avanzadas de explosión en la nube. La solución de administración de clústeres revisada se anunció por primera vez en SC11, pero durante la conferencia, la compañía se dio cuenta de que había una característica que solo necesitaban agregar, incluso si eso significaba retrasar el lanzamiento, y esa característica es la programación basada en datos.

Matthijs van Leeuwen, director ejecutivo de Bright Computing, explica que esta función no fue fácil de implementar, pero al hablar con los clientes se dieron cuenta de que el valor era significativo. Su decisión se solidificó durante una conversación con Amazon que tuvo lugar en SC11, cuando el proveedor líder en la nube les dijo que tal herramienta sería el «Santo Grial de Cloud Burst».

Bright Cluster Manager listo para la nube, así somos inicialmente cubierto en noviembre, admite dos escenarios de nube diferentes. El primero, denominado Cluster On-Demand, permite al usuario crear un clúster completo y autónomo dentro de la nube de Amazon. El segundo, conocido como Cluster Extension, es la ruta de explosión de la nube. Permite a los clientes agregar capacidad a su clúster local existente al expandirse a la nube de Amazon. Para el usuario, aparecen recursos dispares y se administran como un clúster unificado, mientras que Bright Cluster Manager descarga gran parte de la complejidad.

Un componente clave de la solución de explosión en la nube de Bright es la programación basada en datos. El CEO explica que antes de esta nueva función, cuando el usuario quería enviar un trabajo a los nodos de la nube, tendría que monitorear personalmente todas las etapas de la transferencia de datos: llevar los datos a la nube, enviar el trabajo y esperar a que se mueva hacia arriba. cola, luego ejecútelo y espere los resultados, antes de transferir manualmente los datos a su estación de trabajo o nodo raíz local (y supervise ese proceso también).

Baste decir que ha habido mucha actividad manual y seguimiento de la transferencia de datos y mucha espera y comprobación.

Lo que Bright ha hecho posible, según van Leeuwen, son transferencias de datos programadas y totalmente automatizadas para la gestión de la carga de trabajo. En este punto, cuando el usuario envía su trabajo de procesamiento, especifica qué conjuntos de datos se van a transferir y la ubicación de los archivos de entrada y salida. A partir de ese momento, Bright Cluster Manager se encarga de todas estas solicitudes. Toma los datos, comienza a transferirlos, rastrea la transferencia, luego sigue el progreso del trabajo en la cola y se asegura de que el trabajo no se ejecute hasta que todos los datos estén disponibles. Cuando se completa el trabajo, Bright Cluster Manager transfiere los resultados a la carpeta especificada.

A medida que los conjuntos de datos crecen, pero siguen siendo de tamaño adecuado para la explosión de la nube, la programación consciente de los datos ahorra tiempo y dolores de cabeza, señala van Leeuwen. «Supongamos que tiene un conjunto de datos que tarda varias horas o una noche entera en transferirse; como usuario, no es necesario que configure una alarma para levantarse en medio de la noche y verificar si sus datos se han transferido para poder finalmente comience su trabajo. Bright se encarga de eso «, dice.

En anuncio oficialSteve Conway, vicepresidente de investigación de IDC para HPC en IDC, señala que mover y administrar datos son barreras importantes para usar HPC en la nube.

«Los problemas de latencia en la nube pueden dificultar la tarea de garantizar que los datos correctos estén en su lugar cuando las aplicaciones deben ejecutarse en la nube y que los datos se devuelvan oportunamente después», dice.

“Bright aborda este desafío diseñando una planificación sensible a los datos directamente en la capacidad de explosión en la nube de la empresa. Este enfoque integrado podría facilitar que las aplicaciones HPC tradicionales aprovechen la computación en la nube «.

Además del componente de planificación sensible a los datos, hay una serie de otras mejoras en esta versión, incluidas las mejoras de interconexión; la incorporación de openlava, la versión de código abierto de LSF, al conjunto preintegrado de administradores de carga de trabajo; y soporte completo para CUDA 4.1. Esta versión también permite a los clientes cargar Bright en su instalación de Linux existente, sin interrumpir sus operaciones.

Como herramienta de explosión en la nube, Bright admite todas las instancias de Amazon Web Services por igual. El CEO señaló que no todos los proveedores de servicios de gestión de la nube pueden hacer esta afirmación. Las instancias de HPC de Amazon, Cluster Compute y Cluster GPU, se basan en la virtualización basada en Hardware Virtual Machine (HVM) en lugar de en técnicas de paravirtualización y, por lo tanto, son más difíciles de trabajar. Bright se encarga de la complejidad adicional y el CEO aconseja a los usuarios potenciales que se aseguren de que el proveedor seleccionado admita el nivel de instancia requerido.

Bright también ayuda a los usuarios a aprovechar los posibles ahorros de costos de Instancias de spot de Amazon, capacidad EC2 no utilizada que se vende a precio reducido. Como parte de su funcionalidad de administración de datos, Bright Cluster monitoreará cuando las instancias puntuales estén disponibles para que el usuario ya no tenga que supervisar el proceso.

Al igual que con Amazon, cuando se trata de usar Bright Cluster en la nube, solo paga por lo que usa. El precio es por horas. Van Leeuwen comenta: “Todos los Bright Cluster Manager que se proporcionan están habilitados para la explosión de la nube y todo lo que paga son las horas de uso. Si ya tiene un clúster de administración de Bright Cluster de, digamos, 16 nodos, y para esa fecha límite importante en el año en que necesita 500 nodos en una semana, solo paga por usarlo durante ese tiempo. «

Para los clústeres en las instalaciones, la compañía ofrece una licencia perpetua, válida para siempre, o los clientes pueden comprar una suscripción, que se puede renovar anualmente.

Bright también admite la explosión en los nodos locales, lo que significa que los usuarios pueden usar nodos de repuesto o inactivos de su propio departamento o quizás del departamento de un colega. «Puede agregarlos a su clúster, registrarlos con nuestro servidor en constante expansión que rastrea el tiempo usado y luego pagar solo por el tiempo usado», señala van Leeuwen.

Mientras Bright está implementando la capacidad de explosión en la nube con el entorno de Amazon EC2, el código subyacente se ha diseñado y escrito con la capacidad de agregar más nubes públicas, y la empresa persigue activamente ese objetivo. La explosión de nubes privadas también está en su radar. Desde un punto de vista tecnológico, esto debería ser relativamente sencillo, explica el CEO, especialmente si se ejecuta con una solución de nube privada compatible con la API de Amazon EC2, como Eucalyptus, OpenStack y CloudStack.

Bright está viendo mucho interés en sus capacidades de explosión en la nube por parte de las compañías farmacéuticas, las compañías de genómica y el sector del petróleo y el gas, que según el CEO tiene importantes desafíos de datos. Aunque la disponibilidad general comienza hoy, la compañía ya tiene algunos usuarios beta y comenzó a realizar envíos a clientes selectos la semana pasada.

Recuerda compartir en tus redes sociales para que tus amigos opinen

??? ? ? ???

Comparte