SC13 destaca tres tendencias principales - Calendae | Informática, Electrónica, CMS, Ciberseguridad

SC13 destaca tres tendencias principales

Hola y mil gracias por leerme. Yo soy Simón Sánchez y hoy te voy a contar sobre SC13 destaca tres tendencias principales

Recopilando mis pensamientos después de una conferencia de supercomputadoras emocionante y esclarecedora en Denver, quiero discutir algunas de las tendencias clave y los aspectos más destacados observados. La conferencia anual es siempre un hervidero de anuncios de productos y este año, el vigésimo quinto consecutivo, no fue la excepción. Hay muchos artículos que cubren los anuncios clave, por lo que quiero centrarme en algunos de los temas generales.

Big Data y Hadoop

Como era de esperar, Big Data, la palabra de moda del año en la industria, se filtró al mundo de la supercomputación y salió con toda su fuerza en SC13, en stands y en conversaciones. Los desafíos que enfrenta la tecnología de big data, como Hadoop, son muy similares a los que ha enfrentado la comunidad HPC durante décadas. Sin embargo, el nuevo concepto con plataformas como Hadoop es cambiar el cálculo a los datos y no al revés. Genial en teoría, sin embargo, existen algunas limitaciones serias con Hadoop cuando se aplica a cargas de trabajo típicas de HPC. Para empezar, Hadoop ejecuta JVM en yin yang, por lo que no es apropiado para cargas de trabajo de alta productividad detalladas. En segundo lugar, HDFS (el sistema de archivos distribuidos) tiene graves limitaciones, especialmente con archivos más pequeños. Sin embargo, es bastante fácil conectar otros sistemas de archivos de alto rendimiento como Gluster o Lustre, como demostraron Intel y Cray, y este ha sido sin duda un enfoque común observado en SC13. Algunas de las implementaciones más compatibles con HPC utilizan el administrador de recursos YARN en Hadoop 2, algunas ejecuciones de trabajos que no son de MapReduce y el sistema de archivos Lustre, que no deja mucho de Hadoop atrás …

Hadoop es un martillo excelente y muy de moda en esto. Seguro que puedes martillar los tornillos, pero no es muy elegante. Tengo la impresión de que muchos están tratando de convertir sus tornillos en clavos para poder subirse al vagón.

Nube

En SC11 hace dos años en Seattle, la nube apenas se mencionó una vez. En Salt Lake City, el año pasado, hubo una cantidad significativa de conversaciones sobre la nube y HPC, pero no muchas en la sala. Este año hubo un aumento en las conversaciones nuevamente, pero además de eso, todos los demás expositores estaban hablando de la nube de alguna forma o forma. Claro, se debió en gran parte a los ingenuos intentos de marketing de limpiar algunas líneas de productos en peligro, pero la cuestión es que la nube y la HPC son compañeros de cama indiscutibles. Ahora vemos hardware más especializado que se adapta mejor a las capacidades de las cargas de trabajo de HPC en muchas de las principales nubes públicas, incluida AWS con sus nuevas instancias C3 con «redes avanzadas» que presumiblemente admiten una latencia más baja y, por supuesto, Windows Azure y su hardware HPC basado en InfiniBand. Las nubes enteras como las de IBM Softlayer y el soporte de OpenStack también se están volviendo más populares, lo que resuelve muchos de los problemas de rendimiento que la «resistencia a la nube» sigue teniendo.

Exaescala

Una vez más se ha hablado mucho de la exaescala y de la empinada montaña de desafíos que nos esperan para alcanzar este importante hito. Cuando se reduce, la exaescala requerirá un paralelismo de más de mil millones de núcleos, o más, asumiendo que el consumo de energía continuará reduciendo las velocidades del núcleo. A medida que el hardware continúa avanzando rápidamente con el anuncio de muchos avances; NVIDIA con su nueva tarjeta Tesla X40 e Intel, su última encarnación de Xeon Phi llamada Knights Landing, es el software para soportar el nivel requerido de paralelismo que sigue siendo el verdadero desafío.

Con todo, otro gran SC. Los organizadores hacen un trabajo increíble con esta conferencia. El programa técnico es fantástico y los expositores montan un gran espectáculo. ¡No puedo esperar a ver qué progreso se logrará en los próximos 12 meses!

Puedes compartir en tus redes sociales para que tus amigos lo lean

??? ? ? ???

Comparte