Presentamos IBM SpectrumAI con NVIDIA™ DGX
Los proyectos de Inteligencia Artificial, Aprendizaje Automático y Aprendizaje Profundo (artificial intelligence, machine learning, deep learning o AI/ML/DL) están ocurriendo en todas las industrias y en todos los equipos de investigación del mundo. Según IDC[1], para 2019, el 40% de las iniciativas de transformación digital utilizarán los servicios de AI; para 2021, el 75% de las aplicaciones comerciales de empresas utilizarán AI, más del 90% de los consumidores interactuarán con robots de asistencia al cliente, y más del 50% de los nuevos robots industriales aprovecharán la AI.
Las empresas están invirtiendo en la contratación de científicos de datos y en la compra de potentes servidores basados en GPU para desarrollar estos modelos AI / ML / DL y generar un valor comercial significativo a partir de océanos de datos. Pero en el centro del trabajo están los datos y la eficiencia del data pipeline de AI, desde la preparación de los datos hasta el conocimiento que se extrae de ellos.
La elección del almacenamiento es fundamental para el éxito. Los científicos de datos necesitan acceso a grandes cantidades de datos a los que se pueda acceder fácilmente y que admitan la amplia variedad de herramientas de datos que utilizan. El almacenamiento compartido multiprotocolo de alto rendimiento para las últimas herramientas de inteligencia artificial y datos, como TensorFlow, PyTorch y Spark, brinda a los equipos de datos un acceso más rápido a más datos con menos complejidad, menores costos y mejor confiabilidad.
Para impulsar la productividad del desarrollo de la inteligencia artificial y optimizar el data pipeline, IBM está introduciendo IBM Spectrum AI con NVIDIA DGX. Esta solución convergente combina el sistema de archivos scale-out de almacenamiento definido por software aclamado por la industria, IBM Spectrum Scale en sistemas all-flash con NVIDIA DGX-1. Proporciona el rendimiento más alto en cualquier sistema convergente probado[2], con la capacidad única de soportar unidades de ciencia de datos en crecimiento.
“La estrategia de IBM es hacer que AI / ML / DL sea más accesible y tenga mejor desempeño,” dijo Ashish Nadkarni, Vicepresidente de Grupo, Sistemas, Plataformas y Tecnologías de Infraestructura de IDC. “IBM SpectrumAI con NVIDIA DGX está diseñado para proporcionar una plataforma probada y compatible. Para aquellos que eligen los servidores NVIDIA DGX para los marcos de código abierto y las plataformas GPU de alto rendimiento, IBM Spectrum Scale puede agregar almacenamiento inteligente, escalable, seguro, rico en metadatos, integrado en la nube, multiprotocolo, de alto rendimiento y eficiente en una solución fácil de implementar de sus socios comerciales de primer nivel.”
IBM SpectrumAI con NVIDIA DGX es el motor y el cimiento de una infraestructura de datos de AI en la que las empresas pueden desarrollar sus servicios de ciencia de datos y ofrecer un valor empresarial poderoso desde sus aplicaciones de AI. Una solución que permite a las empresas comenzar, que puede respaldar el flujo de datos de AI desde la preparación de datos hasta la capacitación, la inferencia y el archivo. Probado, sintonizado y entregado exclusivamente a través del canal conjunto de revendedores de IBM y NVIDIA, IBM SpectrumAI con NVIDIA DGX proporciona la infraestructura y el software robustos listos para implementar que los proyectos de AI necesitan para aumentar la escala rápidamente y crecer con confianza.
“Como asociado IBM Platinum y NVIDIA Deep Learning con un enfoque de stack completo para asociarse con clientes en torno a la transformación digital basada en datos, Mark III ha visto de primera mano cuán impactante puede ser AI en transformar fundamentalmente la experiencia del usuario y descubrir perspectivas más profundas de datos históricos y en tiempo real de lo que jamás se hubiera creído posible,” comentó Stan Wysocki, presidente de Mark III Systems. “A medida que AI se abre camino en empresas e instituciones, estamos entusiasmados con las posibilidades que ofrece la combinación de IBM SpectrumAI con NVIDIA deep learning para ayudar a nuestros clientes a crear, lanzar y escalar sus aplicaciones y servicios impulsados por AI en torno a una sólida plataforma empresarial diseñada para el futuro.”
Por ser una solución completa de sistemas y software, IBM Spectrum AI con NVIDIA está diseñada para la productividad de la ciencia de datos y la simplicidad de la tecnología informática.
IBM Spectrum Scale es una opción galardonada[3] para proyectos de inteligencia artificial y computación de alto rendimiento porque se implementa fácilmente, posee un alto desempeño y proporciona un escalamiento único e inteligente. En una solución convergente con NVIDIA DGX, proporciona la máxima flexibilidad de datos con la agilidad de desarrollador para impulsar la productividad.
Basado en el almacenamiento definido por software, IBM SpectrumAI con NVDIA DGX se puede configurar para satisfacer sus requisitos de negocio actuales y crecientes. IBM Spectrum Scale puede implementarse en configuraciones desde un único IBM Elastic Storage Server (ESS), para admitir algunos servidores NVIDIA DGX-1, hasta un rack completo de 9 servidores con 72 GPU NVIDIA V100 Tensor Core para configuraciones de varios racks. A diferencia de las matrices de almacenamiento tradicionales, el IBM Spectrum Scale altamente paralelo se escala prácticamente de forma lineal con los requisitos de rendimiento de datos de lectura aleatoria para alimentar múltiples GPU. El resultado es una solución que ofrece un rendimiento de carga de trabajo de AI desde un almacenamiento compartido comparable al de un disco RAM local. En un solo bastidor, IBM SpectrumAI con NVIDIA DGX ha demostrado 120 GB / s de rendimiento de datos con soporte[4] para múltiples usuarios y múltiples modelos simultáneamente.
El stack de software NVIDIA DGX está diseñado para maximizar el rendimiento de entrenamiento acelerado por GPU e incluir el nuevo marco RAPIDS para acelerar el flujo de trabajo de la ciencia de datos. La adopción de nuevos marcos AI se simplifica mediante el modelo de contenedor, soportado por el repositorio de contenedores NVIDIA NGC de aplicaciones optimizadas de GPU.
“Nuestros clientes están buscando ampliar su infraestructura de ciencia de datos para ayudar a resolver los desafíos de las implementaciones de datos de AI,” comentó Charlie Boyle, director senior de sistemas DGX en NVIDIA. “La potencia de NVIDIA DGX-1 acelerada por GPU, combinada con la tecnología de almacenamiento de IBM Spectrum Scale, brinda a los científicos de datos una solución llave en mano que reúne el procesamiento informático líder en la industria y el almacenamiento de alto rendimiento con resultados probados”.
Actualizado para AI y flash, IBM Spectrum Scale proporciona la flexibilidad para adaptarse a la línea de datos extendida para ayudar a las organizaciones a cumplir con sus requisitos de rendimiento, economía y gobernabilidad de datos. Suministrado en IBM SpectrumAI como una solución integrada all-flash, también puede proporcionar servicios de almacenamiento a través de diferentes opciones, incluida la nube pública de AWS. IBM Spectrum Scale puede compartir datos con IBM Cloud Object Storage y cinta con servicios de metadatos compartidos proporcionados por IBM Spectrum Discover.
“Las mismas innovaciones de almacenamiento que impulsan las supercomputadoras más rápidas e inteligentes del mundo ahora están disponibles en una solución convergente con NVIDIA. Integrado por nuestros socios de canales conjuntos, IBM SpectrumAI con NVIDIA DGX puede ayudar a nuestros clientes a comenzar rápido y aumentar sus proyectos de inteligencia artificial, aprendizaje automático y aprendizaje profundo,” señaló Sam Werner, vicepresidente de administración de almacenamiento definido por el software de IBM.”
IBM Storage ha desarrollado las arquitecturas de referencia y los sistemas convergentes que nuestros clientes necesitan con configuraciones equilibradas que pueden ofrecer rendimiento y eficiencia. Hoy en día, los científicos de datos pueden comenzar poco a poco, pero los datos siempre crecerán. Al elegir el punto de partida correcto, las organizaciones pueden construir un flujo de datos de AI cuyo valor y eficiencia aumenten con los volúmenes de datos.
IBM SpectrumAI con NVIDIA DGX es la plataforma de ciencia de datos para desarrollar y entregar nuevas aplicaciones AI / ML / DL, desde la preparación de datos hasta la capacitación, la inferencia y la visualización. Esta solución para empresas ofrece una implementación rápida de plug-in / power-up, con un rendimiento innovador. IBM SpectrumAI con NVIDIA DGX integra las últimas innovaciones en computación AI, y el almacenamiento y la red de alto rendimiento requeridos para proporcionar una ruta rápida a las perspectivas, con capacidad para múltiples proyectos a lo largo del ciclo de vida del desarrollo, respaldados por un modelo de soporte de canal simplificado que mantiene en funcionamiento las cargas de trabajo de inteligencia artificial de los clientes.
IBM SpectrumAI con NVIDIA DGX es el último agregado a la serie de infraestructura de Sistemas IBM para proyectos de inteligencia artificial. Para ver más información sobre AI Data Pipeline, lea el artículo de Denver Hopkins Construir el AI Data Pipeline, o visite las páginas web de IBM Systems AI o la página web de IBM SpectrumAI con NVIDIA DGX.
[1] Fuente: IDC TECHNOLOGY SPOTLIGHT Auspiciado por: IBM #US43977818
[2] Desempeño de prueba de productividad de datos FIO de cargas de trabajo AI 120GB/s comparada con los resultados propios informados por otros asociados comerciales NVIDIA RA, https://www.nvidia.com/en-us/data-center/dgx-reference-architecture/
[3] Solución multipremiada. Los premios incluyen: 2017 Flash Memory Summit “Most Innovative Flash Memory Business Application” y HPCwire Reader’s Choice Awards 2018.
[4] Prueba de laboratorio IBM de IBM Spectrum Scale en 3 arrays NMVe con 4k lecturas aleatorias, impulsada por FIO en 9 sistemas NVIDIA DGX-1 conectados con Mellanox EDR Infiniband