Pure Storage представила FlashBlade//EXA — новую платформу хранения данных для ИИ и HPC
Компания Pure Storage недавно анонсировала систему хранения данных под названием FlashBlade//EXA. По утверждению разработчиков, это самая производительная на текущий момент платформа, специально предназначенная для самых требовательных нагрузок искусственного интеллекта (ИИ) и вычислений высокой производительности (HPC).
В современных средах ИИ возникает необходимость в обработке данных различных типов — текстов, изображений и видео — одновременно на десятках тысяч ускорителей. Это требует оптимизации не только масштабирования производительности, но также эффективной работы с метаданными. FlashBlade//EXA обещает решить эти проблемы.
Платформа состоит из двух основных компонентов: Metadata Core и Data Node. Metadata Core может состоять из 1 до 10 шассе 5U, каждый из которых содержит десять blade-узлов с модулями DFM вместимостью от 37.5 Тбайт. XFM обеспечивает 16 подключений 400GbE. Data Node — это обычные x86-серверы с определёнными спецификациями, которые обеспечивают неограниченную масштабируемость.
Архитектура FlashBlade//EXA позволяет масштабировать ресурсы для обработки данных и метаданных независимо друг от друга. Это повышает производительность, надёжность и эффективность в крупномасштабных средах ИИ.
Система FlashBlade//EXA обеспечивает производительность свыше 10 Тбайт/с на операциях чтения в одном пространстве имён. Это позволяет значительно ускорить процессы обучения моделей ИИ и инференса, максимально используя возможности GPU-ускорителей. В результате организации могут сократить временные и финансовые затраты на решение ресурсоёмких задач.
В целом, анонсированная Pure Storage платформа хранения данных FlashBlade//EXA обещает стать мощным инструментом для решения сложных задач ИИ и HPC. Она обеспечивает оптимальное сочетание производительности, масштабируемости и эффективного управления метаданными. Это решение может быть особенно полезно для гиперскейлеров, которым нужны надёжные платформы хранения данных для работы с огромными объёмами данных.