Компания DataDirect Networks (DDN), специализирующаяся на платформах хранения данных для НРС-задач, анонсировала масштабируемую СХД Infinia, разработанную в сотрудничестве с Сандийскими национальными лабораториями (SNL) Министерства энергетики США.

Infinia — программно-определяемое многопротокольное решение с горизонтальным масштабированием, которое подходит для различных сценариев использования. Это могут быть сложные научные задачи, приложения ИИ, большие языковые модели и пр.

Узлами системы могут быть любые серверы с процессорами Intel, Arm или AMD. Говорится, что платформа Infinia может масштабироваться до сотен петабайт. Среди ключевых преимуществ решения разработчик называет простоту управления, высокую производительность и безопасность.

Источник изображения: DDN

Референсная аппаратная платформа представляет собой 1U-узел с 24-ядерным процессором AMD EPYC Genoa. Во фронтальной части предусмотрены отсеки для 12 накопителей SFF формата U.2 (NVMe) с возможностью горячей замены. Предусмотрены два сетевых порта 10GbE и порт 1GbE (все с разъёмами RJ-45), а также слота PCIe 5.0 x16 для HHHL-адаптеров, которые могут предложить до четырёх 200G-портов.

Источник изображения: DDN / StorageNewsletter

Шасси имеет габариты 680 × 450 × 44 мм и весит 22,9 кг. СХД оборудована двумя блоками питания мощностью 850 Вт с сертификатом 80 Plus Platinum. В системе воздушного охлаждения применяются шесть вентиляторов. Диапазон рабочих температур — от +10 до +35 °C.

Hitachi Vantara, «дочка» Hitachi Ltd., специализирующаяся на СХД, управлении данными и цифровых решениях, объявила на конференции SC23 о партнёрстве с Quobyte, занимающейся разработкой высокопроизводительных программно определяемых хранилищ. Цель альянса — создание долговечных масштабируемых решений для хранения данных с доступной ценой. Партнёрство включает и стратегическое сотрудничество в области маркетинга и взаимодействия с клиентами.

Как отмечено в пресс-релизе, интеграция интеллектуальной платформы данных Hitachi Vantara и передовой платформы хранения данных Quobyte «откроет новую эру управления данными, соответствующую меняющимся потребностям современных предприятий и сред HPC». «Объединяя наше мастерство управления данными с возможностями Quobyte в области хранения данных, мы не просто решаем проблемы управления данными, но и поднимаем операционную эффективность на новый уровень», — заявил представитель Hitachi Vantara.

Изображение: Quobyte

Сообщается, что благодаря партнёрству клиентам компаний будут предложены:

• Высочайшая надёжность: бесперебойная работа в сочетании с горизонтально масштабируемой производительностью, а также возможность добавлять и удалять оборудование без простоев в составе базовой функциональности;
• Функции корпоративного уровня: интуитивно понятное управление политиками, надёжные функции безопасности, простое управление, снимки, квоты, а также мультикластерность и многопользовательское окружение — всё с учётом жёстких требований сред HPC;
• Масштабируемая производительность с возможностью управления петабайтами данных и тысячами узлов;
• Доступность и дружественность: устранение разрыва между потребностью в хранилищах для HPC и удобными для пользователя решениями, что делает хранилище для HPC простым, надёжным и доступным с корпоративными функциями.
• Экономическая эффективность за счёт подхода Quobyte, ориентированного на ПО с использованием обычного оборудования, обеспечивающего значительное снижение совокупной стоимости владения (TCO) без ущерба для производительности или простоты управления;
• Клиентоориентированный подход.

В августе этого года израильская компания Xinnor, специализирующаяся на решениях для хранения данных, в том числе программного RAID для современных NVMe SSD, сообщила в ходе саммита Flash Memory Summit о мировом рекорде производительности, установленном с использованием ПО Xinnor xiRAID и 12-ти NVMe SSD Kioxia CM7-R (PCIe 5.0). На SC23 компания обновила рекорд.

На этот раз в тесте были задействованы сразу 24 накопителя Kioxia CM7-V (PCIe 5.0, NVMe). Каждый диск имеет скорость последовательного чтения 14 Гбайт/с и последовательной записи 6,75 Гбайт/с, а на случайных операциях производительность составляет 2,7 млн IOPS и более 600 тыс. IOPS соответственно.

При развёртывании множества таких SSD в системе первостепенное значение приобретает обеспечение надлежащей масштабируемости производительности и целостности данных. Xinnor выполнила тест на сервере Supermicro с двумя 64-ядерными процессорами AMD EPYC Genoa 9534 и 768 Гбайт RAM. Чтобы избежать узких мест, Xinnor создала две группы RAID 5 по 12 дисков так, что каждый массив находился в рамках одного NUMA-домена. Такая конфигурация обеспечивает наивысшую производительность и одновременно защиту данных в случае сбоя диска для каждого RAID, говорит Xinnor.

Изображение: Xinnor

Сообщается, что в последовательных рабочих нагрузках рекордные показатели (см. таблицу ниже) были достигнуты при использовании лишь 16 из 128 доступных ядер, а на случайных операциях xiRAID нагружал на 3–9 % лишь половину ядер. Низкая нагрузка на CPU и универсальность xiRAID, по словам компании, значительно упрощает развёртывание массивов и позволяет эффективно использовать имеющееся оборудование.

Xinnor также проверила работу в деградированном режиме, когда из массива RAID 5 «выпадает» один накопитель. Даже в этом случае производительность остаётся достаточно высокой: более 34 млн и 6 млн IOPS при произвольных чтении и записи соответственно, что эквивалентно 52 % и 75 % от нормальной производительности. При последовательных операциях доступа Xinnor зафиксировала производительность выше 70 % от нормальной.

Заодно Xinnor также протестировала ту же систему, создав 2 группы RAID 6 (2 × 10 + 2). При чтении производительность была сравнима с RAID 5: 64 млн IOPS и 310 Гбайт/с. При записи производительность была ниже: 5,2 млн IOPS и 128 Гбайт/с. Впрочем, по словам Xinnor, xiRAID быстрее, чем любое другое альтернативное решение RAID.

Компания Kioxia, по сообщению ресурса Blocks & Files, свернула проект KumoScale по разработке специализированного ПО для хранилищ данных. Выпуск новых версий не планируется, а новые лицензии на данный продукт предоставляться не будут. Поддержка текущих заказчиков сохранится.

KumoScale — это программный комплекс, нацеленный на максимизацию использования обычных NVMe-накопителей в дата-центрах. Платформа использует NVMe-oF (RDMA или NVMe/TCP) для формирования быстрых масштабируемых блочных хранилищ с низкой задержкой и позволяет управлять сотнями узлов хранения. Платформа обзавелась поддержкой Kubernetes, OpenStack, NVIDIA Magnum IO GPUDirect Storage (GDS) и т.д.

Одна из первых презентаций KumoScale (Изображение: Kioxia/Toshiba)

В уведомлении на сайте Kioxia говорится, что развивать платформу KumoScale после версии 3.22 не планируется. Для продукта теперь осуществляется только техническое обслуживание — компания намерена поддерживать существующих клиентов. Какие-либо комментарии по поводу своего решения Kioxia не даёт.

Платформа KumoScale начала создаваться в североамериканском подразделении Kioxia (тогда ещё Toshiba) в 2016 году. Со временем она обросла функциональностью, но, как отмечает Blocks & Files, дальнейшее развитие фактически сделало бы её прямым конкурентом продуктов, которые создают заказчики Kioxia.

Dell представила на конференции Dell Technologies World 2023 обновление Dell APEX, которое объединяет службы Microsoft Azure, Red Hat и VMware, и обеспечивает улучшенные управление и мобильность приложений и данных в рамках реализации так называемой стратегии «земля-облако» и «облако-земля». Dell также расширила портфолио услуг и подписок APEX.

С точки зрения подхода ground-to-cloud (от земли к облаку) Dell взяла за основу проект Project Alpine и превратила его в совершенно новый каталог продуктов под названием APEX Storage for Public Cloud, перенеся различные службы хранения в публичное облако.

Анонсированный новый сервис Dell APEX Cloud Platforms, по словам компании, представляет собой «портфель полностью интегрированных готовых систем, объединяющих инфраструктуру Dell, ПО и облачные операционные стеки, которые обеспечивают согласованные мультиоблачные операции путём переноса облачных моделей работы в локальные и периферийные среды». На практике это означает, что можно управлять данные и рабочими нагрузками в разных облаках и средах и бесшовно перемещать данных между разными платформами.

Облачные службы, разработанные в сотрудничестве с Microsoft, Red Hat и VMware, включают:

• Dell APEX Cloud Platform for Microsoft Azure, предлагает интеграцию с Microsoft Azure и Arc для формирования и управления единой инфраструктурой, размещённой локально, на периферии или в облаке Azure.
• Dell APEX Cloud Platform for Red Hat OpenShift, призвана упростить разработку приложений на основе контейнеров и управление ими благодаря полной интеграции программного обеспечения и автоматизации с гибридной облачной платформой приложений на базе Kubernetes.
• Dell APEX Cloud Platform for VMware, призвана обеспечить возможность развёртывания платформы облачной виртуализации vSphere в программно-определяемом хранилище Dell.

Компания заявила, что решение Dell APEX Storage for Public Cloud позволит клиентам запускать службы на облачных платформах и безопасно хранить свои данные в инфраструктуре Dell.

Также сообщается, что Dell APEX Block Storage for Amazon Web Services (AWS), Dell APEX Block Storage for Microsoft Azure и Dell APEX File Storage for AWS, разработанные в рамках Project Alpine, сочетают в себе производительность, масштабируемость и устойчивость к киберугрозам хранилищ Dell корпоративного класса с экономикой публичного облака. Следует добавить, что эти решения дополняют службу Dell Apex Protection Storage, которая, по словам компании, уже обслуживает 17 Эбайт данных клиентов в облаках.

Также сообщается об усовершенствованиях Dell APEX Console, которые упрощают обслуживание мультиоблачных хранилищ и кластеров Kubernetes.

• Dell APEX Navigator for Multicloud Storage — SaaS-решение, которое позволяет централизовать, упростить и защитить управление хранилищами Dell APEX Block and File Storage.
• Dell APEX Navigator for Kubernetes — SaaS-решение, которое упрощает управление хранилищем Kubernetes.

Кроме того, Dell сообщила о появлении ещё двух решений:

• Dell APEX Compute, которое предоставляет масштабируемые, безопасные вычислительные ресурсы bare metal в ЦОД, на периферии или в колокейшн-объекте. Клиенты смогут задействовать виртуализированные среды или среды на основе контейнеров, установив гипервизор или операционную систему по своему выбору.
• Dell APEX PC-as-a-Service (PCaaS) поможет компаниям развёртывать новейшие клиентские решения с прогнозируемыми затратами. Организации смогут с его помощью гибкие предложения на срок от 1 до 5 лет с возможностью масштабирования по мере необходимости.

На мероприятии было также объявлено о новом многостороннем сотрудничестве Dell и Databricks в рамках которого локальными данными в корпоративных платформах хранения данных Dell можно будет управлять и использовать посредством Databricks Lakehouse.

На мировом рынке программно определяемых хранилищ данных (SDS), согласно отчёту Enterprise Apps Today, в ближайшие годы ожидается устойчивый рост. Основными драйверами отрасли названы гибкость масштабирования, снижение затрат на обслуживание, удобство интеграции с облачными платформами и возможность централизованного управления независимо от физического расположения устройств.

Концепция SDS предусматривает отделение сервисов хранения данных от оборудования.  По сравнению с обычными архитектурами такие решения обладают более высокими показателями гибкости. Подход обеспечивает бесшовную интеграцию нескольких типов хранилищ, таких как блочные, файловые и объектные, в рамках единого интерфейса управления.

Источник изображения: Enterprise Apps Today

По оценкам, объём глобального SDS-рынка в 2022 году составил приблизительно $17,85 млрд. В период с 2023 по 2033 год прогнозируется показатель CAGR (среднегодовой темп роста в сложных процентах) на уровне 24,99 %. В результате, размер отрасли в денежном выражении достигнет $106,33 млрд в 2030 году и $207,62 млрд в 2033-м.

В 2023 году, полагают аналитики, затраты в сегменте SDS составят приблизительно $22,31 млрд. В 2024-м этот показатель может подняться до $27,89 млрд, а в 2025-м — до $34,86 млрд. Северная Америка является ведущим рынком SDS-решений, что обусловлено растущим внедрением облачных платформ, аналитики больших данных и технологий виртуализации. В Европе также наблюдается увеличение спроса на SDS-платформы.

Вместе с тем выделяются и несколько сдерживающих факторов. Среди них названы вопросы обеспечения безопасности, возможная несовместимость с существующей инфраструктурой хранения, отсутствие стандартизации и ограниченная осведомлённость компаний о новых решениях.

Китайская компания Lenovo анонсировала DAS ThinkSystem D4390, предназначенную для создания программно определяемых СХД высокой плотности. Новинка, как утверждается, подходит для HPC-сервисов, объектного хранения, частных и гибридных облаков, аналитики, а также резервного копирования и архивирования больших объёмов информации.

Источник изображения: Lenovo

Допускается применение накопителей SAS HDD, NL-SAS HDD и SAS SSD для обеспечения высокой производительности и большой ёмкости. В корпусе предусмотрены посадочные места для 90 устройств LFF с возможностью горячей замены (поддерживаются 12 модулей SAS SSD объёмом до 800 Гбайт каждый). К примеру, могут применяться 18-Тбайт жёсткие диски NL-SAS со скоростью вращения шпинделя 7200RPM: в этом случае суммарная «сырая» ёмкость достигает 1,62 Пбайт. Могут быть организованы массивы RAID 0/1/10/5/50/6/60 или JBOD. Допускается использование хост-контроллеров ThinkSystem RAID 940-8e PCIe 12Gb, ThinkSystem 440-16e SAS/SATA PCIe Gen4 12Gb HBA и ThinkSystem 440-8e PCIe 12Gb SAS/SATA HBA.

Источник изображения: Lenovo

Доступны четыре 24-Гбит/с порта Mini-SAS HD (SFF-8644). Возможно последовательное соединение шасси для масштабирования СХД. Шасси оборудовано четырьмя блоками питания 80 Plus Titanium мощностью 1300 Вт каждый с возможностью горячей замены и резервированием. Система воздушного охлаждения включает пять 80-мм вентиляторов с горячей заменой. Диапазон рабочих температур — от +5 до +35 °C. 4U-шасси имеет габариты 175,3 × 446,0 × 1080,0 мм. Минимальная масса составляет 45 кг. На новинку предоставляется трёхлетняя гарантия.

Современные системы искусственного интеллекта оперируют громадными объёмами данных, и что немаловажно, требуют загрузки этих данных с высокой скоростью. Поэтому компания PEAK:AIO представила новую версию платформы AI Data Server, предназначенного специально для подобного класса задач.

Обновлённая платформа, по словам компании-разработчика, вдвое производительнее предыдущего варианта и обеспечивает линейную производительность на уровне 80–120 Гбайт/с при использовании единственного узла хранения данных. Стоимость владения при этом снижена на 70%. Такая производительность достигается за счёт сочетания технологий GPUDirect и NVMe-oF.

Источник изображений здесь и далее: PEAK:AIO

Платформа AI Data Server относится к программно определяемым решениям, она разработана PEAK:AIO в сотрудничестве с крупными производителями серверного оборудования, такими, как Dell, Supermicro и GIGABYTE. В роли поставщика выступит компания PNY Technologies.

Технические характеристики новой платформы AI Data Server

Новый вариант базируется на процессорах последнего поколения, использует шину PCI Express 5.0 и сетевые решения NVIDIA ConnectX-6/7, а также накопители с интерфейсом NVMe. Базовая конфигурация имеет форм-фактор 2U и может располагать полезным объёмом от 50 до 700 Тбайт, а обслуживать при этом такая СХД может до 10 вычислительных серверов вроде NVIDIA DGX A100.

Стоимость новой платформы PEAK:AIO будет начинаться с отметки $8 тысяч за один узел хранения данных. В настоящее время новинка уже проходит бета-тестирование, а массовые поставки начнутся во втором квартале текущего года.

Входящая в «ИКС-Холдинг» группа YADRO сообщила о закрытии сделки по приобретению 100-% доли в разработчике решений для систем хранения данных (СХД) RAIDIX (ООО «Рэйдикс») у его основателя и структуры «Ростелекома». Последняя в 2016 году приобрела 30-% долю в компании за 100 млн руб. Стоимость и финансовые условия сделки с YADRO не разглашаются, но по оценкам информированного источника «Коммерсанта» её стоимость составляет 500–600 млн руб.

Как указано в пресс-релизе YADRO, сделка позволит дополнить продуктовый портфель предложением для сегментов начального уровня (entry-level midrange) и программно-определяемых СХД. Предполагается, что это поможет YADRO выйти в лидеры в данном сегменте к 2024 году. На счету основанной в 2009 году RAIDIX множество успешных проектов в России и за рубежом. Среди её партнёров и клиентов российские и иностранные производители вычислительной техники.

Фото: YADRO

Как сообщается, гарантийным и сервисным обслуживанием по заключённым договорам и продуктам RAIDIX будет заниматься сервисная служба YADRO. Компания также отметила, что продолжит развивать флагманскую линейку СХД корпоративного класса TATLIN, представленную в нескольких сегментах, включая унифицированные системы хранения среднего уровня. Ранее компания также объявила о планах по выпуску объектных СХД.

По итогам последнего квартала прошлого года, согласно данным IDC, YADRO лидировала на российском рынке СХД по объёму поставленных ёмкостей, а по выручке занимала второе место. На серверном рынке России компания тогда же занимала третье место по количеству поставленных единиц оборудования. По итогам 2021 года YADRO нарастила выручку на 26 %, до 33 млрд руб. (с НДС).

Несмотря на активное продвижение облачных концепций, классические on-premise ЦОД всё ещё остаются важнейшей частью ИТ-инфраструктуры. Согласно отчёту Spiceworks Ziff Davis о тенденциях в мире аппаратного обеспечения, который приводит издание Blocks & Files, доля таких ЦОД сократилась с 33 % в 2020 году до 30 % сегодня. Ожидается, что к 2023 году на публичные облака придётся уже 50 % нагрузок вместо нынешних 40 %.

Однако можно также предположить, что текущие мировые события негативно отразятся на доверии к облачным системам. Более того, аппаратные компоненты до сих пор составляют большую часть затрат, отводимых компаниями на ИТ-инфраструктуру. Классические серверы никуда не исчезнут, разве что повысится степень интеграции с облачными решениями.

Что касается хранения данных, то доля SATA SSD в корпоративных серверах, согласно отчёту, составила 55 %, в течение двух лет ожидается прирост ещё на 14 %. 40 % используют более специализированные накопители SAS. На долю NVMe пока приходится лишь 37 %, но темп роста впечатляющий — в 2019 году лишь 19 % бизнес-пользователей применяли такие накопители, а в течение двух лет эта цифра вырастет до 54 %, считает SWZD. Особенно быстро растёт популярность NVMe в компаниях с числом сотрудников более 500.

Флеш-массивы также активно завоёвывают жизненное пространство: с 2019 года их доля возросла с 14 % до 24 %, а прогнозы обещают долю в 44 % в течение тех же двух лет. Как и с NVMe, наиболее активно осваивают All-Flash СХД достаточно крупные компании, поскольку такие решения, с одной строны, достаточно недешёвы, а с другой — у малого бизнеса редко встречаются нагрузки, требующие такой производительности.

Существенно возросла и доля программно определяемых СХД (39 %), средств автоматизации развёртывания и управления серверами (37 %), программно определяемых сетей (36 %) и интеграций с публичными облаками (36 %). А 34 % опрошенных SWZD компаний даже перенесли основные рабочие нагрузки в облако. Популярность такой интеграции будет лишь расти, и к концу 2023 года большинство компаний будут использовать гибридные платформы.

Как и в случае аппаратной части, зависимость от размера бизнеса тут аналогична — более крупные компании активнее внедряют новые технологии. Это также относится к подписочной модели использования в сервисах Dell APEX, HPE GreenLake, Lenovo TruScale и др.. Полностью с отчётом SWZD за 2022 год можно ознакомиться здесь.