Китайская компания Lenovo анонсировала DAS ThinkSystem D4390, предназначенную для создания программно определяемых СХД высокой плотности. Новинка, как утверждается, подходит для HPC-сервисов, объектного хранения, частных и гибридных облаков, аналитики, а также резервного копирования и архивирования больших объёмов информации.

Источник изображения: Lenovo

Допускается применение накопителей SAS HDD, NL-SAS HDD и SAS SSD для обеспечения высокой производительности и большой ёмкости. В корпусе предусмотрены посадочные места для 90 устройств LFF с возможностью горячей замены (поддерживаются 12 модулей SAS SSD объёмом до 800 Гбайт каждый). К примеру, могут применяться 18-Тбайт жёсткие диски NL-SAS со скоростью вращения шпинделя 7200RPM: в этом случае суммарная «сырая» ёмкость достигает 1,62 Пбайт. Могут быть организованы массивы RAID 0/1/10/5/50/6/60 или JBOD. Допускается использование хост-контроллеров ThinkSystem RAID 940-8e PCIe 12Gb, ThinkSystem 440-16e SAS/SATA PCIe Gen4 12Gb HBA и ThinkSystem 440-8e PCIe 12Gb SAS/SATA HBA.

Источник изображения: Lenovo

Доступны четыре 24-Гбит/с порта Mini-SAS HD (SFF-8644). Возможно последовательное соединение шасси для масштабирования СХД. Шасси оборудовано четырьмя блоками питания 80 Plus Titanium мощностью 1300 Вт каждый с возможностью горячей замены и резервированием. Система воздушного охлаждения включает пять 80-мм вентиляторов с горячей заменой. Диапазон рабочих температур — от +5 до +35 °C. 4U-шасси имеет габариты 175,3 × 446,0 × 1080,0 мм. Минимальная масса составляет 45 кг. На новинку предоставляется трёхлетняя гарантия.

Современные системы искусственного интеллекта оперируют громадными объёмами данных, и что немаловажно, требуют загрузки этих данных с высокой скоростью. Поэтому компания PEAK:AIO представила новую версию платформы AI Data Server, предназначенного специально для подобного класса задач.

Обновлённая платформа, по словам компании-разработчика, вдвое производительнее предыдущего варианта и обеспечивает линейную производительность на уровне 80–120 Гбайт/с при использовании единственного узла хранения данных. Стоимость владения при этом снижена на 70%. Такая производительность достигается за счёт сочетания технологий GPUDirect и NVMe-oF.

Источник изображений здесь и далее: PEAK:AIO

Платформа AI Data Server относится к программно определяемым решениям, она разработана PEAK:AIO в сотрудничестве с крупными производителями серверного оборудования, такими, как Dell, Supermicro и GIGABYTE. В роли поставщика выступит компания PNY Technologies.

Технические характеристики новой платформы AI Data Server

Новый вариант базируется на процессорах последнего поколения, использует шину PCI Express 5.0 и сетевые решения NVIDIA ConnectX-6/7, а также накопители с интерфейсом NVMe. Базовая конфигурация имеет форм-фактор 2U и может располагать полезным объёмом от 50 до 700 Тбайт, а обслуживать при этом такая СХД может до 10 вычислительных серверов вроде NVIDIA DGX A100.

Стоимость новой платформы PEAK:AIO будет начинаться с отметки $8 тысяч за один узел хранения данных. В настоящее время новинка уже проходит бета-тестирование, а массовые поставки начнутся во втором квартале текущего года.

Входящая в «ИКС-Холдинг» группа YADRO сообщила о закрытии сделки по приобретению 100-% доли в разработчике решений для систем хранения данных (СХД) RAIDIX (ООО «Рэйдикс») у его основателя и структуры «Ростелекома». Последняя в 2016 году приобрела 30-% долю в компании за 100 млн руб. Стоимость и финансовые условия сделки с YADRO не разглашаются, но по оценкам информированного источника «Коммерсанта» её стоимость составляет 500–600 млн руб.

Как указано в пресс-релизе YADRO, сделка позволит дополнить продуктовый портфель предложением для сегментов начального уровня (entry-level midrange) и программно-определяемых СХД. Предполагается, что это поможет YADRO выйти в лидеры в данном сегменте к 2024 году. На счету основанной в 2009 году RAIDIX множество успешных проектов в России и за рубежом. Среди её партнёров и клиентов российские и иностранные производители вычислительной техники.

Фото: YADRO

Как сообщается, гарантийным и сервисным обслуживанием по заключённым договорам и продуктам RAIDIX будет заниматься сервисная служба YADRO. Компания также отметила, что продолжит развивать флагманскую линейку СХД корпоративного класса TATLIN, представленную в нескольких сегментах, включая унифицированные системы хранения среднего уровня. Ранее компания также объявила о планах по выпуску объектных СХД.

По итогам последнего квартала прошлого года, согласно данным IDC, YADRO лидировала на российском рынке СХД по объёму поставленных ёмкостей, а по выручке занимала второе место. На серверном рынке России компания тогда же занимала третье место по количеству поставленных единиц оборудования. По итогам 2021 года YADRO нарастила выручку на 26 %, до 33 млрд руб. (с НДС).

Несмотря на активное продвижение облачных концепций, классические on-premise ЦОД всё ещё остаются важнейшей частью ИТ-инфраструктуры. Согласно отчёту Spiceworks Ziff Davis о тенденциях в мире аппаратного обеспечения, который приводит издание Blocks & Files, доля таких ЦОД сократилась с 33 % в 2020 году до 30 % сегодня. Ожидается, что к 2023 году на публичные облака придётся уже 50 % нагрузок вместо нынешних 40 %.

Однако можно также предположить, что текущие мировые события негативно отразятся на доверии к облачным системам. Более того, аппаратные компоненты до сих пор составляют большую часть затрат, отводимых компаниями на ИТ-инфраструктуру. Классические серверы никуда не исчезнут, разве что повысится степень интеграции с облачными решениями.

Что касается хранения данных, то доля SATA SSD в корпоративных серверах, согласно отчёту, составила 55 %, в течение двух лет ожидается прирост ещё на 14 %. 40 % используют более специализированные накопители SAS. На долю NVMe пока приходится лишь 37 %, но темп роста впечатляющий — в 2019 году лишь 19 % бизнес-пользователей применяли такие накопители, а в течение двух лет эта цифра вырастет до 54 %, считает SWZD. Особенно быстро растёт популярность NVMe в компаниях с числом сотрудников более 500.

Флеш-массивы также активно завоёвывают жизненное пространство: с 2019 года их доля возросла с 14 % до 24 %, а прогнозы обещают долю в 44 % в течение тех же двух лет. Как и с NVMe, наиболее активно осваивают All-Flash СХД достаточно крупные компании, поскольку такие решения, с одной строны, достаточно недешёвы, а с другой — у малого бизнеса редко встречаются нагрузки, требующие такой производительности.

Существенно возросла и доля программно определяемых СХД (39 %), средств автоматизации развёртывания и управления серверами (37 %), программно определяемых сетей (36 %) и интеграций с публичными облаками (36 %). А 34 % опрошенных SWZD компаний даже перенесли основные рабочие нагрузки в облако. Популярность такой интеграции будет лишь расти, и к концу 2023 года большинство компаний будут использовать гибридные платформы.

Как и в случае аппаратной части, зависимость от размера бизнеса тут аналогична — более крупные компании активнее внедряют новые технологии. Это также относится к подписочной модели использования в сервисах Dell APEX, HPE GreenLake, Lenovo TruScale и др.. Полностью с отчётом SWZD за 2022 год можно ознакомиться здесь.

NVIDIA сообщила о приобретении израильской компании Excelero, разработчика высокопроизводительных блочных систем хранения данных (СХД). Условия сделки не разглашаются. Excelero продолжит интегрировать свои технологии в стек корпоративного ПО NVIDIA, а её команда присоединится к израильскому подразделению «зелёных», где работет около 2800 сотрудников.

NVMesh от Excelero предлагает программно определяемое блочное хранилище с использованием подключенных по сети NVMe SSD, которое функционирует локально и/или облаке. За прошедшие годы Excelero получила на развитие $35 млн, включая инвестиции от Western Digital и Mellanox (ныне NVIDIA Networking). Продукты Excelero будут использоваться, в том числе, для HPC-решений NVIDIA с поддержкой DPU BlueField и RDMA.

Источник: NVIDIA

Нынешние продукты компании будут поддерживаться до завершения контрактов с заказчиками, но впоследствии бренд Excelero исчезнет. «NVIDIA явно создает набор основных компетенций на системном уровне благодаря своим приобретениям и новым продуктам, — прокомментировал приобретение NVIDIA Эрл Джозеф (Earl Joseph), генеральный директор Hyperion Research. Всего пару месяцев назад NVIDIA приобрела компанию по управлению кластерами высокопроизводительных вычислений Bright Computing.

Технология SMR или «черепичной записи», при которой запись на пластинах жёсткого диска идёт с перехлёстом, позволяет добиться большей плотности размещения данных и увеличения итоговой ёмкости накопителя. Однако даже при небольшом изменении информации вся зона перехлёста должна быть считана и заново перезаписана, что делает SMR-накопители весьма неторопливыми на операциях записи и, что особенно неприятно, непредсказуемыми в плане латентности.

Компания Kalista.IO давно исследует возможность исправить этот недостаток — плодом её сотрудничества с Western Digital стало создание комплекса ПО Olympus. Двумя его основными компонентами стали модули Phalanx и Abacus. Как показали проведённые тесты, показатели IOPS выросли почти на 60% при на порядок более высокой стабильности отклика. А теперь Phalanx стал доступен в виде отдельного ПО для массивов типа JBOD, передаёт Blocks & Files.

В таком варианте реализация идей Kalista предельно проста: чтение происходит со всех дисков массива, но запись осуществляется только порциями на следующий диск в группе, так что первому диску не приходится постоянно выполнять перезапись SMR-блоков. При запросе на удаление данные только помечаются как удалённые. И по мере того, как фрагментация нарастает, ПО само переносит блоки данных на доступное пространство, после чего фрагментированный HDD помечается как пустой и вновь вносится в пул доступных для записи накопителей. Затем цикл с последовательным заполнением HDD повторяется.

Такой подход позволяет массиву на базе SMR-дисков выступать не хуже собрата, состоящего из CMR-накопителей, а в некоторых случаях система под управлением Phalanx работает даже несколько быстрее. Кроме того, исчезает т.н. «хвост латентности», свойственный обычным SMR-массивам, в которых часть дисков постоянно занята перезаписью больших блоков данных. Phalanx работает на стороне хост-системы, причём абсолютно прозрачно для ОС, приложений и всех вариантов хранилищ: файловых, блочных и объектных. Разные типы представления данных могут сосущестовать в составе одного массива Phalanx.

WekaIO, Inc., разработчик платформы управления и хранения данных для рабочих нагрузок ИИ и HPC, сообщил об успешном завершении раунда финансирования в размере $73 млн, который возглавила Hitachi Ventures. В результате общая сумма привлеченных WekaIO средств составила $140 млн. В раунде также участвовали HPE, NVIDIA, Micron, Cisco, MoreTech Ventures, Ibex Investors и Key 1 Capital. WekaIO сообщила, что направит привлечённые средства на ускорение выхода на рынок, а также на разработки и исследования.

WekaIO отметила, что в 2021 финансовом году, завершившемся в ноябре, ежегодный регулярный доход (ARR) вырос более чем в 2 раза, а число новых клиентов в 18 новых регионах увеличилось на 125 %. Более того, уже в первом квартале 2022 финансового года компания достигла целевого показателя по выручке за первые 14 дней. «Последний раунд [финансирования] позволит WekaIO более качественно и оперативно предоставлять услуги большему количеству клиентов и улучшить интеграцию с нашей экосистемой», — сообщил соучредитель и гендиректор компании Лиран Звидел (Liran Zvibel).

Джун Абэ (Jun Abe), председатель правления Hitachi Vantara LLC, отметил, что решение WekaIO является лидирующим на рынке и компания рада инвестировать в это перспективное с её точки зрения направление. Вторит ему Рик Шротри (Rick Shrotri), управляющий партнёр Digital Alpha. В том же ключе высказались и представители Hewlett Packard Pathfinder, Key 1 Capital, Ibex Investors, а также MoreTech Ventures.

В классических твердотельных накопителях обслуживанием NAND-ячеек занимается собственный контроллер, часто многоядерный и с солидными вычислительными возможностями. Это не самая оптимальная архитектура для гиперскейлеров, поэтому своё видение предлагает Kioxia. Её технология программно определяемых NAND-массивов должна сделать флеш-хранилища более универсальными, гибкими и лишёнными узких мест, накладываемых традиционной архитектурой SSD.

Несмотря на то, что собственный контроллер у SSD чаще всего работает прозрачно для ОС, гипервизоров и ПО, недостатков у такой архитектуры хватает: во-первых, характер работы с флеш-массивом ограничен прошивкой производителя и не всегда оптимален для разного рода нагрузок, во-вторых, современные процессоры и DPU на несколько порядков мощнее, а контроллер SSD может стать узким местом.

На корпоративном рынке встречаются специализированные накопители, отличающиеся от классических блочных устройств (например, SSD, хранящие данные в формате key:value), но все они также не отличаются гибкостью и взаимной совместимостью. Kioxia не без оснований считает, что только переход на полностью программно-определяемые массивы энергонезависимой памяти с унифицированной архитектурой ПО может стать действительно универсальным решением.

На конференции SNIA Storage Developer Conference компания представила своё видение программно определяемых универсальных накопителей. В основе технологии Software-Enabled Flash, впервые предложенной Kioxia в прошлом году, лежит унифицированный API-интерфейс, позволяющий гибко конфигурировать флеш-массив в зависимости от задач. К примеру, когда необходимость в использовании имеющейся ёмкости под базы данных заканчивается, массив можно переконфигурировать и использовать для запуска других приложений.

Пример смешанной конфигурации SEF

SEF легко масштабируется от сотен до тысяч накопителей в единой системе. Более того, флеш-массив под управлением Kioxia SEF может функционировать одновременно в нескольких режимах: часть чипов NAND будет работать как обычные блочные устройства, часть в режиме ZNS, а некоторые — вообще в каком-нибудь специфическом, требующем особых условий режиме.

При нехватке дисковых ресурсов можно будет просто добавить унифицированный флеш-модуль, а внедрение новых протоколов требует лишь изменения в ПО, но не модернизации физического оборудования. Это может серьёзно снизить стоимость владения СХД и продлить ей срок активной эксплуатации.

SEF имеет серьёзный задел на будущее, не требующий, однако, замены оборудования

В отличие от некоторых имеющихся на рынке программно определяемых флеш-хранилищ, решение Kioxia использует ПО с открытым кодом. Доступный и унифицированный API поможет владельцу СХД на базе Kioxia SEF быстро разрабатывать приложения для реализации необходимых ему возможностей и режимов использования флеш-накопителей.

Предложение Kioxia выглядит привлекательно для владельцев крупных ЦОД и облачных систем, но пока неизвестно, поддержат ли инициативу SEF другие производители SSD, такие как Samsung, Micron, SK Hynix и Western Digital; впрочем, последняя компания является партнёром Kioxia и с её стороны выпуск накопителей с поддержкой SEF наиболее вероятен.

Стартап из Новой Зеландии Nexustorage, зарегистрированный в начале этого года, довёл свою программно определяемую систему хранения данных (СХД) Nexfs до стадии общедоступного релиза. Основная идея продукта заключается в предоставлении универсального интеллектуального уровня хранения, который охватывает файловое, блочное и объектное хранение.

Будучи развёрнутым на стандартном оборудовании, Nexfs «склеивает» все устройства хранения, независимо от интерфейса, и предоставляет к ним единый уровень доступа посредством iSCSI, NFS, SMB и S3. Разработанное Nexustorage решение опирается на многоуровневый пул хранения, перенос и размещение данных в котором происходят автономно. Для его работы годится не только новое оборудование, но и давно существующее, что позволяет сэкономить, продлив срок эксплуатации существующих серверов и устройств хранения.

Масштабируемая файловая система Nexfs доступна бесплатно в Community-версии и работает в Centos, Ubuntu и Debian, являясь чисто программным решением. Разработчик предоставил к движку Nexfx и исходникам утилиты Nexfscli. Для работы требуется поддержка ФС xfs или ext4 с расширенными атрибутами. Nexfs содержит несколько ключевых технологических элементов, разработанных командой Nexustorage, среди которых SmartProtect, SmartTier и Nexassert.

SmartProtect — это инструмент защиты данных с помощью репликации с первичного хранилища на вторичное, совместимое с S3. Эта функция обеспечивает высокую гранулярность для создания копий файла при каждом изменении фрагмента данных. SmartTier позволяет перемещать фрагменты данных во вторичное хранилище в рамках пула, созданного и контролируемого Nexfs. В текущей версии поддерживается перемещение между 3 уровнями пула: SSD, SATA (HDD) и объектным хранилищем.

Обработка происходит на уровне субфайлов, которые разработчик называет блоками. Этот инструмент маскирует физическое расположение блоков данных и оптимизирует их размещение в зависимости от частоты использования — редко используемые данные переносятся на SATA-накопители, а «холодные» — в объектное или облачное хранилище. Когда инициируется доступ к мигрировавшему файлу, копируется не он целиком, а только необходимый фрагмент. Такой инструмент оказывается полезен как сам по себе, так и для SmartProtect.

Третий элемент, Nexassert — это технология, которая пока что находится на стадии патентования. В обычном режиме работы СХД файлы становятся неоднородными. Фрагменты данных распределяются между SSD, HDD и объектным/облачным хранилищем в зависимости от потребностей доступа и частоты использования. А эта технология позволяет осуществлять доступ к блокам данных там, где они размещены. Таким образом, в системе обеспечивается необходимый уровень QoS без лишних затрат.

Указанные функции сейчас не редкость, но организация блочного доступа с помощью iSCSI в такой архитектуре имеет ряд препятствий. Команда Nexustorage проделала большую работу, чтобы их преодолеть, и теперь их СХД поддерживает данный режим даже при использовании для хранения Amazon S3 и MinIO. Организация файлового доступа Nexfs чем-то напоминает Veritas VxFS с её функцией динамического многоуровневого хранения.

Компания SoftIron объявила о выпуске нового семейства систем хранения данных (СХД) HyperDrive Performance+, оптимизированных для развёртывания Ceph-хранилищ. Performance+ сочетает процессоры AMD EPYC Embedded 3000 и NVMe SSD в компактном 1U-шасси глубиной 638 мм.

Первые устройства нового семейства (модели HD61026 и HD61052) ориентированы на применение в периферийных вычислительных системах, к которым предъявляются требования малых задержек и высокой производительности в условиях ограниченных пространства, питания и охлаждения. Разработчик отдельно подчёркивает, что отсутствие PCIe-коммутатора позволяет снизить задержки.

Наличие двух портов 25GbE и энергопотребление менее 250Вт обеспечивают баланс производительности и мощности для периферийных и удаленных рабочих нагрузок. А благодаря совместимости с другими СХД SoftIron новинки можно использовать для формирования кеширующего слоя хранения для имеющегося хранилища на базе жёстких дисков, обладающего большей ёмкостью, но меньшей производительностью.

Как и все устройства хранения данных компании, эти модели оптимизированы для работы Ceph благодаря устранению узких мест в подсистеме ввода-вывода, подбору аппаратных компонентов и тюнингу ПО. Семейство продуктов HyperDrive Performance+ доступно как для покупки, так и для использования по модели как-услуга (as-a-Service).