Материалы по тегу: схд

10.06.2020 [12:27], Сергей Карасёв

На рынке корпоративных СХД в первом квартале зафиксирован значительный спад

Компания International Data Corporation (IDC) подвела итоги исследования мирового рынка внешних OEM-систем хранения данных корпоративного класса. В первом квартале текущего года объём отрасли составил $6,5 млрд. Это на 8,2 % меньше по сравнению с прошлогодним результатом, когда выручка поставщиков равнялась $7,1 млрд.

Крупнейшим игроком рынка по итогам прошлого квартала стала Dell Technologies, занимающая практически треть отрасли в денежном выражении — 33,2 %. На втором месте находится NetApp с 11,0 %, а замыкает тройку HPE/New H3C Group — 9,9 %.

Исследование показало, что сегмент хранилищ на основе флеш-памяти All-Flash Array (AFA) в годовом исчислении вырос всего на 0,4 % — до $2,8 млрд. Гибридные хранилища принесли $2,5 млрд, что на 11,5 % меньше по сравнению с результатом за первый квартал прошлого года.

Суммарная вместимость хранилищ, реализованных за трёхмесячный период, достигла 17,3 экзабайт. Рост в годовом исчислении оказался на уровне приблизительно 3,0 %. 

Постоянный URL: http://servernews.ru/1013054
08.06.2020 [14:29], Юрий Поздеев

Fujifilm создала объектное S3-хранилище для ленточных библиотек

Традиционно ленты используются как долговременное хранилище для резервных копий. Запись осуществляется последовательно, по мере заполнения кассеты с лентой она либо перезаписывается с начала, либо хранится как отчуждаемая копия в отдельном помещении.

Последним крупным нововведением в области ленточных хранилищ стало внедрение особой файловой системы LTFS в 2011 году. Работа упростилась настолько, что добавлять и извлекать файлы или каталоги стало можно простым перетаскиванием мышью.

Несмотря на то, что многим ленточные системы кажутся архаичными, они продолжают развиваться, и теперь Fujifilm разработала метод переноса объектов и их метаданных с жестких дисков или SSD на ленточную систему. 

Новый фреймворк с открытым исходным кодом называется OTFormat, он позволяет записывать и читать объекты без преобразования и дополнительной обработки. ПО Object Archive от Fujifilm использует OTFormat и предоставляет интерфейс API S3, что позволяет встроить ленточное хранилище во множество современных систем хранения.

Самое главное преимущество ленты — цена. Она до сих пор является самым дешевым способом хранения информации, обходя по этому показателю даже публичное облако. Однако относительно низкая скорость чтения/записи и особенность доступа позволяют использовать ленточные библиотеки только для архивных данных, где допустимо долгое время восстановления информации.

Согласно официальной документации Fujifilm, лента имеет 4-х кратное превосходство по надежности перед жесткими дисками. Также не стоит забывать, что кассеты являются отчуждаемыми копиями (т.е. могут храниться отдельно годами), что является хорошей защитой от разнообразных программ-шифровальщиков и других возможных атак.

Текущее поколение ленты, LTO-8, позволяет хранить до 12 Тбайт несжатых данных, однако уже есть планы по развитию вплоть до LTO-12 ёмкостью 192 Тбайт. Таким образом, есть еще большой запас у самой технологии хранения на магнитной ленте и ее рано списывать со счетов.

На данный момент пока нет информации о том, как будет выглядеть интерфейс нового фреймворка от Fujifilm, однако анонс должен произойти в ближайшие месяцы.

Постоянный URL: http://servernews.ru/1012871
04.06.2020 [07:57], Юрий Поздеев

IBM Storage ускорит обработку данных благодаря NVIDIA A100

Портфель решений IBM Storage для больших данных и ИИ теперь включает в себя недавно анонсированную модель NVIDIA DGX A100, которая предназначена для ускорения аналитики и задач с использованием ИИ. Компания позиционирует Storage for Data and AI как компонент для трехэтапной обработки информации: Ingest, Transform, Analyse/Train.

В эту архитектуру включены следующие системы:

  • Cloud Object Storage (COS): объектное облачное хранилище данных;
  • Spectrum Discover: ПО для каталогизации и индексации файлов;
  • Spectrum Scale: масштабируемое параллельное файловое хранилище;
  • ESS 3000: all-flash NVMe СХД с установленным ПО Spectrum Scale с 24 отсеками под накопители в форм-факторе 2U;
  • Spectrum LSF (Load Sharing Facility): система управления рабочими нагрузками и планирования заданий на основе политик для высокопроизводительных вычислений.

IBM планирует хранить данные в COS (он будет функционировать как Data Lake), где их будет индексировать с попутным добавлением метаданных Spectrum Discover. LSF управляет процессами машинного обучения, а Spectrum Discover перемещает необходимые данных из COS в ES3000 с помощью Spectrum Scale. Ну а данные с ES3000 отправляются на серверы DGX A100 для обучения ИИ-моделей.

Мы уже писали про новый сервер DGX-A100 от Nvidia на базе ускорителей A100, которые, по заявлениям самой Nvidia, до 20 раз быстрее, чем Tesla V100 прошлого пооколения. Применение такого мощного сервера, без сомнения, ускорит обработку данных и позволит IBM расширить свое влияние на рынке ИИ, HPC и облачных систем.

Постоянный URL: http://servernews.ru/1012589
01.06.2020 [20:44], Алексей Степин

Huawei использует 20-Тбайт HDD в СХД OceanStor Pacific: 2,4 Пбайт на узел

На сегодняшний день традиционные механические HDD уже уступают твердотельным накопителям в цифрах чистого объёма, но всё ещё остаются выгодным выбором, когда речь заходит о стоимости хранения данных.

Компания Huawei имеет в своём арсенале твердотельные СХД, но не собирается отказываться от механики — системы хранения данных OceanStor Pacific получат новые SMR-диски ёмкостью 20 Тбайт.

Сама система хранения данных OceanStor Pacific была анонсирована меньше недели назад. Это распределённое отказоустойчивое решение повышенной надёжности, которое поддерживает файловые, объектные, блочные и HDFS-протоколы хранения данных. Система модульная, она может содержать как полки с твердотельными накопителями для «горячих» данных, так и «холодные» варианты с механическими жёсткими дисками, а также модули для дисков Blu-Ray. 

Один узел типоразмера 5U вмещает в себя до 120 накопителей форм-фактора 3,5″. В них для хранения данных используются жёсткие диски объёмом 20 Тбайт с черепичной технологией записи (SMR), что даёт 2,4 Пбайт на узел. Вероятно, это Western Digital DC H650. В 40U-стойку помещается 8 узлов с 960 накопителями, а в кластере таких узлов может быть до 4096, то есть это весьма ёмкое решение.

OceanStor Pacific придёт на смену предыдущей серии Huawei FusionStorage. За вычислительную часть отвечают 64-ядерные процессоры HiSilicon Kunpeng 920. Они, по словам компании, на 30% превосходят в энергоэффективности аналогичные решения с архитектурой x86.

OceanStor Pacific интересна тем, что в ней не используется традиционный RAID, вместо этого, применяется метод erasure coding (EC), как позволяющий использовать дисковое пространство более эффективно: с конфигурацией накопителей 22 + 2 до 91% объёма могут занимать пользовательские данные. При этом надёжность не страдает, до четырёх дисковых полок может выйти из строя без какой-либо потери данных и без отказов в обслуживании пользователей.

Корпус СХД позволяет осуществлять доступ к дисковым полкам как спереди, так и сзади, а сама дисковая полка делится на две части. Это сделано для того, чтобы тяжёлая полка не вызывала проблем с устойчивостью серверного шкафа, в котором она находится. Для охлаждения используется некая система фазового перехода с тепловыми трубками; температура между передней и задней частью дисковых полок выравнивается.

Новая СХД существенно эффективнее использует пространство: по словам представителей Huawei, Hadoop-кластер ёмкостью 22 Пбайт, занимающий 15 шкафов, теперь может быть умещён всего в 8.

Постоянный URL: http://servernews.ru/1012381
30.05.2020 [16:13], Юрий Поздеев

Dell EMC анонсирует новую СХД PowerScale

Массивы хранения от Dell EMC назывались по-разному, однако последнее время все чаще стали встречаться слова «Power» и «Store» (PowerMax, PowerStore, PowerVault) и когда нам казалось, что все комбинации с этими словами уже закончились, Dell анонсировала новую серию. Угадаете, как она называется? PowerScale!

Ранее эта разработка носила название Unstructed.NEXT — она объединяет горизонтально масштабируемую файловую СХД Isilon и объектную облачную систему ECS.

Объединение означает переход на единую ОС и единую аппаратную базу. Это интересное заявление, учитывая, что Isilon насчитывает десятки разновидностей узлов (в том числе и высокоплотные A2000), а ECS изначально поставляется целыми стойками с оборудованием. После анонса PowerStore и ее уникальной технологии AppsOn, о которой мы писали некоторое время назад, есть большая вероятность увидеть в новой системе PowerScale именно такой подход к построению СХД: контейнеры с отдельными сервисами, всё под управлением гипервизора.

Пока нет точных данных о том, какая аппаратная начинка будет у PowerScale, однако весьма вероятно, что это будет All-Flash массив, чтобы адекватно конкурировать с Hitachi Vantara, IBM, Igneous, NetApp, Pure Storage и Scality.

Будем ждать новостей и технических подробностей о новой системе.

Постоянный URL: http://servernews.ru/1012251
29.05.2020 [13:18], Юрий Поздеев

Fujitsu ETERNUS DSP: новая объектная система хранения All-Flash

Fujitsu анонсировала новую горизонтально масштабируемую объектную систему хранения. ETERNUS – это общее название для систем хранения данных Fujitsu, а DSP сокращение от Digital Sevices Platform.

В роли узлов СХД выступают x86-серверы Fujitsu в форм-факторе 1 и 2U. Всего заявлено четыре вида узлов емкостью от 19,2 до 92,2 Тбайт. Каждый узел имеет 384 Гбайт памяти, 16 Гбайт NVDIMM-кеша и двухпортовый адаптер Ethernet 10 Гбит/с.

Масштабируется ETERNUS DSP до 32 узлов, для интерконнекта используется по два 40GbE-порта на узел.

Получается, что с одной стороны, ETERNUS DSP это классическая программно определяемая СХД (SDS), с другой — Fujitsu не выпускает отдельно ПО и не дает возможности установки его на оборудование заказчика. Поэтому, по сути, это программно-определяемая СХД, но для заказчика это просто горизонтально масштабируемая система.

Fujitsu заявляет, что ее новая СХД в исполнении 32 узла способна выдать 5,7 миллиона IOPS, при этом задержка не превысит 200 мкс. Максимальный объем такой системы составит внушительные 2,9 Пбайт. Сильное заявление, но не указан профиль нагрузки и размер блока, скорее всего это 100% Read.

Недавно Fujitsu подписала ОЕМ соглашение с Datera, поэтому с большой долей вероятности можно сказать, что именно это ПО и легло в основу ETERNUS DSP. Datera выпускает ПО для виртуальных хранилищ SAN, поддерживающие серверы, виртуальные машины и контейнеры «из коробки». Поддерживается блочный и объектный доступ к данным, а само решение позиционируется как альтернатива vSAN от VMware.

Для Fujitsu это было логичным шагом, ведь в ее портфеле уже есть гиперконвергентные решения (HCI):

  • Fujitsu Nutanix Enterprise Cloud на серверах PRIMERGY x86, работающих под управлением ПО Nutanix, Acropolis и Prism.
  • PRIMEFLEX для Microsoft Storage Spaces Direct
  • PRIMEFLEX для VMware VSAN

Кроме того, Fujitsu заключило соглашение с NetApp и поставляет свои серверы PRIMERGY для совместного решения NFLEX. Хотелось бы увидеть ETERNUS DSP в виде отдельно ПО, чтобы не быть привязанным к одному вендору и иметь возможность использовать имеющуюся серверную инфраструктуру, однако пойдет ли Fujitsu на такой шаг и какая будет модель лицензирования еще не понятно.

Постоянный URL: http://servernews.ru/1012160
28.05.2020 [18:28], Юрий Поздеев

OceanStor Pacific: новая серия СХД Huawei

Huawei объявила о запуске новой серии СХД под названием OceanStor Pacific. Это отдельная серия, представляющая собой распределенное катастрофоустойчивое хранилище, с поддержкой HDFS, файлового, объектного и блочного протоколов.

Презентация была очень пафосной, много говорилось об особой роли Huawei как технологического лидера, однако техническим моментам было уделено мало внимания.

На данный момент известно лишь несколько технических подробностей. В частности, аппаратная платформа OceanStor Pacific называется vNode и представляет собой узлы различного типа. Это могут быт как высокопроизводительные All-flash полки для горячих данных, так и холодное хранилище в узле типоразмера 5U, содержащего 120 дисков форм-фактора 3,5 дюйма. 

Уникальной особенностью OcenStor Pacific является тиринг данных между SSD, HDD и дисками Blu-Ray — данные могут физически отчуждаться для сохранения информации от повреждения. 

Сетевая часть представлена Ethernet со скоростями до 100 Гбит/с. Традиционная для СХД Huawei катастрофоустойчивость достигается за счет одновременной параллельной записи данных на узлы, находящиеся в разных дата-центрах. Чтение также может прозрачно переключаться на лету между разными узлами и локациями. Поддерживается объектный доступ по протоколу Amazon S3, а также NFS.

У Huawei уже есть очень похожее решение, под названием OceanStor 100D (Intelligent Distributed Storage), является ли Pacific просто ребрендингом и дальнейшим развитием этой линейки – пока не известно. Будем следить за развитием событий и ждать полноценное техническое описание новинки.

Постоянный URL: http://servernews.ru/1012106
28.05.2020 [12:27], Юрий Поздеев

Dell EMC выпустила обновление ECS 3.5

Dell EMC выпускает обновление 3.5 для своей объектной системы хранения ECS. До того, как мы рассмотрим, что появилось нового в версии 3.5, пару слов о самой системе и для чего она предназначена. Dell EMC ECS (Elastic Cloud Storage) — это частное облако для размещения объектных данных. 

В отличие от публичных облаков все данные физически хранятся на оборудовании клиента и под его полным контролем. Технически система представляет собой серверные узлы с дисковыми полками (EX300, EX500 или EX3000), которые путем горизонтального масштабирования позволяют построить систему практически неограниченного объема.

Такое решение могут позволить себе только очень крупные предприятия, для которых важна не только производительность системы, но и гарантированная сохранность данных, катастрофоустойчивость и непрерывный доступ к информации. Обычно такие решения покупают не узлами, а целыми стойками, а объем хранящихся объектов в системе исчисляется сотнями Пбайт.

Теперь посмотрим, что же нового появилось в версии ECS 3.5:

  • SSD для кэширования чтения метаданных: стали доступны твердотельные накопители объемом 960 Гб, что позволило увеличить IOPS и снизить задержку чтения;
  • Оптимизирована функциональность технического обновления: упрощен переход на новые модели узлов ECS, при этом процесс бесшовный и непрерывный, без потери доступа к данным;
  • Модернизация заменяемых жестких дисков (CRU): теперь технические специалисты клиента могут сами заменять неисправные накопители, упрощена процедура замены и возврата — нет необходимости вызова инженера Dell EMC;
  • Поддержка IAM с тегами объектов: управление идентификацией и доступом (IAM) по тегам позволяет ИТ-отделам более детально контролировать доступ к ресурсам, при этом доступны различные политики для одного объекта, позволяющие гибко настроить необходимый уровень доступа;
  • Поддержка S3a: доступна аналитика для больших данных, с хранением Hadoop в ECS с использованием протокола S3a. Эта новая возможность была сертифицирована для пакета QATS Cloudera и интегрируется с функциями IAM для безопасности рабочих нагрузок.

Это только основные изменения в версии, список полных изменений занимает более 50 страниц и доступен на официальном сайте DELL EMC.

Постоянный URL: http://servernews.ru/1012035
21.05.2020 [17:00], Юрий Поздеев

Новая версия RAIDIX 5.0.1 оптимизирована для All-flash СХД

RAIDIX анонсировала новую версию своего ПО для создания СХД, в котором заявлены несколько интересных функций. Ключевая особенность новинки — оптимизация для создания all-flash СХД на основе NVMe-дисков.

По заявлениям самой RAIDIX, производительность системы может достигать 5 млн IOPS (это больше, чем у многих флагманских СХД других вендоров).

Для создания all-flash конфигураций RAIDIX выпустила новую версию движка ERA-Engine. По сути, это rpm/deb пакет для Linux (Ubuntu или CentOS), в который входит ПО для создания программного рейда, управляющие утилиты и модуль ядра. Код оптимизирован специально для работы с SSD-накопителями, что позволяет добиться большой производительности и снизить износ. Поддерживаются разные уровни RAID, в том числе и характерный для RAIDIX RAID 7.3.

Еще одной важной особенностью релиза стала поддержка протокола iSER (iSCSI Extensions for RDMA), использование которого меньше нагружает процессор и позволяет добиться большей производительности. При этом никуда не делись и уже имеющиеся полезные функции:

  • поддержка NAS (NFS, SMB, AFP, FTP);
  • мониторинг износа SSD и фоновое сканирование целостности данных;
  • быстрое восстановление с частичной реконструкцией данных по разным дискам.

ПО RAIDIX включено в Единый реестр российских программ для электронных вычислительных машин и баз данных (Реестр российского программного обеспечения), что позволяет без проблем использовать его в государственных организациях.

Постоянный URL: http://servernews.ru/1011468
17.05.2020 [15:34], Юрий Поздеев

Рецепт сверхбыстрой СХД: Dell PowerEdge R7515 + AMD EPYC + Liqid LQD4500

Мы уже писали про сверхбыстрый твердотельный накопитель Liquid с интерфейсом PCIe 4.0 x16. Liqid известна тем, что создает системы с использованием архитектуры PCIe для коммутации процессоров, графических ускорителей, систем хранения данных и сетевых адаптеров.

Теперь Liqid и Dell представили совместное решение на базе сервера Dell PowerEdge R7515 и накопителей LQD4500.

Решение получилось очень интересным и производительным. Dell R7515 — это односокетный 2U-сервер, в который можно установить процессор серии AMD EPYC 7002 с поддержкой 128 линий PCIe 4.0. Максимальный объем памяти DDR4-3200 составляет 2 Тбайта. На передней панели сервера размещаются 24 отсека для дисков форм-фактора 2,5 дюйма, все отсеки можно использовать для NVMe-накопителей.

Liqid Element LQD4500

Liqid Element LQD4500

Для тестирования производительности в данный сервер установили 64-ядерный процессор AMD EPYC 7742 и два NVMe-накопителя Liqid Element LQD4500 объемом 30 Тбайт каждый.

Результаты такой сборки просто ошеломительные — 3,14 млн IOPS с произвольным чтением (размер блока 4 Кбайт) и почти 1 млн (961 663) IOPS для произвольной записи. С 8К-блоками тестовая система показала результаты 1,8 млн IOPS и 479 889 IOPS соответственно.

Пропускная способность на блоках 128 Кбайт составила 24,471 Гбайт/с для чтения и 10,052 Гбайт/с для записи. При размере блока 256 Кбайт результаты остались практически неизменными.

Liqid утверждает, что данное решение из сервера R7515 и твердотельных накопителей LQD4500 позволит пользователям развертывать системы хранения данных с самой высокой на рынке производительностью, при этом цена решения не будет космической. Это определенно новая значимая ступень в развитии программно-определяемых СХД, которая задает новый тренд к подходу быстрой обработки данных. Востребованы такие системы будут в биллинге, банковской сфере, на биржах и в больших торговых системах с большим количеством транзакций в секунду.

Постоянный URL: http://servernews.ru/1011131
Система Orphus