Материалы по тегу: s3

01.12.2023 [12:02], Сергей Карасёв

В AWS появилось высокопроизводительное S3-хранилище Express One Zone с миллисекундными задержками

Облачная платформа AWS объявила о доступности Amazon S3 Express One Zone — нового высокопроизводительного объектного хранилища. Утверждается, что решение обеспечивает в 10 раз более высокую производительность по сравнению со стандартной версией S3, что позволяет ускорить работу приложений с интенсивным использованием данных.

Каждая корзина Amazon S3 Express One Zone располагается в определённой локальной зоне, выбранной заказчиком. Там же могут находиться вычислительные ресурсы (EC2, ECS, EKS), что обеспечивает минимальные задержки при обработке запросов. AWS заявляет, что S3 Express One Zone не только быстрее стандартного хранилища S3, но и обеспечивает значительную экономию средств. Утверждается, что стоимость запросов на 50 % ниже по сравнению с обычным хранилищем S3.

 Источник изображений: AWS

Источник изображений: AWS

Утверждается, что хранилище Amazon S3 Express One Zone может обслуживать сотни тысяч запросов в секунду с постоянной задержкой, которая измеряет миллисекундами. Сервис способен обрабатывать объекты любого размера, но наибольшая эффективность достигается при работе с небольшими блоками. Доступ к хранилищу можно получить посредством стандартного набора API. Корзины поддерживают заданный набор функций, включая загрузку и копирование файлов по частям (multi-part upload/copy), предварительно назначенные URL-адреса и анализатор доступа.

По заявлениям AWS, решение отлично подходит для создания масштабных ИИ-моделей, которым требуется доступ к наборам обучающих данных миллионы раз в минуту. Кроме того, могут решаться ресурсоёмкие задачи в сферах финансового моделирования, обработки мультимедийного контента, формирования и размещения рекламы в реальном времени и пр. Такие приложения обычно хранят данные в течение относительно короткого периода времени, но в течение этого срока обращаются к ним очень часто.

Постоянный URL: http://www.servernews.ru/1096789
12.11.2023 [16:53], Сергей Карасёв

Dell представила объектное All-Flash хранилище ObjectScale XF960 для генеративного ИИ

Корпорация Dell анонсировала программно определяемую объектную систему хранения данных ObjectScale XF960. Новинка, ставшая первым представителем семейства ObjectScale X Series, ориентирована на задачи генеративного ИИ и аналитику в реальном времени. В состав системы входят серверы PowerEdge, коммутаторы, необходимое стоечное оборудование и кабели. Применена программная платформа ObjectScale v1.3.

В зависимости от конфигурации ObjectScale XF960 объединяет от 4 до 16 узлов. Каждый из них несёт на борту два 32-ядерных процессора Intel Xeon Sapphire Rapids и 256 Гбайт оперативной памяти. Предусмотрены два загрузочных накопителя с зеркалированием для обеспечения надёжности. Сетевая подсистема включает по два порта 100 GbE (back-end) и 25 GbE (front-end).

Система относится к классу All-Flash. В оснащение каждого из 2U-узлов входят 24 накопителя NVMe на основе флеш-памяти TLC вместимостью 30,72 Тбайт. Таким образом, суммарная «сырая» ёмкость составляет 737,3 Тбайт. В максимальной конфигурации с 16 узлами общая вместимость достигает 11,8 Пбайт.

 Источник изображения: Dell

Источник изображения: Dell

Dell заявляет, что ObjectScale XF960 — это полностью интегрированная система «под ключ» и самая мощная в мире объектная платформа хранения данных, созданная специально для Kubernetes. Система способна обеспечить скорость чтения до 5,7 Гбайт/с и скорость записи до 5,0 Гбайт/с на каждый узел.

Постоянный URL: http://www.servernews.ru/1095846
23.09.2023 [00:05], Андрей Крупин

Система резервного копирования «Кибер Бэкап» получила улучшенную интеграцию с Yandex Cloud

Компания «Киберпротект» совместно с сервисом Yandex Cloud представила шлюз резервного копирования для хранения резервных копий в объектном хранилище Yandex Object Storage.

Разработанное специалистами «Киберпротекта» и «Яндекса» решение позволяет оперативно развернуть в Yandex Cloud всю необходимую инфраструктуру и использовать объектное облачное хранилище S3 как место назначения для резервных копий системы резервного копирования «Кибер Бэкап».

Приложение «Шлюз резервных копий СРК Кибер Бэкап» доступно в магазине Yandex Cloud Apps. В процессе автоматического развёртывания создаются все необходимые облачные ресурсы — виртуальные машины, виртуальные диски, корзина для хранения резервных копий (S3 bucket), сетевой балансировщик нагрузки, сервисные учётные записи и другие, настраивается балансировка запросов к шлюзу резервного копирования. Сразу после установки приложения шлюз резервного копирования готов к работе и резервные копии можно сохранять в объектное хранилище, минуя панель управления шлюзом.

«В решении "Кибер Бэкап" уже давно есть возможность резервного копирования в различные S3-хранилища через шлюз резервного копирования. Теперь мы значительно улучшили интеграцию с Yandex Cloud. Развёртывание инфраструктуры для резервного копирования в S3-хранилище Yandex Cloud стало максимально простым и быстрым, не требует затрат на приобретение лицензий, оборудования, установку и администрирование», — поясняет Андрей Пономаренко, руководитель группы разработки продукта.

Постоянный URL: http://www.servernews.ru/1093481
20.08.2023 [11:26], Сергей Карасёв

IBM превратит ленточную библиотеку Diamondback в хранилище S3

Корпорация IBM, по сообщению ресурса Blocks & Files, разработала сервер и специализированное ПО, которые позволяют сформировать объектное хранилище S3 на основе ленточной библиотеки DiamondBack (TS6000).

IBM Diamondback обеспечивает высокую плотность хранения данных — до 27 Пбайт в расчёте на одну OCP-стойку. Применяются ленточные картриджи LTO-9, количество которых достигает 1548. При уровне сжатия 2,5:1 система способна вместить приблизительно 70 Пбайт информации. Максимальная пропускная способность составляет 17,2 Тбайт/час.

 Источник изображения: IBM

Источник изображения: IBM

Платформа DiamondBack S3 в дополнение к ленточной библиотеке включает x86-сервер, который отвечает за работу интерфейса S3 и взаимодействие с картриджами. Клиенты отправляют запросы Get/Put, а система считывает или записывает объекты с/на ленточный накопитель, установленный в одном из приводов.

Предлагаемое решение рассматривается в качестве локальной платформы для архивирования больших массивов данных. Перенести информацию на DiamondBack S3 сможет любой IT-специалист, знакомый с архитектурой S3. При этом заказчики получат в своё распоряжение относительно недорогую СХД большой ёмкости. Доступ к серверу осуществляется посредством Ethernet: это два порта 100GbE для S3-обращений и порт 1GbE для администратора.

Представленная концепция не нова. К примеру, компания XenData ранее анонсировала систему CX-10 Plus, которая предназначена для передачи архивных данных в облачные сервисы хранения и их зеркалирования на ленточных накопителях. Фирма Quantum добавила уровень объектного хранилища в свою систему хранения ActiveScale. Система BlackPearl компании SpectraLogic также может предоставлять интерфейс S3 для ленточной библиотеки.

Постоянный URL: http://www.servernews.ru/1091765
20.06.2022 [22:11], Алексей Степин

WekaIO представила по-настоящему глобальную мультиоблачную платформу хранения данных WEKA 4.0

Компания WekaIO, разработчик платформ хранения данных, объявила о выпуске новой версии за номером 4.0. Ранее платформа Weka уже поддерживала интеграцию с хранилищами и томами Amazon Web Services, но в четвёртой версии она стала по-настоящему глобальной и мультиоблачной благодаря поддержке Microsoft Azure, Google Cloud Platform и Oracle Cloud Infrastructure (OCI).

Это нововведение важно, поскольку, если верить аналитикам Gartner, подавляющее большинство компаний (76%) пользуются услугами минимум двух облачных поставщиков. Корпорации с оборотом свыше $1 млрд зачастую склонны использовать три и более облака, и нередко в таких случаях имеются трудности перемещением больших объёмов данных между облаками, чего позволит избежать новая версия платформы WEKA 4.0.

 Изображения: WekaIO

Изображения: WekaIO

Новинка, по заявлению разработчика, позволит использовать облачные службы для запуска сценариев класса mission critical, поскольку обеспечивает постоянный — и при этом высокий — уровень производительности, сочетая его с высокой надёжностью и простотой управления. Ещё в апреле решения компании смогли продемонстрировать в облаке Oracle потрясающую производительность хранилища — до 2 Тбайт/с.

Теперь сжатие и дедупликация данных могут поддерживаться на всём объёме файловой системы. Поддерживается и иерархическое деление (tiering) облачных и локальных областей. Кроме того, появилась поддержка NFS v4.1, а для Samba есть собственная реализация SMB-W с более низкой латентностью и повышенным уровнем производительности при работе с мелкими файлами, что делает её пригодной к использованию в высоконагруженных сценариях в Windows-средах.

Интерфейс новой версии стал более удобным для восприятия, упростилось управление, а выполнение ряда задач теперь существенно проще, что особенно важно в крупных мультиоблачных комплексах. Доступны различные режимы репликации, в том числе перемещение устаревающих данных в более дешёвое облачное хранилище или на локальные СХД. Оптимизирована поддержка накопителей на базе QLC, позволяющая надёжно хранить большие объёмы данных на более дешёвых SSD.

Платформа WEKA 4.0 будет доступна в четырёх различных версиях, по подписке или с оплатой по факту потребления ресурсов. Подробности можно узнать в блоге и на сайте WekaIO.

Постоянный URL: http://www.servernews.ru/1068449
19.05.2022 [14:33], Сергей Карасёв

Yadro начнёт выпуск объектных систем хранения данных

Группа российских технологических компаний Yadro сообщила о новом проекте: планируется открыть новое направление горизонтально-масштабируемых систем хранения данных объектного типа. Основными сферами использования решений названы мобильные приложения и веб-платформы, геораспределённое глобальное хранилище, хранилище для образов контейнеров и так далее.

Сообщается, что в структуру исследований и разработок компании вошло новое подразделение «Ядро центр разработки объектных хранилищ». Партнёрами выступают члены команды Morphbits.

 Источник изображения: pixabay.com / geralt

Источник изображения: pixabay.com / geralt

«Мы решили объединить собственные разработки с экспертизой команды Morphbits, которая давно и успешно создаёт продукты в нише объектного хранения данных. Совместными усилиями мы планируем представить продукт нового класса, отвечающий требовательным запросам корпоративных заказчиков», — говорится в официальном заявлении.

Ожидается, что выпуск первой объектной системы хранения данных корпоративного уровня Tatlin.Object состоится в IV квартале нынешнего года. Решение является децентрализованным хранилищем, в котором каждый узел будет работать максимально автономно, чтобы данные хранились корректно, в соответствии с заданными политиками. Для увеличения ёмкости и повышения производительности система масштабируется горизонтально однотипными узлами хранения.

Постоянный URL: http://www.servernews.ru/1066263
28.01.2022 [12:42], Андрей Галадей

MinIO получила ещё $103 млн инвестиций и стала единорогом

Компания MinIO Inc., основанная в 2014 году, привлекла $103 млн в рамках раунда финансирования серии B. Инвесторами выступили SoftBank Vision Fund, Dell Technologies Capital, General Catalyst Partners и Nexus Venture Partners. Этот раунд увеличил общую сумму привлечённых средств до $126 млн, повысив таким образом общую оценку компании до $1 млрд. В прошлом году регулярный доход (ARR) MiniIO вырос на 201%, а число заказчиков — на 208%.

MinIO разрабатывает мультиоблачное объектное хранилище, совместимое с S3. Инстансы MinIO можно разворачивать в частных и публичных облаках, а также практически на любой Kubernetes-платформе. Компания продолжает наращивать функциональность продукта, добавляя возможности вроде развёртывания инстансов в AWS, Google Cloud и Microsoft Azure в один клик с одновременной защитой от программ-вымогателей и других сетевых угроз, а также множественной репликацией данных.

Хранилище MinIO подходит для разных задач — от платформ машинного обучения, аналитических приложений и баз данных до веб-приложений и других рабочих нагрузок, ориентированных на производительность. Как отмечается, в день происходить до миллиона развёртываний хранилищ MinIO, а общее число развёртываний приближается к 800 млн. При этом наработки MinIO доступны под лицензией AGPL v3.

Постоянный URL: http://www.servernews.ru/1058934
Система Orphus