Материалы по тегу: microsoft azure

19.05.2020 [18:00], Игорь Осколков

Microsoft создала облачный суперкомпьютер для ИИ

На проходящей сейчас конференции Build 2020 компания Microsoft объявила о создании суперкомпьютера на базе Azure, производительность которого, как заявлено, достаточна для того, чтобы попасть в пятёрку лидеров рейтинга TOP-500. Новая машина была развёрнута в Microsoft Azure эксклюзивно для проекта OpenAI, о сотрудничестве с которым было объявлено в прошлом году.

Суперкомпьютер ориентирован на обучение сверхтяжёлых ИИ-моделей следующего поколения.

В частности, корпорация имеет собственное семейство таких моделей, Microsoft Turing models, куда входит и самая крупная из существующих сейчас языковая модель Turing Natural Language Generation (T-NLG), включающая 17 млрд параметров. Обучение такой модели — процесс весьма затратный.

В сообщении компания не приводит точную конфигурацию нового суперкомпьютера, говоря лишь о том, что у него имеется более 285 тыс. ядер CPU, 10 тыс. GPU и 400Gb-интерконнект. В Microsoft Azure есть несколько вариантов HPC-инстансов. Например, в основе NDv2 лежат машины, несущие 8 ускорителей NVIDIA Tesla V100, которые можно объединять в кластеры. Заказчикам доступны кластера из 100 таких машин, объединённых InfiniBand. Есть в Azure и другие ускорители — инстансы NDv3 используют системы с восемью картами Graphcore C2.

Напомним, что на прошлой неделе NVIDIA вместе с анонсом ускорителей A100 на базе архитектуры Amper сообщила, что её собственный ИИ-суперкомпьютер SATURN V пополнился четырьмя системами Superpod, каждая из которых состоит из 140 машин DGX A100. Суммарная производительность в ИИ-задачах достигает фантастических 5 экзафлопс. Впрочем, на «классических» FP64-вычислениях обновление платформы даёт 93 Пфлопс в пике. Этого тоже хватит, чтобы попасть в Топ-5 нынешнего списка TOP-500. Кроме того, SATURN V на самом деле не является единой системы — он разбит на кластеры, находящиеся в четырёх разных местах.

Постоянный URL: http://servernews.ru/1011312
18.05.2020 [20:07], Игорь Осколков

Серверные HDD с PCIe и NVMe могут стать реальностью

Секция докладов о различных аспектах хранения данных в рамках прошедшего OCP Virtual Summit 2020 была, конечно, посвящена по большей части SSD и связанным технологиям. Но было и несколько выступлений о будущем жёстких дисков, от которых индустрия отказаться пока не может. 

Собственно говоря, самая интересная тема вынесена в заголовок — речь действительно о том, чтобы, наконец, всем сорганизоваться и создать HDD с интерфейсом PCI Express и поддержкой протокола NVMe. И такие гибриды могут оказаться ближе, чем думается, к воплощению в «железе».

Идея подобных устройств не нова и о ней вспоминали неоднократно после массового распространения стандарта NVMe, которому скоро исполнится 10 лет. По словам представителя Microsoft Azure, основная и, по большому счёту, единственная цель всей этой затеи — полная унификация методов доступа к накопителям с программной точки зрения, на уровне драйверов и протокола.

Переход HDD на NVMe избавит и от необходимости трансляции протоколов, и от самих контроллеров с экспандерами, нужных для обслуживания большого числа накопителей. С другой стороны, вместо экспандеров могут понадобиться PCIe-свитчи. Даже для самого быстрого жёсткого диска возможностей одной линии PCI Express 3.0 более чем достаточно. Для двухпортовых, так и быть, будет выделено две линии. Да, сейчас уже есть CPU с большим количеством PCIe, но их root-комплексы не готовы столь мелко «нарезать» линии.

Общая шина для всех современных устройств позволяет общаться им без прямого участия процессора, что может быть полезно в рамках концепции computational storage, которая предполагает перенос вычислений поближе к месту хранения данных, или, к примеру, для организации RDMA. Эксперименты в этих областях уже давно проводятся в том или ином виде: на днях мы писали про Samsung E-SSD с Ethernet-контроллером и поддержкой NVMe-oF, а ранее рассказывали о SmartSSD PM983F с FPGA на борту.

С приходом NVMe многоактуаторные жёсткие диски станут востребованными, а SMR, к примеру, хорошо подойдёт для зонирования. Однако безболезненным процесс унификации не будет. Seagate уже давно прорабатывает эту тему — доклад на нынешнем саммите является развитием прошлогодней презентации. Компания изучает возможные форм-факторы будущих NVMe HDD, но универсального решения нет — и у U.2, и у U.3, как у наиболее очевидных кандидатов, есть свои плюсы и минусы.

И, похоже, столь желанной стопроцентной совместимости с текущими СХД не добиться никак. Тем не менее, Seagate верит, что в дальней перспективе унификация на базе NVMe произойдёт — и гиперскейлеры, и корпоративные заказчики будут использовать одинаковый формат накопителей.

Когда появятся NVMe HDD? Представитель Azure полагает, что в течение 4-5 лет, а к концу десятилетия они могут стать массовыми. Seagate же говорит (но не обещает), что если будет интерес со стороны клиентов, то прототипы будут готовы уже в следующем году, а реальными такие диски могли бы стать в течение пары лет. Но все сходятся во мнении, что объединяться и действовать надо уже сейчас.

Форм-факторы EDSFF E3

Форм-факторы EDSFF E3

В ближайших планах стоит запрос к комитету NVM Express на формирование подгруппы. Правда, есть шанс, что в далёкой перспективе HDD всё же не смогут удержать низкую цену за терабайт и тогда вся эта инициатива окажется не нужна.

Постоянный URL: http://servernews.ru/1011148
08.05.2020 [00:03], Владимир Мироненко

Доминированию Amazon и Microsoft на европейском рынке облаков пока ничто не угрожает

Согласно данным аналитической фирмы Synergy Research, компании Amazon и Microsoft доминируют на европейском рынке облачной инфраструктуры. Вне зависимости от различия культур и экономического развития, существующего между европейскими странами, Amazon Web Services (AWS) является ведущим облачным провайдером, а Microsoft находится на втором месте по доходам.

Глобальные технологические гиганты и локальные облачные провайдеры сражаются за третье место, но лишь немногие имеют шансы бросить вызов AWS и Microsoft, занимающим ведущие позиции на всём континенте.

По словам Джона Динсдейла (John Dinsdale), главного аналитика Synergy Research Group, в ожесточённой борьбе за третье место чаще всего побеждает Google. Другими претендентами в Европе на высокие места в рейтинге тоже являются глобальные игроки — IBM, Rackspace, Salesforce, Oracle и SAP.

«Основную конкуренцию им оказывают местные игроки, зачастую работающие в основном в одной стране, включая крупных операторов и местных поставщиков ИТ-услуг. В эту группу входят Deutsche Telekom, OVH, Orange, KPN, Swisscom, Telecom Italia, Telefonica, British Telecom, Claranet и iomart», — рассказал Динсдейл.

Великобритания, Германия, Франция и Нидерланды были названы аналитиками Synergy четырьмя крупнейшими потребителями услуг облачной инфраструктуры, причем на эти четыре страны в совокупности приходится 63 % дохода, получаемого от облачных продаж.

Хотя Европа остается гораздо меньшим рынком для облачных сервисов, чем США, здесь наблюдаются более высокие темпы роста, на которые оказывают влияние крупнейшие игроки. «Нет недостатка в компаниях, борющихся за долю на рынке, но по всему региону шесть ведущих облачных провайдеров контролируют три четверти рынка, и их доля растет», — отметил Динсдейл.

«Учитывая важность масштаба, глобального присутствия и денежных ресурсов, любому из небольших облачных провайдеров будет сложно изменить эту ситуацию», — добавил он.

Постоянный URL: http://servernews.ru/1010420
07.05.2020 [14:29], Владимир Мироненко

Microsoft откроет новый, 60-й по счёту облачный регион в Новой Зеландии

Несмотря на то, что перспективы дальнейшего развития мировой экономики в связи с пандемией коронавируса остаются неопределёнными, в одной из областей ИТ-индустрии — облачных вычислениях — продолжает наблюдаться рост.

Именно поэтому Microsoft, сообщившая о росте доходов от облачных служб Azure на 59 % за последний квартал, объявила о планах открыть новый облачный регион и ЦОД в Новой Зеландии после получения одобрения Офиса зарубежных инвестиций страны.

Scott E Barbour / Getty Images

Scott E Barbour / Getty Images

Как отметил в Твиттере генеральный директор Microsoft Сатья Наделла (Satya Nadella), это должно помочь компаниям Новой Зеландии, находящимся в процессе цифровой трансформации. «Сейчас, более чем когда-либо, мы видим мощь цифровой трансформации, и сегодня мы объявляем о новом регионе центров обработки данных в Новой Зеландии, чтобы помочь каждой организации в стране создать свои собственные цифровые возможности», — сообщил Наделла.

Компания намерена сделать больше, чем просто построить новую площадку. Строительство является лишь частью более объёмных инвестиций по всей стране, включая финансирование обучения навыкам и способствование снижению вредного воздействия ЦОД на окружающую среду.

С появлением ЦОД в Новой Зеландии компания будет иметь 60 облачных регионов, охватывающих 140 стран мира. Новая площадка будет предназначен не только для служб Azure. Она также поможет клиентам использовать Office 365 и продукты Dynamics 365.

Постоянный URL: http://servernews.ru/1010370
06.05.2020 [23:43], Игорь Осколков

$100 тыс. за взлом Linux: Microsoft предлагает обойти защиту Azure Sphere OS

Microsoft расширяет программу поиска уязвимостей в рамках Azure Security Lab, анонсированную на прошлогодней конференции Black Hat. Тогда, напомним, корпорация подняла максимальный размер выплат за найденные баги до $40 тыс. Кроме того, иногда организуются специальные соревнования по поиску проблем в конкретных продуктах и сценариях работы.

На этот раз Microsoft предлагает «проверить на прочность» Azure Sphere OS — первую в истории компании публично доступную ОС на базе ядра Linux.

Azure Sphere OS предназначена для индустриального Интернета вещей. Программно-аппаратная платформа включает одобренную Microsoft специализированную SoC со встроенными средствами безопасности и связи, на которой запускается ОС и которая подключается непосредственно к облаку Azure. В данном случае Microsoft хочет, чтобы исследователи изучили безопасность именно ОС, а не пытались атаковать облачную или аппаратную части.

Если точнее, речь идёт о двух компонентах. Первый — подсистема безопасности Microsoft Pluton. Она отвечает за генерацию и хранение криптоключей, включает в себя генератор истинно случайных чисел и акселератор криптографических функций. Работает она на отдельном ядре, а уникальная пара ключей, которая впоследствии поможет идентифицировать и обезопасить конкретный чип, генерируется Pluton ещё во время изготовления SoC, навсегда сохраняется в её недрах и не доступна снаружи. Подсистема отвечает и за обнаружение попыток вмешательства в работу платформы.

Второй компонент — безопасная «песочница» Secure World, где могут выполняться только приложения от самой Microsoft, в частности, монитор безопасности. На первый взгляд вся эта цепочка достаточно хорошо защищённой. Однако именно это и предстоит выяснить исследователям. За взлом защиты любого из этих двух компонентов и запуск собственного кода корпорация готова заплатить до $100 тыс.

Постоянный URL: http://servernews.ru/1010315
30.04.2020 [14:44], Игорь Осколков

Доступна новая версия Veeam Backup для Microsoft Azure

Компания Veeam, разработчик решений резервного копирования и систем управления данными, объявила о доступности новой версии Veeam Backup для Microsoft Azure, облачного решения корпоративного уровня для резервного копирования и восстановления. Новинка позволит заказчикам перенести больше приложений и данных в облако Azure, упростив вместе с тем их защиту.

Несмотря на то, что облачные провайдеры обеспечивают бесперебойность работы инфраструктуры, ответственность за данные всё равно несут в первую очередь заказчики.

Поэтому даже в облаке необходимо иметь инструменты защиты от случайных или преднамеренных порчи, удаления, нарушения целостности данных по вине пользователей или третьих лиц. Veeam Backup предоставляет данные инструменты для Microsoft Azure.

«Согласно исследованию Veeam Cloud Data Management Report, все организации сталкиваются с проблемой потери данных в облаке, — заявил Денни Аллан, СТО Veeam. — Вне зависимости от причин, будь то ошибки, случайное удаление, угрозы безопасности, такие как вредоносное ПО или программы-вымогатели, проблемы с хранением и т.д., обязанность по защите данных лежит на самой компании, вне зависимости от того, где находятся ее данные — локально или в облаке. Наши решения устраняют проблемы и сложности, с которыми сталкиваются ИТ-специалисты при повышении надежности, снижении стоимости и сокращении времени восстановления данных. Новая версия Veeam Backup для Microsoft Azure позволяет лучше контролировать расходы и достигать большей экономии, обеспечивая контроль над данными в облаке и защищая Azure наряду с другими облачными, виртуальными и физическими приложениями и данными».

Новое решение тесно интегрировано с облачной платформой Microsoft и доступно в Azure Marketplace. Veeam Backup автоматизирует процесс создания снапшотов и позволяет чаще создавать точки восстановления. Резервные копии можно сохранять в разные учётные записи и с дополнительной многофакторной аутентификацией для повышения уровня защищённости.

Бэкапы создаются в специальном переносимом формате и в рамках Azure отправляются в экономичное хранилище Blob. Можно хранить копии сразу в нескольких облачных регионах, у нескольких облачных провайдеров сразу или в собственной инфраструктуре on-premise.

Veeam Backup для Microsoft Azure доступен как в платной, так и в бесплатной версиях. Бесплатная версия не ограничивает число восстановлений, но позволяет обслуживать не более 10 инстансов Azure. Для платной же необходима Универсальная лицензия Veeam (VUL), и она может интегрироваться с Veeam Backup & Replication.

Постоянный URL: http://servernews.ru/1009855
25.04.2020 [20:42], Владимир Фетисов

Крупнейшие облачные провайдеры проходят испытание коронавирусом

Пандемия коронавируса COVID-19 во многом изменила мир. Большинству компаний, чьи сотрудники перешли на удалённую работу, приходится ускорять темпы внедрения облачных сервисов. Однако сложившаяся ситуация не только стимулирует рост, но также является настоящим испытанием для провайдеров, поскольку спрос на их услуги взлетел до беспрецедентного уровня.

В сложившейся ситуации значительно вырос спрос на приложения для совместной работы, такие как Cisco Webex, Slack, Zoom и Amazon Chime, но облачные вычисления используются не только в бизнесе.

В равной степени увеличивается объём услуг, ориентированных на простых потребителей. За последние недели резко возросла популярность сервисов потокового вещания, таких как Netflix, Disney+ и Hulu, а также игровых онлайн-сервисов. Кроме того, люди всё чаще пользуются онлайн-доставкой, образовательными инструментами, информационными сервисами и др.

Независимо от того, на бизнес или потребителей ориентирована услугу, её базовой платформой зачастую является именно облако. Как правило, облачные услуги в большинстве случаев предоставляются тремя основными игроками этого сегмента рынка: Amazon Web Services (AWS), Google Cloud Platform (GCP) и Microsoft Azure. Даже использующие собственные облака компании обычно дополняют их мощностями одного из упомянутых поставщиков. Увеличившаяся за последнее время нагрузка показывает, насколько крупнейшие провайдеры готовы к этому.

eWeek отмечает, что за последнее время было зафиксировано несколько крупных сбоев в работе сервисов Azure. Скорее всего, Microsoft решила оставить в приоритете свои облачные приложения, такие как Office 365 и Teams. Если это так, то критически важные рабочие нагрузки клиентов отодвигаются на второй план, что может оказать негативное воздействие на дальнейший рост направления.

Отмечается, что GCP справляется лучше Azure с возросшей нагрузкой, но и у неё были некоторые проблемы. Появлялись сообщения о кратковременных сбоях в работе Gmail, Snapchat и Nest. В отчёте отмечалось, что сбои произошли «после периода интенсивного роста веб-трафика». Сбой в работе, зафиксированный 26 марта, привёл к прерыванию стабильной работы облачных сервисов Google во многих регионах, в том числе в Европе и Австралии.

Что касается AWS, то платформа продолжает оставаться лидером рынка по всем показателям. Amazon своевременно подготовилась к тому, что спрос на облачные услуги может резко возрасти, поэтому платформа компании лучше других справляется с возросшей нагрузкой. В настоящее время AWS обслуживает крупнейших поставщиков олайн-сервисов, таких как Netflix или Slack и продолжает расширять бизнес, наращивая своё присутствие в разных регионах. Каких-либо критичных сбоев или проблем с доступностью сервисов, построенных на базе AWS, замечено не было.  

Ситуация, которую вызвала пандемия коронавируса, стала настоящим испытание для публичных облачных платформ, поскольку возросшие нагрузки демонстрируют любые недостатки. И хотя ни один облачный провайдер не идеален, AWS, похоже, лидирует на рынке, а GCP и Azure идут следом за ним.

Постоянный URL: http://servernews.ru/1009425
11.04.2020 [00:44], Алексей Степин

HANA всем: в Microsoft Azure появились 9-Тбайт инстансы с Intel Optane DCPMM

Ещё в 2019 году Microsoft Azure анонсировала инстансы SAP HANA Large. В основу платформы легли процессоры Intel Xeon Scalable второго поколения, поддерживающие, в числе прочего, модули Optane DCPMM. Теперь же Azure объявила о доступности новых, ещё более крупных с точки зрения объёма памяти вариантов ВМ.

Нагрузки SAP HANA создаёт весьма серьёзные, особенно в случаях, когда речь идёт о задачах класса high availability/disaster recovery (HA/DR). Здесь нуждающимся в подобного масштаба услугах должна прийти на помощь новая услуга HANA Large with Intel Optane PMem.

Инстансы на базе S224: четыре варианта из семи используют Optane PMem

Инстансы на базе S224: четыре варианта из семи используют Optane PMem

Разработка новой платформы для SAP HANA велась совместными силами троих разработчиков: SAP, Intel и Microsoft Azure. Помимо того, что упростилась программная архитектура, удалось снизить и стоимость владения (TCO) за счёт того, что Optane дешевле того же объёма DRAM. Всего MS Azure теперь предлагает семь вариантов S224 HANA Large, с объёмами памяти от 3 до 9 Тбайт; объём памяти Optane — 3 или 6 Тбайт.

Узел с Optane ускоряет загрузку данных в случае сбоя и уменьшает стоимость владения в целом

Узел с Optane ускоряет загрузку данных в случае сбоя и уменьшает стоимость владения в целом

Соотношение DRAM к DCPMM может составлять 1:1, 1:2 или 1:4, так что заказчик может сконфигурировать инстанс в соответствии со своими потребностями. В задачах, требующих быстрого аварийного восстановления, новым инстансам нет равных: если классический вариант после системной перезагрузки восстанавливался за 44 минуты, то версия на базе Optane справлялась за 2 минуты, то есть в 22 раза быстрее — за счёт отказа от необходимости заново загружать данные с обычных накопителей.

Новая услуга доступна в тех же регионах, что и предыдущие реализации HANA Large. DCPMM-модули SAP HANA поддерживает с версии 2.0 SPS 03, но к использованию рекомендуется версия 2.0 SPS 04, которую нужно соответствующим образом сконфигурировать, чтобы она распознала наличие в системе памяти Optane DCPMM.

Сами модули в режиме Application Direct поддерживаются операционными системами Red Hat Enterprise Linux версии от 7.6 и выше, а также SUSE Linux Enterprise Sever версий 12 SP4, 15 и выше. Руководство по использованию SAP в облачных системах Azure можно скачать с сайта Azure.

Постоянный URL: http://servernews.ru/1008150
07.04.2020 [20:15], Владимир Мироненко

Из-за коронавируса Microsoft Azure испытывает нехватку мощностей в европейских ЦОД

После ввода мер по социальному дистанцированию по всей Европе компаниям пришлось оперативно менять формат работы своего персонала, находившегося в основном в офисах, на удалённый. Это изменение в формате работы привело к росту спроса предприятий на сервисы, размещаемые в публичных облачных средах.

И последствия этого сейчас остро ощущаются операторами центров обработки данных.

Причём настолько сильно, что, например, Microsoft ввела регулирование доступа к облаку с предоставлением приоритета для критически важных групп пользователей и существующих клиентов. В частности, как сообщает компания, существует вероятность того, что клиенты с бесплатными аккаунтами в настоящее время не смогут воспользоваться новыми вычислительными ресурсами.

«Спасибо за ваше понимание, поскольку мы внедряем необходимые и разумные меры для поддержания доступности сервисов и определения приоритетов для служб скорой помощи, служб здравоохранения и управления в чрезвычайных ситуациях, критически важной государственной инфраструктуры и существующих клиентов», — обратился к клиентам представитель Microsoft.

Это объяснение появилось после сообщений в социальных сетях пользователей публичной облачной платформы Microsoft Azure о том, что они получали уведомление об ошибке при попытке развернуть виртуальные машины в европейских регионах. В своем блоге Microsoft подтвердила, что она работает над «ускорением развёртывания новых мощностей» в ближайшие недели, поскольку спрос на услуги облачной инфраструктуры Azure растёт наряду с ростом использования других SaaS-предложений (программное обеспечения в качестве услуги).

В свою очередь, служба Amazon Web Services (AWS) в ответ на просьбу ресурса Computer Weekly прокомментировать ситуацию заявила следующее: «Мы приняли меры для подготовки и уверены, что сможем удовлетворить потребности клиентов в ёмкости на фоне пандемии COVID-19». 

Что касается Google Cloud, то этот сервис пока не предвидит никаких проблем с ёмкостью ЦОД. «У нас есть ряд рычагов, которые мы можем использовать, чтобы предотвратить сбои в обслуживании и обеспечить доступ критических рабочих нагрузок к достаточной ёмкости, чтобы оставаться доступными и работоспособными», — отметила компания.

Постоянный URL: http://servernews.ru/1007802
03.04.2020 [17:00], Владимир Мироненко

От микроконтроллера до облака один шаг: Microsoft Azure RTOS получит поддержку лидеров рынка полупроводников

Microsoft Azure объявила о расширении сотрудничества с лидерами полупроводниковой отрасли — STMicroelectronics, Renesas, NXP, Microchip и Qualcomm, занимающими большую часть рынка микроконтроллеров (MCU). Ранее Microsoft приобрела Express Logic, разработчика популярной ОС реального времени (RTOS) ThreadX для устройств Интернета вещей (IoT) и MCU. 

Вслед за этим в прошлом году была представлена Azure RTOS. А теперь производители MCU в сотрудничестве с Microsoft будут предлагать средства разработки Azure RTOS/ThreadX с поддержкой большинства ведущих архитектур. 

По словам компании, это позволит разработчикам встраиваемых систем обеспечивать надёжность и производительность в режиме реального времени для устройств с ограниченными ресурсами, а также бесшовную интеграцию с IoT-возможностями Azure для подключения, мониторинга и управления глобальным парком ресурсов Интернета вещей.

Microsoft также выложит исходный код всех компонентов Azure RTOS на GitHub, что позволит разработчикам свободно исследовать, разрабатывать, тестировать и адаптировать ОС в соответствии со своими потребностями. Azure RTOS в сочетании с Azure Sphere позволит разработчикам встраиваемых систем быстро создавать хорошо защищённые устройства Интернета вещей даже для самых требовательных сред.

Предусмотрено и автоматическое лицензирование для решений на любом из поддерживаемых устройств с MCU компаний STMicroelectronics, Renesas, NXP, Microchip или Qualcomm. Если разработчики предпочитают использовать другие компоненты, они смогут связаться с Microsoft для получения подробной информации о лицензировании. 

Azure RTOS будет включать в себя простые в использовании эталонные проекты и шаблоны для подключения к службам Azure IoT Hub, Azure IoT Central, Azure IoT Edge Gateways, а также для интеграции с Центром безопасности Azure. Вскоре Azure RTOS будет поставляться с модулем Azure Security Center для мониторинга угроз и уязвимостей на устройствах Интернета вещей.

«Наше видение заключается в том, чтобы Azure стала глобальным компьютером, предоставляя предприятиям возможность в режиме реального времени отслеживать все аспекты своих операций, активов и продуктов. Предприятия используют сигналы от устройств Интернета вещей всех форм и размеров, от самых маленьких MCU до очень эффективных микропроцессорных блоков (MPU). Это открывает прекрасную возможность для сотрудничества между производителями полупроводников, обладающими обширным опытом в области микроконтроллеров и микропроцессоров, и Azure IoT, лидером в области Интернета вещей», — указано в официальном заявлении Microsoft.

Постоянный URL: http://servernews.ru/1007490
Система Orphus