Материалы по тегу: ibm

01.07.2020 [20:50], Алексей Степин

IBM открыла ядро своих POWER-процессоров для суперкомпьютеров BlueGene/Q

Господству x86, пожалуй, куда больше угрожает семейство архитектур ARM, нежели POWER, однако в рамках проекта OpenPOWER экосистему можно назвать живой, тем более что среди активных вкладчиков есть европейская лаборатория открытых компьютерных архитектур. Архитектура POWER по решению IBM стала открытой ещё в августе прошлого года и сейчас плоды этого решения начинают появляться.

На проходящем сейчас саммите Linux Foundation Open Source было анонсировано новое открытое процессорное ядро A2I, базирующееся на этой архитектуре. Новая разработка предназначена для заказных и встраиваемых систем-на-чипе (SoC) сравнительно небольшой мощности.

A2I не поддерживает внеочередного исполнения инструкций, но мультипоточность в нём реализована, а главный упор сделан на увеличение пропускной способности по всем каналам передачи данных, что немаловажно для активно растущего сегмента периферийных вычислений.

В основу дизайна A2I легло ядро Edge-of-Network под названием PowerEN, которое использовалось в процессорах общего назначения POWER-A2 в составе HPC-систем и суперкомпьютеров серии IBM BlueGene/Q. Что удивительно, данное ядро не поддерживает спекулятивное исполнение команд, то есть оно не подвержено уязвимостям класса Spectre/Meltdown.

Сам дизайн A2I является модульным, что позволяет создавать оптимизированные под конкретную задачу SoC. Процессор может быть дополнен «вспомогательным исполнительным блоком» (Auxiliary Execution Unit), тесно связанным с основным ядром. Набор инструкций соответствует спецификациям PowerISA v2.06 в 64-битном варианте.

Порядок байт в системах Big Endian и Little Endian

Порядок байт в системах Big Endian и Little Endian

Изначально ядро данной серии разрабатывалось под 45-нм техпроцесс, но даже тогда оно имело площадь всего 2,9 мм2 и при частоте 2,3 ГГц укладывалось в теплопакет менее 1 Ватта; ожидается, что применение современных 7-нм производственных норм позволит довести эти показатели до 0,17 мм2 и 0,5 Ватта при частоте 4,2 ГГц. Четырёхъядерный чип с поддержкой SMT4 может уложиться в 2 Ватта.

Предусмотрены кеши инструкций и данных объёмом 16 Кбайт каждый, объём кешей других уровней, по-видимому, оставлен на усмотрение разработчика. Имеется встроенный MMU, способный адресовать до 4 Тбайт физической памяти. Процессор может работать в обоих режимах endian: big и little. Ядро A2I стало полностью открытым, и вся информация о нём содержится в соответствующем репозитории GitHub.

При этом надо понимать, что открыто только ядро, а не процессор POWER-A2 целиком. Последний состоял из 18 ядер, одно из которых было служебным, а ещё одно — запасным. L1-кеш был представлен SRAM, а L2 состоял из eDRAM. Помимо обычных ядер в нём имелись отдельные акселераторы для работы с XML, шифрования, компресии и обработки регулярных выражений, а также 4 канала 10GbE. По отзывам тех лет, процессор был невероятно сложным, но, как показала практика, в конечном итоге достаточно эффективным.

Постоянный URL: http://servernews.ru/1014711
29.06.2020 [23:13], Владимир Мироненко

IBM Research выпустила открытую библиотеку дифференциальной конфиденциальности с поддержкой машинного обучения

IBM выпустила библиотеку дифференциальной конфиденциальности (или приватности) с открытым исходным кодом, которая, по словам Наоиса Холоана (Naoise Holohan), сотрудника исследовательской группы IBM Research Europe по вопросам конфиденциальности и безопасности, обладает набором инструментов для решения задач машинного обучения и анализа данных со встроенными гарантиями конфиденциальности.

«Наша библиотека уникальна, она дает ученым и разработчикам доступ к упрощённым, удобным для использования инструментам для анализа данных и машинного обучения в знакомой среде — на самом деле, большинство задач можно решить одной строкой кода», — поясняет Холоан в блоге. Он добавил, что отличие библиотеки также заключается в том, что имеющаяся функция машинного обучения позволяет организациям публиковать и делиться своими данными, сохраняя полную гарантию конфиденциальности пользователей.

В интервью Холохан говорит, что технология дифференциальной приватности стала настолько популярной, что впервые за 230-летнюю историю переписи населения США её будут использовать для обеспечения конфиденциальности данных граждан. Крис Скиакка (Chris Sciacca), менеджер по коммуникациям IBM Research, добавил, что перепись 2020 года является хорошим примером того, как можно использовать дифференциальную конфиденциальность для любых больших наборов данных, когда вы можете производить статистический анализ. Он отметил, что эта технология также может быть востребована при сборе и анализе медицинских данных.

Дифференциальная конфиденциальность позволяет вносить в данные математический шум для анонимизации информации, и особенность библиотеки IBM заключается в том, что ее функциональность машинного обучения позволяет организациям публиковать и делиться своими данными со строгими гарантиями конфиденциальности пользователей. По словам Скиакка, начиная работу над проектом, учёные отметили, что, хотя проделано немало исследований в этом направлении, не было ни одного репозитория или единой библиотеки, позволяющей перейти к машинному обучению с дифференциальной конфиденциальностью.

«Мы решили создать библиотеку, которая, используя существующие пакеты Python, позволяет вам сделать простую надстройку над ними, а затем выполнять машинное обучение со встроенными дифференциальными гарантиями конфиденциальности. Многие команды вы можете выполнить в одной строке кода, поэтому она очень удобна для пользователя. Она проста в использовании и может быть легко интегрирована в имеющиеся скрипты, поэтому не потребуется много дополнительных усилий», — рассказал Крис Скиакка.

В прошлом году Google выпустила свою библиотеку дифференциальной конфиденциальности с открытым исходным кодом, которая используется для её различных сервисов. Например, с её помощью Google анонимно отслеживает данные о том, когда большинство людей едят в определённом ресторане или занимаются шоппингом в популярном магазине. В 2014 году компания использовала эту технологию для усовершенствования браузера Chrome, а также сервиса Google Fi. Apple и Uber тоже используют собственные реализации технологии дифференциальной конфиденциальности для оптимизации своих сервисов и защиты данных пользователей.

Постоянный URL: http://servernews.ru/1014530
16.06.2020 [13:06], Юрий Поздеев

Слухи: IBM планирует купить Cloudera за 5 миллиардов долларов

Недавно мы писали о назначении нового генерального директора IBM Арвинда Кришна (Arvind Krishna), который поменял стратегию развития компании, сделав ставку на гибридное облако. Похоже, эта стратегия начинает притворяться в жизнь: из неофициальных источников стало известно, что IBM ведет переговоры с Cloudera о покупке компании.

Эксперты оценивают сумму сделки в 5 миллиардов долларов. Но для начала несколько слов о Cloudera: это компания-разработчик Hadoop-решений и собственной корпоративной платформы для управления данными, основную прибыль получает от оказания технической поддержки (бизнес-модель схожа с Red Hat).

Последние годы дела у компании шли не очень, хотя после слияния с конкурентом Hortonworks в 2018 году, Cloudera уменьшила чистые убытки с 369,7 до 193,6 миллионов долларов, выручка за 2019 год выросла с 373,3 до 479,9 миллионов долларов. Как мы видим, финансовые показатели компании улучшаются, однако недостаточно, чтобы выйти в плюс, а давление инвесторов на компанию огромное.

На днях Cloudera анонсировала новую версию своей платформы CDP Private Cloud, которая базируется на Red Hat Open Shift и, по заверениям компании, завершает формирование «корпоративного облака данных». CDP Private Cloud объединяет в себе облачное хранилище, службу машинного обучения и аналитику данных, которые работают в отдельных контейнерах.

Эта платформа прекрасно бы вписалась в экосистему IBM, владеющей Red Hat, на базе решений которой и строится CDP. Поэтому покупка выглядит вполне логичным шагом. У IBM наметились некоторые проблемы с ростом, при этом объем свободных финансов превысил 12 миллиардов долларов, что делает выход на новые рынки просто необходимым шагом.

Постоянный URL: http://servernews.ru/1013506
04.06.2020 [07:57], Юрий Поздеев

IBM Storage ускорит обработку данных благодаря NVIDIA A100

Портфель решений IBM Storage для больших данных и ИИ теперь включает в себя недавно анонсированную модель NVIDIA DGX A100, которая предназначена для ускорения аналитики и задач с использованием ИИ. Компания позиционирует Storage for Data and AI как компонент для трехэтапной обработки информации: Ingest, Transform, Analyse/Train.

В эту архитектуру включены следующие системы:

  • Cloud Object Storage (COS): объектное облачное хранилище данных;
  • Spectrum Discover: ПО для каталогизации и индексации файлов;
  • Spectrum Scale: масштабируемое параллельное файловое хранилище;
  • ESS 3000: all-flash NVMe СХД с установленным ПО Spectrum Scale с 24 отсеками под накопители в форм-факторе 2U;
  • Spectrum LSF (Load Sharing Facility): система управления рабочими нагрузками и планирования заданий на основе политик для высокопроизводительных вычислений.

IBM планирует хранить данные в COS (он будет функционировать как Data Lake), где их будет индексировать с попутным добавлением метаданных Spectrum Discover. LSF управляет процессами машинного обучения, а Spectrum Discover перемещает необходимые данных из COS в ES3000 с помощью Spectrum Scale. Ну а данные с ES3000 отправляются на серверы DGX A100 для обучения ИИ-моделей.

Мы уже писали про новый сервер DGX-A100 от Nvidia на базе ускорителей A100, которые, по заявлениям самой Nvidia, до 20 раз быстрее, чем Tesla V100 прошлого пооколения. Применение такого мощного сервера, без сомнения, ускорит обработку данных и позволит IBM расширить свое влияние на рынке ИИ, HPC и облачных систем.

Постоянный URL: http://servernews.ru/1012589
27.05.2020 [17:54], Юрий Поздеев

IBM возрождает Netezza в облачном формате

На странице корпоративных продуктов была размещена информация о Netezza, что ввело в некоторое замешательство клиентов IBM. Бренд Netezza формально покинул рынок летом прошлого года после двадцати лет развития, из которых почти десять он провёл под крылом IBM. 

После отказа от Netezza корпорация предложила клиентам воспользоваться IIAS в качестве замены, хотя далеко не все оказались рады такому предложению. 

Для начала пару слов о том, чем же была Netezza в прошлом: компания, основанная в 1999 году, разработала программно-аппаратный комплекс хранения данных (кластер серверов реляционных баз данных), обеспечивающих массивно-параллельную обработку. Отличительной особенностью Netezza было использование FPGA на узлах обработки данных, обеспечивающих сжатие и фильтрацию информации, что позволяло значительно увеличить производительность системы. Устройства Netezza активно развивались и имели большой успех у многих крупных заказчиков (например, Amazon).

После того, как IBM приобрела Netezza в 2010 году, она не стала уж слишком активно вкладываться в развитие этой системи, а  со временем предложила клиентам перейти на продукты IBM Integrated Analytics System (ISA), что не было с восторгом воспринято клиентами, которые уже вложились во внедрение комплекса. Как альтернативу, IBM предлагала использовать DB2 Warehouse on Cloud (Db2WoC), однако вряд ли ее можно назвать полноценной заменой Netezza.

Теперь — судя по всему, под давлением клиентов — IBM заявляет о возрождении Netezza в облачном формате, что позволит клиентам, до сих пор использующих эти системы, воспользоваться простым переносом данных на платформу IBM Cloud Pak. Вероятно, ранее поддержка FPGA в IBM Cloud Pak for Data System появилась не просто так. Клиентам обещан полностью бесшовный переход без прерывания доступа к данным и с улучшением производительности.

Новое решение позволит использовать Netezza и в частном, и в гибридном облаке. Этот шаг выглядит немного странным, ведь стратегия IBM была основана на полном замещении Netezza своими продуктами ISA и Db2WoC, которые активно развивались и продвигались компанией. Будем следить за развитием ситуации, однако не стоит надеяться на полноценное возрождение Netezza, ведь после ее поглощения, многие технологии легли в основу других решений IBM, а выпускать два конкурирующих между собой продукта компания не будет.

Постоянный URL: http://servernews.ru/1011994
07.05.2020 [15:15], Алексей Степин

Мейнфрейм в кармане: энтузиаст эмулирует IBM System/370 на Raspberry Pi Zero

При слове «мейнфрейм» обычно в сознании возникает целый зал, заставленный стойками с вычислительным оборудованием. Обычно это так и есть — даже современная система IBM System z в самом дешёвом варианте занимает как минимум один 19-дюймовый шкаф.

Однако прогресс в вычислительной технике хорошо иллюстрирует проект Брайена Роммеля (Brian Roemmele): крошечная платка Raspberry Pi Zero уже пять лет успешно используется им как эмулятор мейнфрейма IBM System/370.

IBM System/370-145: один из самых компактных вариантов

IBM System/370-145: один из самых компактных вариантов

Сама система IBM System/370 была впервые представлена летом 1970 года в качестве развития весьма успешной System/360. Она относится к компьютерам третьего поколения и в ней активно используются интегральные схемы. Также это первая система, в которой впервые была использовала полупроводниковая память.

Серия System/370 успешно прослужила до 1990 года, когда на смену ей была выпущена новая серия мейнфреймов System/390. Варианты поздних восьмидесятых, такие как IBM 3090, поддерживали до шести процессоров.

Raspberry Pi Zero: в семь раз быстрее оригинала

Raspberry Pi Zero: в семь раз быстрее оригинала

Для сравнения, Raspberry Pi Zero — один из самых дешёвых вариантов микрокомпьютера. Крошечная плата имеет размеры всего 65 × 30 миллиметров. На ней располагается процессор Broadcom BCM2835, имеющий всего одно 32-битное ядро ARMv6Z с частотой 1ГГц и видеоядро VideoCore IV. Система потребляет менее 2 Ватт под нагрузкой — сравните с System/370 Model 168, которая потребляет до 97 кВт и требует специальной организации питания, но при этом имеет всего 4 Мбайт памяти против 512 Мбайт у Pi Zero.

Эмуляция на базе Raspberry Pi Zero используется для запуска программного обеспечения, написанного с использованием Job Control List (JCL) на языке COBOL. Согласно автору проекта, миллионы срок наследного кода без проблем выполняются на крошечном устройстве, питающемся от батареи. Как уже упоминалось выше, такая система потребляет в 50 тысяч раз меньше энергии, и, по словам энтузиаста, работает в 7 раз быстрее оригинальной IBM System/370. Для эмуляции, в числе прочего, автор рекомендует проект MVS 3.8j Tur(n)key 4.

Постоянный URL: http://servernews.ru/1010377
02.05.2020 [21:02], Алексей Степин

Суперкомпьютер Summit вошёл в список Graph500, задействовав половину своих возможностей

Граф — важное понятие в математике и информационных технологиях, позволяющее удобно описывать взаимные связи между множеством объектов. Неудивительно, что существует отдельный рейтинг Graph500, оценивающий производительность суперкомпьютеров именно на операциях с графами.

Суперкомпьютер Summit, смонтированный в Национальной лаборатории Ок-Ридж и занимающий первую строчку в списке TOP500, дебютировал и в Graph500 — впервые в своей истории. При этом он доказал высокую эффективность в задачах подобного рода.

Summit, он же OLCF-4, уже доказал своё право на лидерство в TOP500 и подтвердил высокую эффективность своей гибридной архитектуры, основой которой являются два типа процессоров: IBM POWER9 и NVIDIA Tesla V100. В свежей версии Summit сумел  сразу же занять четвёртое место. Это весьма достойный результат.

Основой тестов Graph500 служит задача о вычислении графа с более чем миллиардом вершин, между которыми имеется примерно 16 миллиардов связей. Для решения данной задачи в Summit задействовалось 86016 процессорных ядер — речь идёт только о традиционных процессорах, но не о ГП-ускорителях. Это примерно 45% всех мощностей суперкомпьютера. Для сравнения, лидер этого списка, китайский суперкомпьютер Sunway TaihuLight использовал свыше 10 миллионов вычислительных ядер (точное число — 10599680 ядер).

Главный соперник Summit, Sunway TaihuLight

Главный соперник Summit, Sunway TaihuLight

Таким образом, удельная производительность Summit оказалась существенно выше, что объяснимо как большей архитектурной сложностью POWER9 в сравнении с достаточно простой RISC-архитектурой процессоров Sunway SW26010, так и более высокой эффективностью межузловых подсистем связи суперкомпьютера. Любопытно, что 2 и 3 места принадлежат системам c процессорами IBM, это машины Blue Gene/Q, установленные в Аргоннской национальной лаборатории и Ливерморской национальная лаборатории им. Э. Лоуренса (LLNL).

Постоянный URL: http://servernews.ru/1009975
23.04.2020 [20:32], Рамис Мубаракшин

Первый пошёл: IBM Watson меняет прописку из-за Brexit'а и GDPR

IBM объявила о перемещении своего облачного GPU-кластера из Великобритании в германский город Франкфурт. Если бы компания не приняла такое решение, европейские пользователи потеряли бы доступ к облачным технологиям Watson Machine Learning.

А все потому, что в январе 2020 года Великобритания вышла из Евросоюза, где действует Общий регламент защиты персональных данных (GDPR). Это постановление требует, чтобы данные европейских пользователей обрабатывались только на территории 27 европейских государств.

У IBM ещё есть время для перемещения мощностей в Европу. В конце января 2020 года Великобритания потеряла представительство и право голоса в органах власти, но осталась частью единого экономического пространства. Таким образом, она полностью «потеряет связь» с Евросоюзом только в конце 2020 года.

Уже в 2021 году Великобритания станет для стран Евросоюза «третьей стороной». Согласно GDPR, европейские пользователи не смогут передавать свои приватные данные сервисам, расположенным в Великобритании. При всем этом регламент не запрещает европейским странам получать информацию извне, то есть британские пользователи и заказчики из других стран смогут пользоваться после переезда мощностями IBM как и раньше.

Представители IBM сообщили, что после завершения работы британского кластера пользователям по обе стороны Ла-Манша будет необходимо создать инстанс Watson Machine Learning во Франкфурте. Его будет необходимо использовать для всех новых задач и, при возможности, сохранять промежуточные результаты всех текущих задач в Лондоне. Также IBM сообщила, что пользователям не нужно будет заниматься перемещением данных. 

Судя по всему, другие поставщики облачных технологий, имеющие вычислительные мощности в Великобритании, тоже будут вынуждены переместить часть из них на территорию стран Евросоюза.

Постоянный URL: http://servernews.ru/1009259
21.04.2020 [14:22], Владимир Мироненко

Не помогло и облако — у IBM самый низкий доход в этом столетии

IBM объявила итоги работы в первом квартале 2020 года. Ранее появилась надежда на то, что IBM после 5 кварталов непрерывного снижения начнёт наращивать доходы, но этого не произошло. Выручка компании составила $17,57 млрд, что на 3,4 % меньше показателя за аналогичный период прошлого года, а также немного ниже прогноза аналитиков в $17,62 млрд, согласно данным IBES от Refinitiv.

В итоге, несмотря на рост продаж Red Hat, увеличивших доход её облачного бизнеса, первый квартал 2020 года стал самым худшим по продажам в этом столетии.

Janice Lim/TODAY

Janice Lim/TODAY

Продажи облачного и когнитивного программного обеспечения (Cloud & Cognitive Software), включая недавно приобретенную компанию Red Hat, составили $5,24 млрд, что на 5 % больше, чем в первом квартале прошлого года, хотя и ниже ожиданий аналитиков, прогнозировавших $5,3 млрд выручки. Вместе с тем группа Cloud & Data Platform в этом сегменте, возглавляемая Red Hat, увеличила доходы на 32 %.

Доход подразделения Systems в размере $1,37 млрд тоже оказался ниже прогноза аналитиков, равнявшегося $1,42 млрд, хотя и превысил прошлогодний показатель на 3 % больше благодаря серии мейнфреймов IBM Z. Доход службы IBM Global Technology Services, приносящей 37 % дохода IBM, продолжил снижение, составив в первом квартале $6,5 млрд, что на 6 % хуже прошлогоднего результата.

Выручка подразделения Global Business Services за отчётный квартал составила $4,14 млрд, превысив прогноз в размере $3,91 млрд. Сегмент Global Financing принёс компании $299 млн дохода, что на 26 % ниже показателя в аналогичном периоде прошлого года.

Прибыль компании за квартал равняется $1,18 млрд, или $1,31 на акцию, в то время как год назад у неё было $1,59 млрд прибыли или $1,78 на акцию. Скорректированная прибыль сократилась до $1,84 на акцию с $2,25 в первом квартале прошлого года.

Следует отметить, как и некоторые другие крупные корпорации, IBM отозвала прогноз на 2020 год в связи с неопределённостью из-за пандемии коронавируса, наносящей ущерб мировой экономике.

Постоянный URL: http://servernews.ru/1008996
15.04.2020 [23:00], Алексей Степин

Мейнфрейм, недорого: IBM представила z15 Model T02 и LinuxONE III Model LT2

Несмотря на торжество архитектуры x86, вычислений на графических процессорах и всеобщую унификацию, мейнфреймы сдаваться не собираются, поскольку есть ряд областей, где такие системы показывают себя лучше всего. В названии IBM System z последний символ означает «zero downtime», то есть, нулевое время недоступности. 

Компания продолжает развивать знаменитую серию и вчера объявила о расширении семейства мейнфреймов z15. Оно пополнилось двумя моделями начального уровня в стандартных 19" шкафах, использующих воздушное охлаждение — z15 Model T02 и LinuxONE III Model LT2.

z15 Model T02 (слева) и LinuxONE III Model LT2.

IBM z15 Model T02 (слева) и LinuxONE III Model LT2.

Сердцем этих машин является процессор z15, анонсированный 12 сентября 2019 года, имеющий 12 ядер с архитектурой z/Architecture и работающий на частотах до 5,2 ГГц. Компания-разработчик сделала вполне логичный шаг в сторону интеграции мейнфреймов с гибридными облачными средами, которые в некотором роде и являются идейными наследницами самой концепции мейнфрейма.

IBM z15: внутри «шкафа».

Благодаря стандартным габаритам, эти платформы легко могут быть установлены в любом облачном ЦОД, а при нужде — расширены с одной стойки до двух. Обе машины несут на борту 65 ядер z/Architecture 15 с частотой 4,5 ГГц и могут быть сконфигурированы практически под любую задачу. За счёт контейнеризации поддерживается запуск как родных z/OS-сред, так и, в случае с LinuxONE Model LT2, различных вариантов Linux, включая RHEL, SUSE и Ubuntu.

Процессорный модуль z/15 (данный вариант использует жидкостное охлаждение)

Процессорный модуль z/15 с четырьмя ЦП (данный вариант использует жидкостное охлаждение, но у новых недорогих систем оно воздушное)

IBM делает упор не только на надёжность и быстроту развёртывания, но и на безопасность. Системы поддерживают IBM Secure Execution for Linux — полностью изолированные виртуальные машины, запуск которых возможен только в хост-системе, для которой они подготовлены и сконфигурированы. Запустить или расшифровать такую VM вне конкретной машины z15 невозможно, так как все ключи хранятся «в железе». Более того, память виртуальной машины недоступна даже для хост-системы.

Процессоры IBM z/15 используют однокристальную компоновку

Процессоры IBM z/15 используют однокристальную компоновку

За управление контейнерами по-прежнему отвечает Kubernetes, однако доступа к данным внутри контейнеров Secure Execution у Kubernetes нет. Это немаловажно, поскольку мейнфреймы IBM серии z очень активно используются в различных задачах класса mission critical. Так, 48% ERP-систем, 45% систем учёта финансов и 43% систем управления коммерческим контентом по-прежнему работают на мейнфреймах IBM. Очень популярны эти системы и в среде блокчейн-проектов, именно в силу существенно более высокой в сравнении с традиционными x86-серверами степенью безопасности.

Ускоритель криптографических задач IBM Crypto Express 7S

Ускоритель криптографических задач IBM Crypto Express 7S

Иными словами, мейнфреймы вовсе не собираются сходить со сцены и активно развиваются, обрастая поддержкой новых технологий и становясь важной частью современной облачной парадигмы. Более подробно о новых моделях IBM z/15 можно на сайте компании-производителя. Стоимость систем стартует от $160 тыс., но каждая машина собирается под индивидуальный заказ, и цена может варьироваться.

Постоянный URL: http://servernews.ru/1008554
Система Orphus