Материалы по тегу: facebook

26.05.2020 [21:06], Алексей Степин

Facebook Yosemite и Delta Lake: OCP-платформы с Intel Xeon Cooper Lake

На прошлой неделе мы писали о решении ITRenew Sesame, которое позволит небольшим компаниями получить недорогое, но производительное б/у «железо» от Facebook и других гигантов. Особенность такого оборудования в том, что оно имеет OCP-исполнение.

И самый простой способ познакомиться с миром OCP — посмотреть на новые решения самой Facebook. Среди них есть одноюнитовое шасси Sonora Pass, но это не единственная новинка, использующая самые свежие CPU Intel Xeon Cooper Lake. Есть и специфичные для OCP платформы Yosemite v3 и Delta Lake.

Привычные нам стоечные форм-факторы серверов создавались в те времена, когда вопрос упаковки вычислительных мощностей не стоял столь остро, как сейчас. В лучшем случае, стандартный 19-дюймовый корпус может содержать системную плату с четырьмя процессорами, но чаще ограничен двухсокетными конфигурациями.

Facebook использует стандарт стоек Open Rack, главное в которых — возможность более плотного размещения серверов (21"), увеличение воздушного потока и единая шина питания (12 В DC). Yosemite v3 являет собой уже третье поколение серверных систем в этом стандарте.

В третьей версии 4 юнита вертикального пространства стойки вмещает в себя три модуля Yosemite v3. Каждый из этих модулей может включать в себя до четырёх сверхкомпактных серверов Delta Lake на базе новых процессоров Intel Cooper Lake-SP. Предусматриваются разные варианты модулей: классический «вычислительный» с четырьмя системными платами, вариант с собственным флеш-хранилищем, версия с акселераторами и модель с интегрированным сетевым коммутатором. В зависимости от решаемой задачи, стойка может включать различные сочетания Yosemite v3.

Два последних варианта предусматривают два процессорных гнезда вместо четырёх, но в них предусмотрено пространство для размещения ГП-ускорителей или собственной сетевой подсистемы, включающей в себя выделенные сетевые адаптеры и коммутатор. Все четыре варианта базируются на шасси высотой 4U и шириной в треть стойки, в верхней части которого размещается базовая плата с общим сетевым адаптером, а в задней — платы питания Medusa Board.

«Лезвия» с системными платами быстросъёмные. Основная модель «лезвия» носит название Delta Lake. Она представляет собой компактную системную плату с процессором Intel Xeon Scalable третьего поколения (Cooper Lake). Эти платы изначально создавались с прицелом на повышенный уровень производительности в системах машинного интеллекта и принятия решений.

За отвод тепла отвечает компактная, но мощная система охлаждения с четырьмя тепловыми трубками и дополнительными секциями радиаторов. Поддерживаются расширенные возможности удалённого управления и администрирования, имеется пара набортных разъёмов для накопителей типа M.2. Также платы Delta Lake поддерживают новый стандарт модулей Intel Optane DCPMM под кодовым названием Barlow Pass.

Помимо Yosemite v3, Facebook представила также новую платформу для запуска нейронных сетей (инеференс). Каждый модуль этой платформы состоит из системного модуля Yosemite v2.50 и модуля расширения Glacier Point v2, общающегося с ЦП посредством 16 линий PCI Express 3.0; особенный интерес представляет именно последний.

В этом модуле реализована возможность установки как стандартных одинарных модулей M.2 (теплопакет до 14 Ватт), так и двойных, с теплопакетом 25 Ватт. Всего модуль расширения может содержать до шести двойных или двенадцати одинарных плат с интерфейсом M.2. Два таких блока с модулями GPv2 устанавливаются в шасси Yosemite v2.50.

В сравнении с Yosemite v2 с 600 до 720 Ватт увеличена мощность подсистем питания, реализована поддержка 100GbE, сетевой контроллер подключён к процессору, а не к мосту PCH, как ранее.

Новая платформа для инференс-систем

Новая платформа для инференс-систем

В данном решении особый интерес вызывает поддержка M.2 двойной ширины. Сам по себе стандарт M.2 достаточно компактен, но ширина одинарной платы означает и ограничение по габаритам чипа ускорителя. Двойная ширина позволяет это ограничение преодолеть и оснащать ускорители более мощными и крупными ASIC, но не терять при этом электрической и механической совместимости.

Такой модульный дизайн обеспечивает сочетанию Yv2.50 и GPv2 непревзойдённую гибкость, ведь в единой системе могут уживаться различные ускорители на базе разных чипов. А благодаря единой системе BMC и поддержке стандартных протоколов SMBUS, UART, JTag и I2C, обеспечивается полный спектр средств удаленного управления и мониторинга. Ограничение по ширине интерфейса к основному ЦП нивелируется тем, что GPv2 имеет собственный коммутатор PCIe, так что ускорители, в нём установленные, могут общаться и в режиме «точка-точка».

Платформа Yv2.50 + GPv2 имеет свои недостатки, но компания-разработчик их осознаёт. В частности, в будущих версиях, возможно, каждый сервер будет иметь собственный контроллер BMC и сетевой процессор, а модуль расширения получит поддержку PCI Express 4.0, что снимет возможные проблемы с нехваткой пропускной способности.

При этом необходимо отметить, что Facebook является участником проекта OCP и платформа Yv2.50 + GPv2 имеет открытые спецификации. Подробнее о них можно узнать на wiki-странице проекта. Отдельно опубликованы спецификации на ускорительные модули M.2 обычной и двойной ширины.

Постоянный URL: http://servernews.ru/1011904
15.05.2020 [15:07], Юрий Поздеев

Facebook представила серверы Sonora Pass с Intel Xeon Cooper Lake

На мероприятии OCP Virtual Summit 2020 Facebook поделилась некоторыми подробностями о своем новой платформе Sonora Pass. Информации по новому шасси не очень много — известно лишь то, что данная модель продолжает развивает концепцию серверов Facebook Tioga Pass, но делает больший акцент на безопасность и улучшение интеграции с текущей инфраструктурой. 

Основные конструктивные изменения в Sonora Pass направлены на еще большую модульность платформы. Новый сервер спроектирован таким образом, чтобы быть еще более удобным в обслуживании, что должно снизить стоимость владения инфраструктурой при массовом развертывании данной модели.

В частности, увеличилось количество USB-портов, поддерживается размещение в стойках по стандарту OCP V.2. Не осталось без внимания и ПО управления сервером, в котором были значительно усилены функции безопасности — есть система обнаружения вторжений и дополнительная аутентификация до загрузки сервера.

Для удобства управления сервером на передней панели размещен светодиодный дисплей, на который могут выводиться информационные сообщения и ошибки. Дополнительные опции сервера включают в себя карты расширения с четырьмя E1.S 25 мм, два слота OCP NIC 3.0, дополнительный порт отладки OCP USB и два слота PCIe FHHL.

Sonora Pass поддерживает установку двух процессоров Intel Xeon Cooper Lake, в отличие от Tioga Pass, где использовались процессоры Intel Xeon Skylake-SP с TDP до 165 Вт. Для оперативной памяти используется 12 слотов (по 6 на каждый процессор). 

Не смотря на сообщения о дефиците процессоров Intel Xeon Cooper Lake, Facebook удалось заключить контракт на поставку необходимого количества чипов для собственных нужд, что позволит производить новую модель сервера без задержек.

Постоянный URL: http://servernews.ru/1010992
14.05.2020 [19:41], Владимир Мироненко

Facebook инвестирует в прокладку подводного кабеля 2Africa для стран Африки и Ближнего Востока

Ряд глобальных компаний объединил усилия, чтобы проложить подводный кабель для обслуживания африканского континента и региона Ближнего Востока, где почти миллиард человек всё ещё не имеет доступа в Интернет. В их число входят China Mobile International, Facebook, MTN GlobalConnect, Orange, телекоммуникационная фирма STC из Саудовской Аравии, Telecom Egypt, Vodafone и африканская телекоммуникационная фирма WIOCC.

Проект под названием 2Africa будет одним из крупнейших в мире.

В рамках проекта предполагается проложить кабель протяжённостью до 37 000 км и соединить Европу, Ближний Восток (через Саудовскую Аравию) и 21 наземную станцию в 16 странах Африки. Стоимость проекта пока неизвестна. Согласно оценкам экспертов, затраты на его реализацию составят около $1 млрд. Работы по прокладке подводного кабеля будет выполнять компания Alcatel Submarine Networks (ASN).

В совместном заявлении компании сообщили, что ожидают запустить систему к 2023 году или в начале 2024 года. После запуска она будет в состоянии обеспечить пропускную способность больше, чем суммарная способность всех подводных кабелей, обслуживающих Африку сегодня. Согласно проекту, этот показатель будет составлять до 180 Тбит/с на ключевых участках.

В подводном кабеле 2Africa будет реализована новая технология SDM1 от ASN, позволяющая развертывать до 16 пар оптических волокон вместо восьми пар при использовании традиционных технологий, что позволит обеспечить гораздо большую пропускную способность с меньшими затратами.

Постоянный URL: http://servernews.ru/1010956
30.04.2020 [22:34], Рамис Мубаракшин

Facebook потратит на развитие инфраструктуры на $3 млрд меньше, чем ожидалось

Представители социальной сети Facebook объявили об «отсрочке» расходов на строительство центров обработки данных, офисных зданий и другой инфраструктуры. Изначально компания намеревалась потратить 17-19 миллиардов долларов в течение 2020 года, но теперь ее представители уверены, что им вполне хватит и 14-16 миллиардов долларов.

На «лучшие времена» компания отложит примерно 3 миллиарда долларов.

Представители Facebook подчеркнули, что называют своё решение именно «отсрочкой», а не сокращением расходов. Во время пандемии коронавируса COVID-19 многие сотрудники сидят на карантине и практически все крупные строительные работы временно остановлены. Например, в конце марта компания была вынуждена прекратить строительство нового дата-центра в американском штате Алабама. Стоимость строительства составляла 750 миллиона долларов.

Сокращение расходов Facebook непременно отразится и на финансовом состоянии других компаний. По данным Synergy Research Group, на данный момент социальная сеть входит в число крупных клиентов многих производителей процессоров, систем хранения и других компонентов. Сообщается, что многие компании уже готовятся к уменьшению продаж и, следовательно, снижению дохода.

С другой стороны, IDC отмечает, что имеются проблемы с поставками даже базовых компонентов для ЦОД, что привело к пересмотру планов относительно строительства новых площадок со стороны гиперскейлеров, к каковым относится и Facebook. Тем не менее, у них есть запас прочности, которого должно хватить примерно на пару лет.

При всем этом в финансовом плане Facebook, казалось бы, чувствует себя весьма неплохо. На фоне повсеместного карантина, когда большинство людей сидят дома, выручка от рекламы повысилась на 17%. Также социальная сеть отметила повышенную активность обмена сообщениями и видеозвонков. Количество активных пользователей в приложениях Facebook Messenger, WhatsApp и Instagram увеличилось на 11%, а показы рекламы выросли на 39%.

На фоне увеличения активности цена рекламы снизилась на 16%. По словам финансового директора Facebook Дейва Венера (Dave Wehner), это связано с меньшей заинтересованностью пользователей к новым товарам и услугам.

Чтобы удержать внимание пользователей, Facebook начала предоставлять им больше возможностей для общения. Недавно стало известно, что она работает над созданием приложения Messenger Room, который позиционируется как альтернатива Microsoft Teams и Zoom. 

Постоянный URL: http://servernews.ru/1009882
25.03.2020 [21:06], Владимир Мироненко

Facebook приостановила строительство ЦОД в Ирландии из-за опасений распространения коронавируса

Facebook временно приостановила работу по расширению своего дата-центра в местечке Клони (Ирландия) после того, как у рабочих появились симптомы заболевания, похожего на грипп. Строительные работы были свёрнуты по согласованию с подрядчиком, а рабочие были направлены на тестирование на предмет заболевания коронавирусной инфекцией.

Результаты тестирования пока неизвестны, но были проведены профилактические работы по дезинфекции.

«Вместе с Mace, нашим генеральным подрядчиком на площадке в Клони, мы приняли решение приостановить строительство ЦОД, — говорится в заявлении Facebook, направленном телекомпании RTE. — Эта мера предпринимается для защиты здоровья и безопасности людей, которые работают на наших строительных площадках, и местных жителей во время вспышки COVID-19».

Это второй собственный ЦОД компании в Европе, построенный вслед за дата-центром в Лулео (Швеция). Объект в Клони был открыт в 2018 году, а в 2019 году было объявлено о планах по его расширению и фактически удвоению имеющихся мощностей. 

Постоянный URL: http://servernews.ru/1006818
22.03.2020 [23:33], Андрей Галадей

Facebook активно вкладывается в LLVM

Социальная сеть Facebook хочет нанять новых инженеров-разработчиков, специализирующихся на компиляторах, так как компания всё больше уделяет внимание LLVM и его подпроектам, таким как C/C++-компилятор Clang и компоновщик LLD. Также Facebook планирует увеличить свой вклад в развитие языка программирования Swift на базе LLVM.

Это позволит, как ожидается, увеличить эффективность работы LLVM в целом.

А рост производительности позволит улучшить некоторые из фирменных разработок Facebook. К примеру, это оптимизатор BOLT, предназначенный для ускорения работы ELF-файлов под Linux на архитектурах процессоров x86-64 и AArch64. Оптимизатор ускоряет работу больших приложений и улучшает компоновку кода программы. BOLT использует LLVM, но также может работать с файлами, собранными с помощью GCC.

pixabay.com

pixabay.com

Надав Ротем (Nadav Rotem), директор команды разработчиков компиляторов для ИИ, который и поведал о планах компании, не уточнил, насколько крупные инвестиции планируются. Однако можно допустить, что речь идёт о серьёзных суммах. Напомним, что ранее сообщалось о включении в LLVM Google MLIR для ускорения работы с ИИ. Таким образом, LLVM становится ключевым элементом для многих ИИ-систем, потому интерес Facebook к этой тематике вполне понятен.

Отметим, что уже скоро ожидается релиз 10-й версии LLVM. Точной даты нет, но учитывая тот факт, что уже выпущен пятый релиз-кандидат, выход может состояться буквально на днях. 

Постоянный URL: http://servernews.ru/1006547
19.03.2020 [18:20], Алексей Степин

Facebook организовала собственную службу точного времени

Серверы и службы точного времени играют существенную роль в современной ИТ-индустрии, как обеспечивающие синхронизацию и корректную работу многих миллионов устройств в едином временном пространстве.

Компания Facebook, обладатель огромной ИТ-инфраструктуры, при запуске собственной аналогичной службы отказалась от использования традиционного демона ntpd в пользу более современной и лучше интегрированной с аппаратной инфраструктурой разработкой под названием chrony.

Структура службы времени Facebook

Структура службы времени Facebook

Как правило, источниками точного времени занимаются правительственные организации, такие, как Национальный институт стандартов и технологий (NIST), располагающие высокоточными атомными часами. Данные с серверов точного времени можно получить через Интернет, используя стандартный протокол NTP (Network Time Protocol).

Однако в крупных ЦОД зачастую используют локальный источник точного времени, берущий данные от навигационных спутников или атомных часов. Наиболее важные узлы и стойки оснащаются отдельными адаптерами для синхронизации, да и многие современные сетевые карты имеют отдельные разъёмы для этой же цели.

Существуют и частные службы NTP — например, таковыми располагают Apple и Google, а теперь к ним присоединилась и Facebook. Её NTP-сервисы доступны по адресу time.facebook.com, они бесплатны. Впрочем, публичный сервис — это скорее побочный продукт внутренней разработки. 

Точность службы точного времени Facebook сопоставима с точностью аналогичных служб других провайдеров

Точность службы точного времени Facebook сопоставима с точностью аналогичных служб других провайдеров

Facebook владеет огромной армией серверов и прочих устройств, причём, компания активно внедряет распределённые службы и базы данных. В этом случае временная синхронизация особенно важна. Источник самого времени у Facebook классический, это атомные часы (обычно цезиевые, но Facebook использует рубидиевый вариант). Но программная часть отличается от обычной.

Обычно в качестве демона точного времени используют ntpd (Network Time Protocol Daemon), но с анонсом собственного источника Facebook перешла на использование более совершенного chrony. Более оптимизированный код chrony позволяет использовать меньше оперативной памяти и процессорного времени, а значит, уменьшить и энергопотребление, что в масштабах Facebook весьма чувствительно.

Одна из тестовых NTP-платформ Facebook

Одна из тестовых NTP-платформ Facebook

Помимо экономичности и лучшей интеграции с аппаратным обеспечением, позволяющим chrony использовать временные метки, генерируемые сетевыми адаптерами, это ПО отличается повышенным уровнем безопасности. Точность в сравнении с ntpd так же повысилась, причём, весьма существенно, от 10 до 100 раз.

Показатели новой службы Facebook, как минимум, не уступают показателям аналогичных служб Apple и Google. В ней скачущая секунда «размывается» вместо «замирания»: дополнительное время, компенсирующее разницу между всемирным и средним солнечным временем, добавляется или вычитается небольшими порциями на протяжении нескольких часов.

Впрочем, есть одно «но» — ни одна из служб точного времени, принадлежащих частным компаниям, таким как Google, Apple или Facebook, не имеют сертификации Coordinated Universal Time (UTC), а именно этим стандартом пользуются крупные провайдеры и банковские сети. Но инженеры Facebook уже рассматривают возможность внедрения протокола Precision Time Protocol (PTP), который существенно точнее NTP.

Постоянный URL: http://servernews.ru/1006349
07.02.2020 [18:00], Владимир Мироненко

Google и Facebook отказались от части подводного кабеля из-за Huawei

Из-за торговой войны между США и Китаем технологическим гигантам Google и Facebook, похоже, придётся смириться с потерей участка подводного кабеля Pacific Light Cable Network (PLCN).

На прошлой неделе, подав заявку в Федеральную комиссию по связи США, обе компании запросили разрешение на активацию подводного кабеля Pacific Light Cable Network (PLCN) между США, Филиппинами и Тайванем, оставив бездействующими спорные участки, соединяющиеся с Гонконгом и материковым Китаем. 

Как оказалось, высокоскоростная интернет-связь технологических гигантов с Гонконгом стала политически токсичной из-за роста напряжённости во взаимоотношениях между Вашингтоном и Пекином.

Общая протяжённость подводного кабеля, который по замыслу участников проекта, должен был напрямую соединить США и Гонконг, составляет 12 800 км, а пропускная способность равна 120 Тбит/с. Этого достаточно, к примеру, для осуществления одновременно 80 млн видеозвонков.

Хотя Google и Facebook являются наиболее влиятельными сторонами, заинтересованными в PLCN, большая часть оптоволоконного кабеля принадлежит компании Pacific Light Data Communication. Продажа в 2017 году этой компании пекинскому провайдеру широкополосного доступа Dr Peng Telecom & Media Group вызвала опасения, которые с тех пор сопровождают этот проект.

Дело в том, что хотя Dr Peng Telecom & Media Group не является государственной компанией, она имеет тесные связи с Huawei, китайским гигантом, обвиняемым правительством США в сотрудничестве с властями Китая и несущим потенциальный риск национальной безопасности.  В августе прошлого года были сообщения, что Минюст США мог вообще  закрыть проект , даже несмотря на то, что большая часть (11 тыс. км) уже была проложена, а стоимость работ оценивалась в $300 млн. 

Постоянный URL: http://servernews.ru/1003188
17.12.2019 [15:51], Алексей Степин

Nortek и Facebook ввели в строй первый комплекс мембранных СЖО для ЦОД StatePoint

Компания Nortek Air Solutions объявила о вводе в строй первого комплекса жидкостного охлаждения StatePoint (SPLC), разработанного в сотрудничестве с Facebook.

Работы над технологией SPLC начались ещё в 2015 году. Перым ЦОД, где была установлена новая система, стал центр Facebook, расположенный в Оклахома-сити.

Facebook гордится энергоэффективностью своих ЦОД и тем, что они используют минимальное количество ценных природных ресурсов. Как правило, компания применяет для охлаждения своих систем наружный воздух и системы прямого испарения. Но в ряде случаев, а Оклахома-сити относится именно к таким ним, приходится искать другие способы для того, чтобы изолировать ценное оборудование от неприемлемых условий окружающей среды: пыли, чрезмерной влажности и других факторов.

Мембранная технология в теплообменниках SPLC предотвращает загрязнение воды

Мембранная технология в теплообменниках SPLC предотвращает загрязнение воды

В основе системы SPLC лежит новое поколение жидкостно-воздушных теплообменников на базе микропористых гидрофобных мембран — наружный воздух охлаждает воду при её испарении. За счёт наличия специальных разделительных мембран загрязнения воды не происходит; кроме того, материал мембран устойчив к образованию известкового налёта.

Новый наружный теплообменник SPLC

Новый наружный кондиционер SPLC. Синим цветом обозначен теплообменник

Охлаждённая вода затем используется во внутренних воздушных кондиционерах ЦОД. Такой подход минимизирует расход чистой воды. Система способна работать в нескольких режимах, включая режим супер-испарения в жаркую и влажную погоду, при котором наружный воздух перед подачей в теплообменники охлаждается дополнительно.

Так работает система SPLC. Расход чистой воды минимален

Так работает система SPLC. Расход чистой воды минимален

ЦОД Facebook в Оклахома-сити — первая ласточка для Nortek Air Solutions. Проект был закончен благодаря $15 миллионам, полученным от FB в качестве инвестиции в развитие технологии SPLC. Новая система охлаждения будет развёртываться и в других центрах данных компании. Кроме того, патент на SPLC принадлежит Nortek, а значит, использовать данную технологию теоретически смогут и другие владельцы крупных ЦОД.

Постоянный URL: http://servernews.ru/999907
16.12.2019 [16:16], Юрий Поздеев

Представлен «зелёный» ЦОД Facebook — лайки с энергией солнца

Нефтегазовый гигант Royal Dutch Shell в прошлом году полчил контрольный пакет акций компании Silicon Ranch, специализирующейся на солнечной энергетике. А на днях эта компания совместно с Walton EMC закончила постройку нового объекта в штате Джорджия, который будет обеспечивать электроэнергией центр обработки данных Facebook.

Мощность новой солнечной электростанции составит 102,5 МВт, что более чем достаточно для покрытия всех потребностей дата-центра в электроэнергии. В проекте используются модули Hanwha Q Cells, которые производятся в США. Этот момент особенно важен, так как во многих проектах используются солнечные батареи производства КНР.

Данный проект интересен, прежде всего, тем, что сейчас даже такие компании как Shell начинают инвестировать в зеленую энергетику. В ближайшее время в Дентоне будет построен еще один подобный объект с мощностью 107 МВт, его запуск планируется в 2021 году.

Компания Facebook подписала в это году соглашений на строительство почти 950 МВт экологически чистых мощностей — третий по объёму показатель в мире среди корпораций. Таким образом, Facebook не на словах, а на деле показывает, что возобновляемые источники энергии могут быть выгодными и востребованными для дата-центров.

Постоянный URL: http://servernews.ru/999798
Система Orphus