На предстоящей конференции для разработчиков WWDC 2024, которая пройдёт в июне, Apple, как ожидается, представит новую версию iOS 18 с множеством функций генеративного ИИ. Некоторые из них будут выполняться локально, но часть будет использовать ИИ-модели, развёрнутые в ЦОД Apple.

Как сообщает Bloomberg со ссылкой на информированные источники, компания в рамках программы Apple Chips in Data Centers (ACDC) начала обновлять инфраструктуру, оснащая свои ЦОД серверами с чипами собственной разработки M2 Ultra для обеспечения более эффективной работы ИИ-моделей. По словам источников, за последние три года компания инвестировала сотни миллионов долларов в новую облачную инициативу.

Источник изображения: Apple

Чип M2 Ultra включает вычислительный модуль Neural Engine для запуска ИИ-моделей. В ближайшем будущем в ЦОД будут также устанавливаться серверы с чипами M4, представленными на прошлой неделе. Ранее на этой неделе The Wall Street Journal сообщал, что Apple в рамках ACDC разрабатывает собственные серверные ИИ-ускорители для инференса.

Пока Apple планирует использовать для новых облачных сервисов собственные ЦОД, но в конечном итоге перенесёт часть нагрузок на «сторонние объекты». На это намекнул финансовый директор Лука Маэстри (Luca Maestri). «У нас есть собственные мощности ЦОД, а затем мы используем мощности третьих сторон, — сказал он после того, как его попросили рассказать об ИИ-инфраструктуре. — Эта модель исторически хорошо работала для нас, и мы планируем продолжать в том же духе и в дальнейшем».

Саудовская компания DataVolt начала строительство дебютного дата-центра Tashkent IT Park Data Center в Ташкенте, передаёт Datacenter Dynamics. Спецификации нового объекта оператором пока не раскрывались, но Министерство цифровых технологий Узбекистана сообщило, что речь идёт о проекте ёмкостью 10 МВт и стоимостью $150 млн.

В DataVolt заявили, что новый ЦОД представляет собой модульное решение с возможностью масштабирования, что позволит организовать выполнение самых разных задач, а производительность может составить от сотен до тысяч Тфлопс. Церемония закладки объекта состоялась в присутствии президента Узбекистана и саудовского принца, в числе прочего занимающего пост министра энергетики.

Источник изображения: Sarvar Samigov/unsplash.com

Это лишь первый проект DataVolt в Узбекистане, но речь уже идёт об инновационном решении в области экоустойчивости — он предусматривает использование солнечной и ветряной энергии, запасать которую предполагается в энергохранилищах. Дополнительно предусмотрено питание от водорода и иных видах «зелёного» топлива для круглосуточного обеспечения экобезопасной энергией. Такой подход позволит обеспечить экономически эффективную базу для внедрения ИИ-вычислений в Узбекистане — проект станет локомотивам развития передовой IT-индустрии.

Основанная в прошлом году DataVolt является дочерней структурой Vision Invest, саудовской инвестиционно-строительной компании, занимающейся объектами критической инфраструктуры. Значительная часть руководства DataVolt, включая генерального директора, ранее работала в ACWA Power, занимавшейся созданием электростанций и опреснителей — эта компания тоже принадлежит Vision Invest.

Ранее DataVolt подписала с властями Узбекистана инвестиционное соглашение, согласно которому в стране будут возведены ЦОД ещё на 500 МВт. Т.н. «Новый Ташкент» разместит у себя кампус ёмкостью 250 МВт на участке в 25 га. Ещё один объект ёмкостью 40 МВт появится в Бухаре, в перспективе его мощность будет доведена до 250 МВт.

В прошлом году DataVolt анонсировала партнёрство с индийской AquaTech Systems, предусматривающее создание водно-эффективных ЦОД, а также со Sterling and Wilson. Кроме того, DataVolt раскрыла планы по строительству кампуса ЦОД в Бангладеш. А в самой Саудовской Аравии компания намерена инвестировать $5 млрд в строительство дата-центров.

После того, как компании Foxconn не удалось наладить крупное производство на площадке в Маунт-Плезант (Висконсин, США), её передали Microsoft для строительства кампуса ЦОД общей стоимостью $3,3 млрд, передаёт The Register.

Получив налоговые льготы на сумму в $3 млрд, Foxconn так и не смогла ими воспользоваться — проект не отвечал требованиям штата, например, по количеству созданных рабочих мест. Компанию даже поймали на подтасовке статистики путём найма сотрудников с последующим увольнением сразу после подачи отчётности. К 2021 году объём планируемых инвестиций сократился до $672 млн, а налоговые льготы — до $80 млн.

Впрочем, Foxconn так и не удалось реализовать амбициозный проект — инициатива по созданию 13 тыс. рабочих мест провалилась, было снесено порядка 100 домов и ферм, а на подготовку площадки совершенно зря ушло $500 млн средств налогоплательщиков. Компания смогла сформировать только небольшое производство серверов.

Источник изображения: Dave Hoefler/unsplash.com

В 2023 году участок в 400 га, предназначавшийся для строительства завода, приобрела Microsoft. Здесь компания намерена построить кампус ЦОД, модернизировать местную инфраструктуру и совместно с Университетом Висконсина создать центр AI Co-Innovation Lab для внедрения машинного обучения в процессы автоматизации и обучения 100 тыс. местных жителей генеративным ИИ-технологиям вроде Copilot. Дополнительно компания намерена подготовить и сертифицировать 3 тыс. местных разработчиков ИИ-систем и 1 тыс. техников для обслуживания ЦОД.

Строительство началось в конце 2023 года. Ранее местные СМИ писали минимум о четырёх дата-центрах на территории кампуса. В Microsoft попытались развеять страхи, что кампус будет потреблять слишком много энергии — компания работает с National Grid над строительством в Висконсине солнечной электростанции на 250 МВт, последняя должна заработать в 2027 году. Также Microsoft намерена использовать замкнутую систему жидкостного охлаждения для большей части мощностей на площадке, которая будет потреблять воду только во время очень жаркой погоды. Ранее Microsoft попала в неприятности в окрестностях Финикса (Аризона), где её фактически заставили отказаться от испарительного охлаждения.

Что касается трудоустройства, планы у Microsoft даже близко не столь масштабные, как были у Foxconn: бизнес из Редмонда рассчитывает задействовать 2,3 тыс. человек в строительстве к 2025 году и сформировать 2 тыс. постоянных рабочих мест.

Тепло расположенного в Бохуме (Германия) ЦОД планируется хранить в заброшенной шахте и в дальнейшем использовать в районной системе отопления. По данным Datacenter Dynamics, проект местного Рурского университета призван продемонстрировать потенциал теплоаккумулятора Mine Thermal Energy Storage (MTES). Проект финансируется в рамках поддерживаемой Евросоюзом схемы PUSH-IT, рассматривающей подземные объекты в качестве экоустойчивых хранилищ энергии.

Университет управляет собственной теплоэлектростанцией с 2019 года. Станция имеет два комбинированных тепловых/электрических модуля общей мощностью 9 МВт и три газовых котла с общей теплоотдачей 105 МВт. ТЭС не только обогревает университетский кампус, но обеспечивает энергией 5 тыс. квартир, 760 частных домов и 115 промышленных зданий. Оператором выступает Unique Wärme — совместное предприятие университета и коммунальной компании Stadtwerke Bochum, частично принадлежащей местным властям.

Источник изображения: Robert Thiemann/unsplash.com

При этом энергомодули расположены непосредственно над шахтой Мансфельд (Mansfeld) глубиной до 120 м, которая была закрыта в 1963 году. MTES позволит летом отправлять избыточное тепло дата-центра и других технических объектов университета в подземные глубины с помощью тепловых насосов. Там оно будет храниться в скважинах, откуда его по мере необходимости можно возвращать в систему отопления, когда спрос особенно высок, т.е. зимой.

MTES, как ожидается, может увеличить использование источников возобновляемой энергии и сгладить пиковые нагрузки в системе отопления в зимние месяцы. Это, в частности, приведёт к снижению углеродных выбросов и стоимости эксплуатации. По данным координаторов PUSH-IT, MTES пока находится на стадии разработки, а создание экспериментальных скважин предусмотрено осенью.

Похожий проект разрабатывается в стенах Эдинбургского университета, где «мусорное» тепло суперкомпьютерного ЦОД также предлагается сохранять в старой шахте до того, как использовать его для отопления местных домов. Такая схема позволит обогревать не менее 5 тыс. домов, если расчёты учёных подтвердятся. Впрочем, воду из подземных выработок можно использовать и просто для охлаждения дата-центров.

Amazon планирует потратить $9 млрд на развитие облачной инфраструктуры в Сингапуре. По данным гонконгской SCMP, это последнее, но далеко не единственное вложение компании в Юго-Восточной Азии. Средства будут потрачены в следующие четыре года. Фактически речь идёт об удвоении инвестиций AWS в стране. Это поможет удовлетворить спрос на облачные сервисы, а также, как заявляют в компании, ускорить внедрение ИИ.

AWS расширяет присутствие за пределами США, значительная часть инвестиций приходится на Азию. С учётом инвестиций в Сингапуре всего в этом году AWS пообещала инвестировать за пределами США $35 млрд, включая рынки Японии, Саудовской Аравии и Мексики. Дополнительно компания строит ЦОД в Малайзии, Таиланде и Южной Корее. Годовая выручка AWS впервые должна превысить $100 млрд — компания намерена заработать на проектах IT-модернизации корпоративных клиентов и ИИ-сервисах.

Источник изображения: R.H. Lee/unsplash.com

Азиатские рынки активно осваивают другие компании, от Microsoft до Apple. Делается это в попытке диверсифицировать источники доходов, львиная доля которых в регионе приходится на Китай, с которым у США в последние годы наметились значительные политико-экономические разногласия. Microsoft, ключевой конкурент AWS, организовала настоящий тур, в рамках которого глава компании Сатья Наделла (Satya Nadella) анонсировал в облачную и ИИ-инфраструктуру в Индонезии, Малайзии и Таиланде.

В своё время AWS именно в Сингапуре построила свой первый облачный регион в Азии. В Amazon считают, что запланированные инвестиции обеспечат поддержку рабочих мест, эквивалентных 12,3 тыс. вакансий с полной занятостью ежегодно. Дополнительно компания будет в течение двух лет проводить семинары для клиентов, а совместно с властями Сингапура будет способствовать внедрению генеративного ИИ малым бизнесом.

Сингапур довольно давно стал своего рода хабом для американских гиперскейлеров. Сейчас он рассматривается как «ворота» в Юго-Восточную Азию в целом, где ожидается быстрый рост облачного бизнеса. При этом власти страны всё более ужесточают регулирование индустрии ЦОД, а местные игроки в содружестве с американскими компаниями готовы сами осваивать рынки соседних стран. И теперь уже у Малайзии есть шансы стать новым IT-хабом в регионе.

Оператор глубоководных дата-центров Subsea Cloud предложил потенциальным клиентам оценить возможности своего ЦОД в течение 90 дней. Как сообщает The Register, так компания пытается привлечь новых пользователей — если в последние три года дорогостоящие испытания проводились индивидуально, то теперь доступ к необычным дата-центрам упростится.

В Subsea заявляют, её дата-центры имеют на 40 % меньше углеродных выбросов, а операционные расходы для клиентов на 30 % меньше в сравнении с наземными ЦОД. Наконец, затрат энергии и воды на охлаждение вовсе нет. Изюминка Subsea Cloud в том, что компания предлагает не просто подводные, а именно глубоководные (до 3000 м) решения. В 2022 году компания сообщала о внедрении первого коммерческого подводного проекта в районе Порт-Анджелеса (штат Вашингтон), дополнительные ЦОД планировалось развернуть в Мексиканском заливе и Северном море.

Источник изображения: Subsea Cloud

В рамках Project OTTO компания предложит протетсировать возможности своего ЦОД недалеко от юго-западного побережья Норвегии. Первая фаза стартует в октябре. Участникам будут доступны тестовые периоди длительностью 30, 60 и 90 дней. При этом поучаствовать в тестировании можно только один раз — за исключением случаев, когда потенциальные клиенты захотят значительно изменить аппаратную составляющую своего оборудования, что потребует дальнейших тестов. О стоимости тестирования ничего не говорится, но компания предупреждает, что в случае отказать подписать соглашение о дальнейшем развёртывании мощностей продление тестирования не будет доступно.

Базовый модуль Subsea Cloud представляет собой ёмкость размерами 6,1 × 2,6 м, практически тех же габаритов, что и стандартный 20-футовый контейнер — в нём можно разместить до 16 стоек мощностью до 150 кВт каждая (суммарно до 1,5 МВт) или 826 серверов. Для охлаждения используется погружная СЖО. Компания может предоставить клиентам и собственные серверы. В целом конфигурация ЦОД рассчитана на высокоплотное размещение энергоёмких систем, например, для ИИ- и HPC-нагрузок. Срок службы модуля составляет 25–30 лет.

Источник изображения: Subsea Cloud

Подводные ЦОД пытаются внедрять не впервые. Microsoft в течение нескольких лет развивала Project Natick. Этот проект был признан успешным, но коммерциализировать компания его не стала в отличие от аналогичного проекта Highlander в Китае. Одним из сдерживающих клиентов факторов является отсутствие лёгкого доступа к оборудованию в подводных дата-центрах. По словам Subsea Cloud на то, чтобы добраться до модуля и заменить или обслужить серверы, уйдёт 4–16 часов.

В Subsea Cloud рассчитывают на сотрудничество с офшорными ветряными электростанциями — это обеспечит подводным ЦОД удобный доступ к возобновляемой энергии. Кроме того, компания намерена подключать свои подводные кампусы непосредственно к подводным ВОЛС. При этом в компании подчёркивают, что общая стоимость обслуживания значительно ниже, чем у обычных ЦОД. Правда, сама же говорит, что экономически целесообразно развёртывание не менее 20 модулей.

Dominion Energy в прошлом году подключила к энергосети в Вирджинии — крупнейшем в мире рынке ЦОД — 15 дата-центров общей ёмкостью 933 МВт. По данным Datacenter Dynamics, в 2024 году электроснабжение получат ещё столько же ЦОД, суммарная ёмкость которых пока не подсчитана. А всего с 2019 года Dominion Energy подключила в Северной Вирджинии 94 дата-центра общей ёмкостью 4 ГВт. Для сравнения — ёмкость ЦОД Microsoft по всему миру только недавно превысила 5 ГВт.

В докладе Dominion Energy за 2023 год сообщается, что на дата-центры приходится 24 % продаж электричества дочерней Virginia Power, тогда как в 2022 году их доля была 21 %. При этом подчёркивается, что спрос отдельных ЦОД вырос с приблизительно с 30 МВт до 60–90 МВт, а запросы кампусов выросли с 300 МВт до «нескольких гигаватт». При этом на максимальное потребление они теперь выходят не за 4–5 лет, а всего за 2–3 года, причём в дальнейшем нагрузка только увеличится.

Источник изображения: American Public Power Association/unsplash.com

American Electric Power (AEP) получила запросы на поставку до 15 ГВт, львиная доля которых приходится на ЦОД. Драйверами спроса служат гиперскейлеры вроде AWS и Google. Компания имеет мощности около 38 ГВт и готова инвестировать более $27 млрд в линии электропередач и системы распределения энергии в следующие пять лет. Она ожидает увеличение капитальных издержек в будущем, связанных с ростом потребления энергии ЦОД.

Public Service Enterprise Group (PSEG) ведёт переговоры о строительстве ЦОД ёмкостью 50–100 МВт рядом со своими АЭС. Наконец, отвечающая за электропередачу компания PJM заявила, что располагает достаточными ресурсами для того, чтобы удовлетворить спрос летом 2024 года. Однако она предупреждает о проблемах в будущем из-за того, что для замены 1 МВт энергии от обычных электростанций на ископаемом топливе, которые активно выводятся из эксплуатации, фактически требуется несколько МВт из возобновляемых источников из-за нестабильности последних.

Проблема энергоснабжения ЦОД в США вообще и Северной Вирджинии в частности носит системный характер. В апреле сообщалось, что «зелёные» энергопроекты не смогут «прокормить» ИИ на крупнейшем в мире рынке ЦОД, причём тревогу поставщики бьют уже не первый год. Если ситуацию не удастся оперативно исправить, то дефицит энергии может привести к сокращению ИИ-нагрузок или даже к постройке ТЭС непосредственно на территории кампусов, как это уже происходит в Европе.

Министерство цифрового развития, инноваций и аэрокосмической промышленности Республики Казахстан, по сообщению агентства Kazinform, ведёт переговоры о строительстве ЦОД с корпорациями Google и Microsoft. О проектах в области дата-центров рассказал вице-министр цифрового развития Аскар Жамбакин.

По его словам, за последние пять лет количество стойко-мест в ЦОД Казахстана увеличилось приблизительно в два раза. Общая загрузка дата-центров в республике составляет примерно 76 %, тогда как в государственной инфраструктуре показатель достигает 97 %.

Жамбакин отмечает, что в настоящее время в Казахстане реализуются несколько проектов по строительству ЦОД. В частности, АО Kazteleport развернёт дата-центр на 200 стоек, тогда как ТОО «Инфраструктура Казахстана» создаёт площадку на 4 тыс. стоек.

Источник изображения: Google

«Инвесторы приходят в этот сектор. Также мы приглашаем сейчас зарубежные компании, ведём переговоры с Microsoft, Google для открытия центров обработки данных на территории Казахстана», — сказал Жамбакин.

На сегодняшний день в Казахстане действуют 51 дата-центр. Летом прошлого года Apple, Google и Microsoft заявили о готовности расширить своё присутствие на территории этой республики. В частности, у Microsoft имеются планы по созданию мультирегионального хаба в Казахстане с охватом стран Центральной Азии, Азербайджана, Армении, Грузии, Монголии и Пакистана. В свою очередь, Google развивает проекты в Казахстане в связи с уходом с российского рынка на фоне сформировавшейся геополитической обстановки. Кроме того, говорится о планах по сотрудничеству Казахстана с Google и Amazon Web Services (AWS) в сфере ИИ. В 2023-м в республике начала работу Ассоциация операторов ЦОД и облачных услуг. 

Компания Microsoft объявила о намерении построить облачную и ИИ-инфраструктуру в Таиланде, в том числе ЦОД, передаёт Datacenter Dynamics. Меры приняты в ответ на растущие потребности страны в облачных решениях, хотя подробности о планируемом регионе пока не разглашаются. На мероприятии Microsoft Build AI Day в Бангкоке глава Microsoft Сатья Наделла (Satya Nadella) заявил, что страна имеет невероятную возможность построить будущее на основе ИИ-технологий.

По мнению главы Microsoft, новый регион в совокупности с инвестициями в местную облачную и ИИ-инфраструктуру, а также обучение ИИ-технологиям, обеспечит долговременное сотрудничество со страной и поможет её государственным и частным организациям получить новый импульс к росту.

Источник изображения: Florian Wehde/unsplash.com

Власти страны подтверждают, что стратегия Ignite Thailand нацелена на превращения Таиланда в цифровой экономический хаб, который позволит значительно ускорить инновации и расширить возможности исследований и развития, заодно усилив и кадровый состав. Microsoft официально пригласили инвестировать в цифровую инфраструктуру страны в сентябре прошлого года. Компания уж заключила меморандум о взаимопонимании с госорганами, обязавшись помочь в реализации стратегии цифрового развития страны.

В прошлом году сообщалось, что AWS, Microsoft и Google намерены инвестировать в дата-центры Таиланда $8,5 млрд. Например, в августе 2022 года Google анонсировала планы построить в стране собственный облачный регион, с аналогичными планами выступила в октябре того же года и AWS. Последняя запустила зону периферийных вычислений Local Zone в Бангкоке в декабре 2022 года.

Стараются не отставать и азиатские инвесторы. Tencent имеет две зоны доступности в Бангкоке, открыла ЦОД в столице Таиланда и Alibaba в мае 2022 года. Наконец, ранее в этом году NTT начала в Бангкоке строительство ЦОД её 12 МВт, который должен заработать в 2025 году. Предложение Microsoft для Таиланда перекликается с инвестициями компании в объёме $1,7 млрд в облачную и ИИ-инфраструктуру Индонезии, анонс которых состоялся буквально на днях. Компания также намерена инвестировать в аналогичные объекты в Малайзии.

Microsoft заключила с Brookfield крупнейшее среди корпораций рамочное соглашение в области «зелёной» энергетики. По данным Financial Times, IT-гигант согласился вложить $10 млрд в решения по генерации энергии из возобновляемых источников — проекты будут разрабатываться Brookfield Asset Management, а поставками займётся Brookfield Renewable Partners.

Соглашение предусматривает строительство в 2026–2030 гг. крупных ветряных и солнечных электростанций суммарной мощностью до 10,5 ГВт. В Brookfield сообщили, что сделка приблизительно в восемь раз масштабнее, чем предыдущее крупнейшее соглашение о покупках возобновляемой энергии — в своё время его заключили горноперерабатывающая Rio Tinto и австралийский оператор солнечных электростанций. А по количеству PPA лидирует, судя по всему, Amazon.

У Brookfield большие планы по расширению уже имеющихся 33 ГВт, а партнёрство с Microsoft будет значительно способствовать этому. Microsoft объявила, что намерена использовать своё влияние и средства для создания длительного положительного эффекта для всех потребителей электричества. По некоторым данным, в сделке участвует и испанская компания X-Elio, занимающаяся проектами, посвящёнными возобновляемой энергии.

Источник изображения: Etienne Girardet/unsplash.com

Ёмкость действующих ЦОД Microsoft превышает 5 ГВт, ещё 1 ГВт должен добавиться в следующие полгода, и ещё 1,5 ГВт — в I половине 2025 года. Компания является одним из крупнейших корпоративных покупателей возобновляемой энергии, а в описании одной из вакансий указывается, что уже заключены соответствующие контракты на более 20 ГВт. Кроме того, по слухам, компания рассчитывает в скором времени развернуть ИИ-инфраструктуру мощностью 5 ГВт совместно с OpenAI.