Расположенный в Германии бункер, ещё не так давно служивший пристанищем для нелегального ЦОД, обеспечивавшего работу целого сегмента даркнета, перепрофилируют. По информации Datacenter Dynamics, печально известный объект CyberBunker при городке Трабен-Трарбах предполагается превратить в погреб.

В своё время бункер принадлежал НАТО и тоже использовался военными в качестве дата-центра. В 2013 году его приобрёл житель Нидерландов. Объект представляет собой многоуровневый комплекс с четырьмя подземными этажами общей площадью 5500 м². Также имеются два прилегающих офисных здания (4300 м²) и участок площадью 13 га. Заинтересованные стороны уже сделали коммерческие предложения, но окончательно решение о судьбе объекта пока не принято.

Источник изображения: Pawel Czerwinski/unsplash.com

В своё время мощности нелегального ЦОД обеспечивали проведение сделок в даркнете на многие миллионы долларов, но немецкие силовые ведомства прекратили его деятельность в 2019 году. В 2021 году сем человек были осуждены за участие в преступном сообществе, а сам объект перешёл в собственность земли Рейнланд-Пфальц в сентябре 2023 года.

Одним из потенциальных арендаторов из Нидерландов желает хранить в бункере сыр, другой же намерен применять его в роли винного погреба. Кроме того, предложено использовать бункер в качестве резервного хранилища данных для банка, а также клуба и отеля. Сама земля Рейнланд-Пфальц предлагает использовать помещения объекта для нужд госсектора. Впрочем, пока проводится оценка коммерческой ценности объекта, поскольку тот нуждается в серьёзном ремонте.

Заброшенные бункеры и шахты довольно часто используют для размещения ЦОД и других проектов, связанных с IT. Только в январе сообщалось о вероятном хранении мусорного тепла Эдинбургского университета в заброшенных шахтах, а в самом конце месяца появились данные об использовании воды из шахт для охлаждения ЦОД Data Center Ridge в США.

Израильская компания MedOne, по сообщению ресурса Datacenter Dynamics, построит на территории страны два новых ЦОД, которые расположатся за пределами Тель-Авива. Речь идёт о подземных объектах: инвестиции в проект оцениваются приблизительно в $270 млн.

MedOne, основанная в 1997 году, предлагает колокейшн-сервисы, облачные услуги и пр. В 2022-м 49 % в структуре MedOne было продано американской частной инвестиционной компании Berkshire Partners. Инвестором также является van Rooyen Group — инвестиционная группа, возглавляемая бывшим генеральным директором Cologix и нынешним главой Tract Грантом ван Ройеном (Grant van Rooyen).

Источник изображения: MedOne

В рамках нового проекта, как сообщается, MedOne строит кампус ЦОД в Кфар-Йоне — посёлке городского типа в 11 км к востоку от Нетании. Планируется создать два дата-центра на трёх подземных этажах площадью около 30 тыс. м². Первая площадка откроется в 2026 году, а вторая должна быть введена в эксплуатацию в 2027-м.

У MedOne уже есть четыре подземных объекта в Тель-Авиве, Петах-Тикве и Тират-ха-Кармеле общей площадью примерно 25 тыс. м². На сайте компании говорится, что она строит семь дополнительных ЦОД по всему Израилю общей площадью более 85 тыс. м² и мощностью 90 МВт.

Подземные дата-центры широко распространены в Израиле: такое размещение обеспечивает безопасность и непрерывность работы. Так, недавно Oracle сообщила о планах по строительству в стране второго защищённого ЦОД глубоко под землёй. Кроме того, регионы в Израиле есть у ведущих облачных провайдеров. Google объявила об открытии такого объекта в Тель-Авиве в конце 2022 года. А в 2023-м свои площадки запустили Amazon Web Services (AWS) и Microsoft Azure.

Княжестве Монако бескрайними просторами похвастаться не может, поэтому для экономии земли приходиться идти на хитрости. Так, компания Monaco Telecom намерена создать крупный дата-центр в подвале жилого дома. По данным Datacenter Dynamics, муниципальный совет уже одобрил проект.

Местные СМИ сообщают, что проект архитектурной компании Atelier Boisson + Boisson Architectes (ABBA) предусматривает строительство 10-этажного здания на участке площадью 1100 м². Комплекс Larvotto Supérieur общей стоимостью €45 млн ($48,4 млн) будет включать 35 квартир (в собственности государства), а ЦОД общей площадью 1550 м² займёт два из четырёх подземных уровней здания. На крыше дома установят солнечные панели, а сам объект подключат к энергосети SeaWergie Thalasso-Thermal Network (STTN), в рамках которой для обогрева и охлаждения используется морская вода.

Источник изображения: Julien Lanoy/unsplash.com

Строительство объекта должно стартовать уже в марте, а завершат возведение комплекса в 2027 году. Телекоммуникационный оператор Monaco Telecom принадлежит владельцу Iliad Ксавье Нилю (Xavier Niel) совместно с Княжеством Монако. По некоторым данным на сегодня компания является оператором трёх дата-центров в стране.

В рамках проекта Data Center Ridge в Западной Вирджинии (США) будет изучена эффективность применения шахтных вод с заброшенных рудников для охлаждения местных ЦОД, передаёт Datacenter Dynamics. В частности, планируется задействовать 37,8 млн м³ воды с бывшей шахты Bullitt близ городка Аппалачия (Appalachia) в округе Уайз (Wise). Проект ожидает грант в размере $3 млн в рамках федеральной программы Abandoned Mine Land Economic Revitalization (AMLER), ещё $1,5 млн намерено выделить Министерство энергетики США.

Проект включен в план по перестройке и обустройству территории угольной шахты (26,3 тыс. га), закрытой ещё в 1990-х годах. Финансирование будет поступать из разных источников, включая некоммерческую организацию объединение Energy Delta Lab, поддерживаемую местными властями, бизнесом и коммунальными службами. Data Center Ridge займёт площадь более 160 га и получит до 1 ГВт «чистой» энергии. Он позиционируется как самый экоустойчивый и энергоэффективный кампус ЦОД в мире.

Источник изображения: Energy Delta Lab

Energy Delta Lab разработала HVAC-систему с закрытым контуром, которая использует подземные воды с температурой ниже 12 °C. Она же работает над типовым проектом дата-центра мощностью 36 МВт и площадью 23 тыс. м², включающего офисные помещения, телеком-инфраструктуру, электро- и техническое оснащение, а также системы безопасности. Для обслуживания такого объекта потребуется порядка 40 человек. Предполагается, что такие типовые дата-центры заинтересуют гиперскейлеров.

Кампус является часть гораздо более крупной инициативы Virginia Energy Plan объёмом до $8,25 млрд. Energy Delta Lab как раз и была сформирована в рамках этой инициативы. Организация будет реализовать различные инициативы в области энергетики, в том числе связанные с природным газом и водородом, АЭС, ветряной и солнечной энергией, а также аккумуляторными хранилищами. Территория шахты, например, была выбрана в качестве потенциальной площадки для ЦОД с питанием от малых модульных реакторов (SMR). Ожидается, что подобные проекты помогут привлечь в регион новые ЦОД.

Генеральный директор корпорации Oracle Сафра Кац (Safra Catz), по сообщению ресурса Datacenter Dynamics, рассказала о планах по строительству в Израиле своего второго облачного дата-центра. Речь идёт о создании защищённой площадки, которая расположится глубоко под землёй.

Первый облачный ЦОД компании расположен в бункере площадью 14 тыс. м². Объект, построенный компанией Bynet Data Communications, занимает четыре этажа и находится на глубине 50 м — под 17-этажным зданием и пятью уровнями парковки в иерусалимском технологическом центре Хар-Хотзвим в Иерусалиме.

Новый израильский дата-центр Oracle будет размещён под землёй на глубине, эквивалентной 9-этажному зданию. Это позволит защитить его от возможных угроз. Подробности о проекте нового ЦОД не раскрываются. Отмечается лишь, что его открытие планируется «в скором времени». Кроме того, Кац сообщила, что Oracle удвоит свои инвестиции в Израиле.

Источник изображения: Oracle

Подземные дата-центры довольно распространены в Израиле. Такое размещение является необходимостью, призванной обеспечить безопасность и непрерывность обслуживания клиентов в условиях продолжающейся политической напряжённости в регионе. Облачные регионы в Израиле есть и у других ведущих провайдеров. Так, Google объявила о запуске такого региона в Тель-Авиве в конце 2022 года. В прошлом году свои площадки запустили Amazon Web Services (AWS) и Microsoft Azure.

Международная группа учёных намеревается выяснить, можно ли сохранить «мусорное» тепло суперкомпьютера Эдинбургского университета в старых шахтах для того, чтобы впоследствии направить его на отопление местных домов. По словам учёных, в шахтах много воды, поэтому они способны стать идеальным хранилищем тепла. При этом для более чем 800 тыс. шотландских домохозяйств отопление является дорогим удовольствием, так что дешёвый источник тепла им не помешает.

Исследование обойдётся в £2,6 млн ($3,3 млн), сообщает Datacenter Dynamics. Эдинбургский университет выделит £500 тыс. ($633 тыс). из собственно фонда, связанного со снижением вредных выбросов, а правительство Шотландии предоставило грант на сумму £1 млн ($1,27 млн). Подключатся и другие структуры, включая даже Министерство энергетики США с грантом $1 млн.

Источник изображения: hangela/pixabay.com

Дата-центр Advanced Computing Facility (ACF) на территории Эдинбургского университета уже обслуживает один суперкомпьютер, а в 2025 году к нему присоединится машина экзафлопсного уровня, первый суперкомпьютер такого класса в Великобритании. В рамках исследования Edinburgh Geobattery, проводимого специалистами в области геотермальной энергетики TownRock Energy совместно с представителями науки и промышленности, будет оцениваться, возможно и целесообразно ли хранить тёплую воду (+40 °C) в заброшенных шахтах до того, как передать её на нужды городского отопления.

Предполагается, что тепло ACF поможет обогреть не менее 5 тыс. домохозяйств, если тесты подтвердят теоретические выкладки. ACF выделяет до 70 ГВт·ч тепла ежегодно, но после запуска нового суперкомпьютера этот показатель увеличится до 272 ГВт·ч. Новая машина, оснащённая СЖО, будет построена в специально возведённом крыле ACF, которое само по себе обойдётся в £31 млн ($39,24 млн).

Фото: EPCC ACF / Keith Hunter

Использование тепла ЦОД обычно считается довольно эффективным методом дополнительной эксплуатации дата-центров. Тем не менее, такая технология имеет серьёзный недостаток, поскольку передавать тепло туда, где оно востребовано, не всегда целесообразно. Некоторые европейские системы располагаются в «шаговой» доступности от систем районного отопления, а другие представляют собой небольшие вычислительные модули, которые предлагается размещать непосредственно в зданиях. Есть и проекты централизованного управления передачей тепла ЦОД.

В непосредственной близости от Эдинбурга находятся заброшенные угольные, сланцевые и другие шахты, частично затопленные подземными водами. Проект предусматривает передачу тепла ЦОД естественными потоками грунтовых вод, с последующим использованием теплонасосов для обогрева зданий. Более того, в университете утверждают, что четверть британских домов расположена над бывшими шахтами, поэтому гипотетически получить тепло таким способом могут до 7 млн домохозяйств.

Исландский оператор дата-центров Verne Global объявил о развёртывании СЖО в подземном кампусе ЦОД The Rock, который находится в Финляндии. Внедрение системы поможет повысить эффективность при решении сложных и ресурсоёмких задач, связанных с ИИ и машинным обучением.

Verne Global отмечает, что рост популярности ИИ и НРС усиливает потребность в надёжных решениях для охлаждения дата-центров. Среднестатистический ЦОД расходует на отвод тепла от своей инфраструктуры до 40 % от общего энергопотребления. Поэтому внедрение передовых решений в области охлаждения позволяет снизить общую стоимость владения.

Verne Global также подчёркивает, что по мере роста популярности моделей ИИ увеличиваются требования к плотности размещения оборудования в ЦОД. Это создаёт дополнительную нагрузку на традиционные средства воздушного охлаждения. В результате, жидкостное охлаждение становится всё более востребованным среди операторов дата-центров.

Источник изображения: Verne Global

Сообщается, что проект по оснащению площадки The Rock жидкостным охлаждением реализован Verne Global в сотрудничестве с Dell и Intel. В частности, задействованы системы Dell DLC3000 с процессорами Intel Xeon Sapphire Rapids, обеспечивающие мощность до 80 кВт на стойку. Это первый случай использования данного решения Dell в Финляндии.

Площадка Rock, созданная финским провайдером Ficolo на базе бывших военных туннелей в скале в Пори, расположена примерно в 200 км от Хельсинки. Инвестиционный фонд Digital 9 Infrastructure (D9) из Великобритании приобрёл компанию Ficolo в 2022 году, а затем объединил её ЦОД с другими активами Verne Global. Недавно D9 объявил о продаже своей доли в Verne Global частной инвестиционной компании Ardian из Франции. Сумма сделки не раскрывается.

Итальянский консорциум, включающий как государственные организации, так и частные структуры, намерен построить дата-центр Trentino Data Mine в доломитовой шахте Сан-Ромедио близ Тренто. Как сообщает DataCenter Dynamics, шахта уже не используется по назначению — теперь в ней хранятся яблоки и созревает вино. Но устойчивая прохлада подходит не только для продуктов, но и для ЦОД.

Проект Trentino Data Mine возглавит Университет Тренто, а разработкой, строительством и управлением ЦОД займутся Covi Costruziono, Dedagroup, GPI и холдинг Istituto Atesino di Sviluppo (ISA). Ожидается, что реализация проекта обойдётся в €50,2 млн. Из них €18,4 млн инвестируют в рамках Национального плана восстановления и устойчивости (NRRP) из государственных средств, а €31,8 млн будут получены от частных инвесторов. Ожидается, что на реализацию уйдёт около 36 месяцев, а инвестиции партнёров окупятся за 15 лет.

Источник изображения: GPI

Площадь ЦОД превысит 80 тыс. м². Дата-центр будет питаться возобновляемой энергией, а шахта не только упростит охлаждение, но и послужит защитой от природных катаклизмов. Новый ЦОД будет использоваться в проектах, связанных с «науками о жизни» (life sciences), ИИ, периферийными и HPC-вычислениями, энергетикой и кибербезопасностью. Но это не единственная шахта в Италии, которую хотят приспособить для дата-центра — похожий, но более скромный по масштабам проект планировалось реализовать на Сардинии.

Правительство северо-восточного испанского региона Астурии рассчитывает перепрофилировать заброшенные шахты для использования в качестве площадок для строительства ЦОД, способных включиться в национальную сеть суперкомпьютеров Spanish Supercomputing Network.

Власти провинции намерены использовать сеть заброшенных шахт общей протяжённостью порядка 5 тыс. км для размещения IT-инфраструктуры суперкомпьютеров. В ходе недавнего визита на возможное место строительства министр науки, инноваций и университетов и директор Национального суперкомпьютерного центра (он же Барселонский суперкомпьютерный центр) посетили возможные места размещения мощностей в муниципалитетах Альер и Мьерес, а также Инновационный центр Университета Овьедо, тоже являющийся ключевым элементом проекта.

Источник: правительство Астурии

Целью визитов являлась оценка возможности размещения под землёй суперкомпьютерной инфраструктуры, что поможет восстановлению старых шахт для повторного использования, минимизирует ущерб экологии благодаря сокращению расходов на содержание крупной вычислительной наземной инфраструктуры, и, наконец, обеспечит физическую безопасность оборудования, хранящего большие объёмы данных — посторонним будет в буквальном смысле трудно до них добраться.

Более того, старые галереи уже имеют многие элементы для размещения IT-оборудования — системы вентиляции и энергоснабжения, запасы воды и довольно стабильный температурный уровень в штольнях. Местные власти рассчитывают, что подобная площадка позволит дополнить суперкомпьютерную сеть Spanish Supercomputing Network (RES).

Источник изображения: Jordan Harrison/unsplash.com

Сформированная в 2007 году испанским Министерством образования и науки, RES представляет собой серию объектов большой вычислительной мощности, доступ к которым обеспечен испанским исследовательским группам. Сегодня RES включает 14 учреждений, располагающих 16 суперкомпьютерами и 9 объектами, обеспечивающими различные сервисы обработки данных. Вскоре частью сети станет система MareNostrum-5, расположенная в Барселонском суперкомпьютерном центре.

Использование шахт для строительства ЦОД и суперкомпьютеров — весьма распространённая практика, причём объекты активно используются как легальными, так и нелегальными игроками рынка. Так, в конце прошлого года о намерении строить суперкомпьютеры и облачные хранилища на базе подземной площадки Lefdal Mine объявила норвежская НКО Sigma2, а в 2019 году германская полиция закрыла нелегальный дата-центр, располагавшийся в бывшем бункере НАТО.

В Германии осудили восемь человек, участвовавших в работе дата-центра, использовавшегося для ведения нелегальной деятельности — от торговли наркотиками до сбыта порнографии. ЦОД располагался в бывшем бункере НАТО в городе Трабен-Трарбах — до продажи здесь работали серверы, принадлежавшие военным ведомствам.

Построенный в 1970-е западногерманскими военными бункер после объединения Германии использовался, в частности, Бундесвером, а затем был продан и с 2013 года принадлежал Герману-Йохану Ксеннту (Herman-Johan Xennt), заявившему при покупке, что будет использовать помещения для создания «гражданского» дата-центра.

Источник: conner/pixabay.com

Считается, что оператором германского ЦОД выступал нелегальный хостинг-провайдер CyberBunker, ранее уже предоставлявший мощности для преступной деятельности, которые располагались в другом бывшем бункере НАТО на территории Нидерландов. «Соинвестором» предположительно стал Джордж «Пингвин» Митчелл (George 'The Penguin' Mitchell), некогда один из самых успешных ирландских импортёров наркотиков. Ксеннт также сдавал часть помещений в голландском дата-центра нарколаборатории, где в 2002 году произошёл пожар.

Хотя Ксеннту на тот момент не предъявили обвинений, его бизнес-лицензия была аннулирована и фактически его деятельность полностью перешла на нелегальное положение. История CyberBunker чрезвычайно заинтересовала прокуроров. К 2015 году к расследованию привлекли германское подразделение, занимающееся борьбой с киберпреступностью. Позже в том же году правоохранительные органы подключились к кабелям связи, ведущим из бункера.

В незашифрованных потоках информации были обнаружены сведения о торговле наркотиками, мошеннических действиях и прочих преступлениях. Как сообщает Data Centre Dynamics, в этом дата-центре нашли пристанище всевозможные нелегальные сервисы различного назначения, включая Cannabis Road, Fraudsters, Flugsvamp, Flight Vamp 2.0, orangechemicals и второй по величине в мире «наркомаркетплейс» Wall Street Market.

Источник: reportyorym/pixabay.com

Чтобы получить больше прямых доказательств, правоохранительные органы оплатили криптовалютой хостинг в CyberBunker и создали веб-сайт, похожий на площадку для проведения мошеннической лотереи, недвусмысленно давая понять владельцам дата-центра, что намерены заниматься незаконной деятельностью.

В сентябре 2019 года, собрав достаточно информации из различных источников, бункер штурмовали более 600 полицейских — они знали, что все сотрудники будут вне помещений, поскольку один из них праздновал получение наследства. Были изъяты 403 сервера, 412 жёстких дисков, 65 USB-накопителей, 61 компьютер (включая ноутбуки), а также 57 смартфонов и около €100 тыс. наличными.

Подозреваемых обвинили в создании и участии в преступном сообществе, при этом не удалось доказать их соучастие в совершении порядка 250 тыс. фактов нарушения закона, предположительно совершённых с помощью сайтов, которые размещались на серверах в бункере. В результате судебного разбирательства Ксеннт приговорён к пяти годам и девяти месяцам лишения свободы, семеро других фигурантов уголовного дела — к различным срокам, от четырёх лет и трёх месяцев в тюрьме до года условно.