В Норвегии введён в эксплуатацию самый мощный в стране суперкомпьютер — система Olivia, созданная корпорацией HPE. Комплекс расположен в дата-центре Лефдаль (Lefdal Mine Datacenter, LMD) на базе бывшего рудника, а для его охлаждения используется холодная вода из близлежащего фьорда.

Машина построена на платформе HPE Cray Supercomputing EX (EX254n). В её состав входят 252 узла, каждый из которых содержит два 128-ядерных процессора AMD EPYC 9745 (Turin). В сумме это даёт 64 512 CPU-ядер. Кроме того, задействован GPU-кластер с 76 узлами, оснащёнными четырьмя гибридными суперчипами NVIDIA GH200: таким образом, в общей сложности применены 304 ускорителя. Используется интерконнект HPE Slingshot 11. За хранение данных отвечает система HPE Cray ClusterStor E1000 вместимостью 5,3 Пбайт.

В текущей конфигурации GPU-кластер Olivia обладает производительностью 13,2 Пфлопс (FP64) и пиковым быстродействием 16,8 Пфлопс. При этом энергопотребление составляет 219 кВт. Таким образом, машина демонстрирует производительность в 60,274 Гфлопс/Вт.

В июньском рейтинге мощнейших суперкомпьютеров мира TOP500 GPU-комплекс Olivia располагается на 117-й позиции, тогда как в списке самых энергоэффективных суперкомпьютеров GREEN500 он занимает 22-ю строку. CPU-блок Olivia занимает 271-е место в рейтинге с фактической и пиковой FP64-производительностью 4,25 и 4,95 Пфлопс соответственно.

Источник изображения: Sigma2

Olivia эксплуатируется государственной компанией Sigma2. Применять суперкомпьютер планируется для проведения исследований в различных областях, включая изменения климата, здравоохранение, ИИ и пр. Суперкомпьютер обладает возможностями для дальнейшего расширения. В частности, количество ядер CPU может быть увеличено до 119 808. Кроме того, могут быть добавлены ещё 224 ускорителя.

Bahnhof, занимающаяся строительством дата-центров, создаст новый подземный объект в Гётеборге (Geteborg, Швеция). На минувшей неделе компания объявила о намерении построить ЦОД Bunkerberget в бункере в центре города. Бункер приобрели у Bunkeberget AB, сообщает Datacenter Dynamics.

Bunkerberget работал во время Второй мировой войны бомбоубежищем для жителей Гётеборга. Во время Холодной войны помещения переоборудовали в подземный завод SKF (Svenska Kullagerfabriken). Основное подземное помещение занимает 6 тыс. м² и имеет высоту потолков 9 метров, общая площадь объекта составляет около 28 тыс. м². SKF продала бункер Bunkeberget AB в 2017 году. С 1998 года территория используется в качестве скейт-парка, который проработает до середины августа, после чего начнутся строительные работы. Часть объекта использовалась в качестве ивент-пространства Berg 211.

Источник изображения: Bahnhof

Bahnof основана в 1994 году и предоставляет услуги широкополосного доступа в Сеть, предлагает колокейшн- и облачные сервисы. Компания также действует в Финляндии, Норвегии, Дании и Германии. Bunkerberget станет седьмым ЦОД Bahnhof и вторым бункером компании. Так, дата-центр Pionen находится в защищённом от ядерных ударов бункере под холмами Вита Берген (Vita Bergen) в районе Сёдермальм (Södermalm) в Стокгольме. Этот бункер был построен в 1940-е годы как объект системы гражданской обороны для защиты правительства.

Бывшие бункеры нередко используют в качестве дата-центров. Например, в 2024 году в Сент-Луисе (штат Миссури, США) появилось предложение о сдаче подземного дата-центра, расположенного в бывшем правительственном бункере. Бывший бункер НАТО в Германии и вовсе долгое время использовался в качестве нелегального дата-центра для «даркнета», а позже было решено переделать его в сырный и винный погреб.

Хостинг-провайдер RuVDS провёл масштабную модернизацию своего дата-центра Rucloud, расположенного в бункере в Королёве, на 20 % нарастив объём вычислительных мощностей и увеличив общую энергоёмкость ЦОД на 25 % — до 1,5 МВт. В ЦОД появились новые серверные стойки, обеспечено дополнительное электроснабжение, обновлены электропроводка и электрическая схема, увеличена ёмкость ИБП, попутно заменена часть аккумуляторных блоков, увеличена мощность систем охлаждения.

RuVDS модернизировала и систему пожарной безопасности. Так, проведено техобслуживание «модуля газового типа» для обеспечения соответствия его характеристик нормативам. Обновлена система датчиков пожаротушения и другая инфраструктура в соответствии с Приказом Росстандарта от 24.10.2024 № 1497-ст по внесению изменений в ГОСТ Р 59636-2021, вступившим в силу 1 декабря 2024 года.

Источник изображения: RuVDS

По словам представителя компании, площадка в Королёве — крупнейшая локация RuVDS. При этом ЦОД уже несколько лет был законтрактован клиентами на 90 %. Новая подведённая мощность даст возможность масштабирования задач и предоставить возможность размещения инфраструктуры новым клиентам. Процесс миграции IT-инфраструктуры, монтажные работы и испытания удалось провести совершенно «бесшовно» — непосредственно в процессе модернизации дата-центр работал в штатном режиме, эксплуатировалось оборудование клиентов RuVDS.

ЦОД Rucloud заработал в 2015 году. Объект получил сертификаты ФСТЭК по классу технической защиты конфиденциальной информации. Он соответствует стандартам ГOCT P ИCO/MЭK 27001-2006 (ISO/IEC 27001-2006) и ГОСТ Р ИСО 9001-2015 (ISO 9001:2015). Сейчас в активе компании — вычислительные мощности в 16 ЦОД, из них восемь находятся за пределами России. В марте сообщалось, что хостинг-провайдер развернул новые вычислительные мощности в Краснодаре.

Стартап CSignum из Эдинбурга (Шотландия), разработавший систему подземной и подводной коммуникации, привлёк £6 млн в раунде финансирования серии A, который возглавили ассоциация семейных офисов Archangels, инвестиционная компания Scottish VC Par Equity и государственное агентство Scottish Enterprise. Среди инвесторов также указаны British Business Investment (BBI), Raptor Group, Deep Future, Blue Angel Network («дочка» SeaAhead) и индивидуальные инвесторы из США.

Основанная в 2020 году компания CSignum разработала беспроводную систему связи, которые использует низкочастотные электромагнитные поля для передачи данных на поверхность через воду, лёд, почву, горные породы и бетон. Как указано на сайте компании, технология позволяет передавать данные с морского или речного дна на берег, с корпуса судна и двигательных установок на палубу и т.п. Отличительной особенностью решения является отсутствие отражения на границе вода-воздух, что является распространённой проблемой для акустических систем.

Источник изображений: CSignum

Платформа CSignum EM-2 поддерживает двунаправленную передачу данных на расстояние до 100 м (до 2 км с акустическим шлюзом) между подводными или подземными датчиками и приповерхностными модулями со скоростью 400 бит/с. С её помощью можно успешно развёртывать и эксплуатировать устройства мониторинга интернета подводных вещей (IoUT). Компания также предлагает облачное решение CSignum Cloud, предоставляя услуги передачи данных в дополнение к своим беспроводным системам. Решения компании успешно используются в нескольких проектах по мониторингу качества речной воды.

У CSignum есть клиенты в Великобритании, ЕС и США. По данным компании, её разработки могут использоваться для мониторинга качества воды и окружающей среды, например, для соблюдения требований программы развития водной индустрии Великобритании AMP8, беспроводного мониторинга подводной части судна и приложений безопасности для критически важной подводной инфраструктуры, такой как морские ветровые турбины и нефтегазовые платформы.

CSignum сообщила, что полученные инвестиции позволят ей «расширить своё глобальное присутствие, ускорить разработку продуктов и удовлетворить растущий спрос на надёжную передачу данных в режиме реального времени для подводных и подземных приложений».

Находящаяся в государственной собственности Греции компания Public Power Corp (PPC) представила план строительства дата-центров в закрытых шахтах, где ранее добывался бурый уголь. Эти шахты, принадлежащие PPC, расположены в области Западная Македония, сообщает Datacenter Dynamics. Проект предусматривает инвестиции в размере €5 млрд ($5,38 млрд) и включает строительство дата-центра мощностью 300 МВт на первом этапе. В компании уточнили, что в дальнейшем кампус может быть расширен до 1 ГВт.

Дата-центр будет питаться от электростанции на природном газе и солнечной энергии, а также получит аккумуляторное энергохранилище (BESS) и хранилище для накопительной гидроэнергетики. PPC планирует перевести свою последнюю угольную электростанцию Ptolemaida 5 на природном газ с возможностью перехода на водород в будущем. Объявление компании последовало за заявлением о намерении полностью свернуть работу угольной электростанции к 2026 году.

Источник изображения: Pedro Henrique Santos/unsplash.com

Дополнительно PPC рассчитывает построить солнечную электростанцию мощностью до 1,3 ГВт на территории шахт Amyndaio и Ptolemaida, а также установить BESS на 300 МВт и реализовать два проекта ГАЭС мощностью 320 МВт и 240 МВт. Что касается дата-центра, PPC ведёт переговоры с несколькими потенциальными партнёрами, однако их имена пока не раскрываются.

В последние месяцы PPC всё активнее изучает рынок ЦОД как перспективное направление для роста. В конце прошлого года, совместно со строителем ЦОД Edgnex, компания анонсировала планы по строительству дата-центра мощностью 12,5 МВт в Афинах (Греция). Первая фаза этого проекта предполагает инвестиции в размере €150 млн ($161,5 млн) с возможностью масштабирования объекта до 25 МВт в будущем.

Бывшие шахты нередко находят применение в индустрии ЦОД и смежных отраслях. Осенью 2023 года сообщалось, что итальянцы построят ЦОД Trentino Data Mine в доломитовой шахте Сан-Ромедио. В январе 2024 года появилась информация о том, что заброшенные шахты могут стать хранилищами «мусорного» тепла эдинбургского суперкомпьютера. В том же месяце — о том, что дата-центр Data Center Ridge охладят водой из заброшенных шахт. Более того, в конце 2024 года в Итальянских Альпах планировалось построить первый в Европе дата-центр в действующей шахте.

Бонн (Германия) остро нуждается в детских садах, поэтому размещают их порой в самых неожиданных местах. Так, 70 детей в четырёх обычных группах и одной ясельной скоро должен принять бывший дата-центр, построенный в 1980-х годах, архитектура которого практически не предусматривала окон, сообщает издание General Anzeiger.

Как сообщил представитель управляющей активами компании Swiss Life Asset Managers, строительство детского сада завершили менее чем за два года. В конце ноября 2024 года объект передали арендатору, городу Бонну, и новому «оператору» — Terminal for Kids. Недавно детский сад начала посещать первая группа из 20 детей.

Попутно рассматривались и другие варианты, поскольку в помещения объекта практически не проникал естественный солнечный свет. Цокольный этаж объекта почти полностью находится под землёй. Кроме того, вокруг объекта расположены шестиэтажные здания и памятники архитектуры, поэтому обеспечить инсоляцию на первый взгляд было непросто. В 2019 году было заказано исследование, которое показало, что организовать необходимые детям условия всё-таки можно. Для этого были снесены два этажа, а внутренний двор фактически «распечатали».

Источник изображения: RKW Architektur +

Работы в черте города и близко к историческим объектам проводились очень осторожно. Также были приняты многочисленные меры на случай возможных осложнений вроде вибраций, просадки грунта и др. Одним из главных вызовов стал рост расходов, вызванный пандемией COVID-19 и другими факторами, так что несколько раз проект оказывался на грани закрытия. В результате общая смета оказалось в три раза больше, чем планировалось изначально.

В новом здании нашлось место для детского сада общей площадью 2,4 тыс. м², из них 1,2 тыс. м² отведены под внутренние помещения, а 895 м² — под открытые сооружения и игровые площадки. Особое внимание уделялось соблюдению всех требований по уходу за детьми (хотя есть несколько неназванных исключений). Часть бывшего ЦОД теперь используется в качестве резервуара для дождевой воды. Фасад объекта выполнен из подвергнутого термообработке прессованного бамбука, что повышает устойчивость здания к атмосферным воздействиям.

Примечательно, что на фоне жёсткого дефицита ЦОД во всём мире под дата-центры переделывают другие строения и объекты. Например, в США предложили разместить ЦОД в бывшем правительственном бункере, а в Европе подобный бункер даже использовали в качестве дата-центра для сегмента «даркнета».

Оператор Scandinavian Data Centers (SDC) запустил систему хранения энергии на основе АКБ (BESS) для подземного ЦОД ScandiDC I. Объект расположен в шведском Эскильстуне (Eskilstuna), причём речь идёт о реализации экосистемного проекта, сообщает Datacenter Dynamics.

Как сообщает пресс-служба компании, недавно она объявила о запуске первого «экосистемного» объекта ScandiDC I, который подразумевает создание ЦОД с энергохранилищем для стабилизации местной электросети, а также интеграцию с локальной системой отопления тепла дата-центра жилых домов. Как заявляют в SDC, она стремится максимизировать «общественную выгоду на мегаватт». С учётом растущих энергетических потребностей процесса цифровизации объект рассматривается в качестве модели того, как ИИ может использоваться для отопления, внося таким образом свой вклад в устойчивое развитие.

ЦОД расположен на территории бывшего военного завода, построенного в 1939 году. Последние 14 лет на объекте работал небольшой ЦОД одной из местных IT-компаний. Предполагается, что грядущее расширение позволит повысить ёмкость и гибкость ЦОД — будут доступны залы (шесть штук на первом этапе) как с воздушным охлаждением, так и с СЖО. Завершить работы планируется в 2026 году, инвестиции составят kr2 млрд ($186,8 млн).

Источник изображения: SDC

Тепло ЦОД будут передавать в систему центрального отопления Eskilstuna Energi & Miljö. Энергохранилище BESS, разработанное совместно с Ellevio Energy Solutions, будет резервным источником питания ЦОД. Глава SDC ранее был соучредителем Rockan Data Center, запустившей ЦОД в бывшем военном подземном объекте. В США и Евросоюзе активно используют бункеры времён холодной войны и другие бывшие военные объекты, иногда они применялись даже в нелегальных целях.

Власти Эскильстуны объявили, что инициатива укрепляет позиции муниципалитета как лучшего в экологическом отношении в Швеции, а также пионера в области устойчивого развития. Примечательно, что здесь же строит дата-центр и Amazon (AWS), его должны ввести в эксплуатацию в конце года.

Национальная лаборатория по изучению возобновляемой энергии США (NREL) при поддержке Национальной лаборатории Лоуренса в Беркли (LBNL), Принстонского и Чикагского университетов представила проект, призванный решить проблему растущего потребления энергии ЦОД. Новое решение позволит обеспечить эффективное охлаждение ЦОД благодаря использованию технологии подземного хранения тепловой энергии (UTES).

Финансированием проекта занимается Управление геотермальных технологий (GTO) Министерства энергетики США (DoE). Считается, что он поможет ускорить разработку и коммерческое внедрение нового поколения геотермальных технологий — с закреплением лидерства США в данной сфере. Обычно UTES предполагает нагрев (или охлаждение) теплоносителя на поверхности в ходе естественных дневных или сезонных циклов с его последующей прокачкой через подземные хранилища различных типов.

По статистике NREL, на долю традиционных систем охлаждения приходится до 40 % годовых энергозатрат дата-центров. Система подземного хранения Cold UTES позволит использовать электричество вне пиковых периодов для формирования запасов «холода» под землёй. Эти резервы можно будет включить в действующие системы охлаждения ЦОД и применять в периоды, когда нагрузки на электросети максимальны, что в итоге сократит объёмы потребления энергии. В NREL считают, что технология во многом похожа на использование обычных аккумуляторов с учётом наиболее благоприятного времени их заряда/разряда, что позволит снизить эксплуатационные расходы ЦОД.

Источник изображения: NREL

Предполагается, что Cold UTES сможет стать коммерчески привлекательным и технически жизнеспособным решением для ЦОД. Проект позволит подтвердить потенциал соответствующих систем для операторов ЦОД, коммунальных служб и операторов электросетей. В NERL считают, что система сможет обеспечить как краткосрочное, так и долгосрочное хранение.

Похожий проект финансировало правительство Австралии для суперкомпьютера Pawsey Centre в Перте, отмечает DataCenter Dynamics. Т.н. CSIRO Geothermal Project предусматрвиает перекачивание холодной воды из неглубокого водоносного слоя для охлаждения суперкомпьютера. Нагретая вода возвращается обратно в водоносный слой ниже по течению. По оценкам, такая система сэкономит порядка 14,5 млн л чистой воды только в первые два года работы.

Есть и другие геотермальные варианты, предназначенные для интеграции с ЦОД. Например, в 2024 году появилась новость о том, что тепло суперкомпьютера в Эдинбургском университете будут закачивать в заброшенные шахты с последующим использованием для отопления местных домов.

Deep Fission, разрабатывающая малые модульные реакторы (SMR), подписала соглашение с американским девелопером экоустойчивой инфраструктуры Endeavour Energy, в рамках которого дата-центры Endeavour Edged будут запитаны от реакторов суммарной мощностью 2 ГВт.

В Deep Fission утверждают, что пока стоимость энергии, получаемой от SMR довольно высока, но технология компании чрезвычайно безопасна и позволит поставлять электричество без углеродных выбросов по цене 5–7 центов за кВт∙ч. Модель Deep Fission Borehole Reactor 1 (DFBR-1) представляет собой водно-водяной реактор под давлением (PWR), обеспечивающий 15 МВт тепловой и 5 МВт электрической энергии. Одной загрузки топлива должно хватить на 10–20 лет непрерывной работы.

Источник изображений: Deep Fission

DFBR-1 будут размещаться в скважинах диаметром около 0,76 м на глубине более 1,5 км, где давление достаточно велико для того, чтобы можно было отказаться от толстой оболочки реактора. Как утверждают в компании, такой подход снижает себестоимость реактора и повышает его безопасность. Даже если случится утечка, то никакой значимой радиоактивной угрозы не будет, поскольку топливо останется внизу, не попав ни на поверхность, ни в водоносные слои.

Новый реактор после окончания срока работы старого можно разместить в скважине поблизости или в той старой скважине на чуть меньшей глубине, буквально поверх предшественника. Разработчики уверяют, что подобное решение позволит сократить как себестоимость строительства, так и сроки реализации проекта в сравнении с наземными вариантами. Также может быть обеспечена плотность в более чем 100 МВт на площади в 0,1 га.

Калифорнийская Deep Fission основана в 2023 году, а в августе прошлого года она анонсировала раунд предварительного финансирования на сумму $4 млн для ускорения своих попыток нанять специалистов, получить одобрение регуляторов и обеспечить коммерциализацию SMR. Edged является ЦОД-подразделением Endeavour. Компания основана в 2021 году и владеет дата-центра в США и на Пиренейском полуострове. Она специализируется на ИИ ЦОД высокой плотности с безводными системами охлаждения.

В 2024 году SMR стали популярные в секторе ЦОД. В октябре 2024 года AWS заключила соглашение с Energy Northwest, X-Energy и Dominion Virginia, чтобы поддержать внедрение реакторов на 600 МВт. До этого Google подписала корпоративное соглашение для покупки атомной энергии от многочисленных SMR Karios Power, внедрение ожидается в 2030 году. Наконец, строитель ЦОД Switch подписал соглашение о покупке до 12 ГВт с SMR компании Oklo. Этот договор стал для последней уже пятым соглашением с операторами ЦОД в 2024 году. Хотя ни одного коммерческого SMR в мире ещё нет, компания уже имеет договоры на поставку 14 ГВт.

В скором будущем в Итальянских Альпах появится уникальный подземный дата-центр, который разместят в действующей шахте, где до сих пор ведётся добыча доломита, а в выработанных штольнях по соседству хранятся яблоки, вино и сыр. По данным Университета Тренто, ЦОД начнёт предоставлять колокейшн-сервисы уже в 2026 году.

Проект будет реализован университетом совместно с компанией Trentino DataMine. Также в нём примут участие Covi Costruzioni, Dedagroup (Deda), GPI Group и ISA-Istituto Atesino di Sviluppo. Ёмкость Intacture составит 5 МВт, объект будет вмещать около 1220 стоек. Реализация обойдётся в €50,2 млн. Из них €18,4 млн будет получено от государства в рамках плана Recovery and Resilience Plan (NRRP), а остальное предоставят частные инвесторы.

Источник изображений: Trentino DataMine

ЦОД построят в горе Валь-ди-Нон в 40 км от Тренто. Строительство идёт в шахте компании Tassullo, ведущей доломитовые разработки. Подобные проекты в мире реализуют довольно редко, поскольку дата-центры нуждаются в инфраструктуре: хороших дорогах, доступном электричестве, чистой воде и др. При этом подземный ЦОД имеет ряд преимуществ в сравнении с надземным — это устойчивая температура круглый год, возможность фрикулинга, защита от неблагоприятных погодных условий и даже электромагнитных импульсов и т.д. У таких ЦОД высокий потенциал энергоэффективности и экономичности в целом.

По словам представителя Trentino DataMine, шахта Сан-Ромедио, где разместят ЦОД, обеспечивает максимальную физическую защиту, в том числе от сейсмических и гидрогеологических рисков. Кроме того, можно экономить более 25 % электроэнергии в сравнении со средними показателями по Европе, и до 40 % в сравнении со средиземноморскими странами. Кроме того, не потребуется занимать земельный участок, поскольку более 80 % конструкций ЦОД разместятся в недрах горы. PUE будет не выше 1,25.

Пока строительство ЦОД Intacture находится на первом этапе. Авторы проекта в Trentino DataMine уже видят превращение дата-центра в «зелёный» инновационный хаб, не только для региона, но для всей страны. Не исключается предоставление и других услуг помимо колокации, в том числе для исследований в сфере естественных наук, ИИ, «энергетического перехода» и обеспечения кибербезопасности.

О намерении построить ЦОД близ Тренто сообщалось ещё в 2023 году, но официально объявили о его реализации только в начале октября уже после начала работ. Хотя для гиперскейлеров ёмкости этого ЦОД слишком мало, для местных проектов он способен обеспечить вполне подходящую площадку — в регионе имеется ВОЛС подключения объекта к дата-центрам Милана.