Группа «Т-Технологии» намерена построить сеть собственных дата-центров. Пресс-служба компании сообщает, что первый этап строительства завершится уже к 2027 году, и заработают два первых ЦОД. Ожидается, что к 2031 году объекты выйдут на полную мощность, ёмкость каждого составит 50 МВт и 100 тыс. серверов. О намерении Т-Банка строить собственные ЦОД сообщалось ещё в середине ноября.

Структура рассчитывает войти в «Топ-5» компаний России по мощности ЦОД в корпоративном сегменте рынка. Сеть ЦОД станет базой для развития и обеспечения работы экосистемы головной структуры, выделяя мощности для ресурсоёмких задач, таких как хранение и обработка данных более 50 млн клиентов банка. Наличие собственных ЦОД даст возможность «Т-Технологиям» усилить позиции в сфере ИИ — компании более не смогут помешать внешние ограничения и она сможет развиваться даже в условиях дефицита вычислительных мощностей.

Каждый день приложениями Т-экосистемы пользуются более 14 млн человек, половина из более 500 тыс. запросов клиентов приходится на автоматизированные консультации в чатах, говорится в пресс-релизе. Новые ЦОД помогут развитию перспективных направлений, запуск которых состоялся в текущем году — речь идёт о «вселенной ИИ-ассистентов», помогающих в самых разных сферах, от путешествий, до инвестиций, рекламы для бизнес-клиентов и пр.

Источник изображения: Artem Labunsky/unsplash.com

В компании сообщают, что новые ЦОД позволят «объединить арендованные мощности с собственными» — будет предоставлено более 7 тыс. мест для серверов и оборудования. При этом собственная инфраструктура, в отличие от универсальных типовых продуктов, позволит точнее учитывать потребности бизнеса и создавать специальные IT-решения. Ожидается, что Т-Банк станет первым из банков планеты, применяющих гибридную технологию охлаждения с прямым фрикулингом (direct free air cooling). Благодаря этому снизится как энергопотребление, так и ущерб окружающей среде. При этом показатель PUE составит 1.15 при среднемировом уровне 1,6.

Наконец, строительство собственных дата-центров даст возможность «Т-Технологиям» сэкономить 26 млрд руб. только до 2030 года, после чего ежегодная экономия будет составлять по 10 млрд руб. из-за отказа от аренды чужой инфраструктуры и объединения собственных и арендованных площадей. Строительство ЦОД в особых экономических зонах (ОЭЗ) даст возможность экономить на закупках оборудования и содействовать развитию IT-инфраструктуры в регионах.

Источник изображения: Т-Банк

По словам вице-президента Т-Банка Вячеслава Цыганова, выделяемое ЦОД тепло будет использоваться для отопления окружающей городской застройки. Кроме того, наличие собственных современных ЦОД позволит увеличить эффективность оказания услуг, повысить их качество и обеспечить стабильное развитие соответствующей сферы. Ранее сообщалось, что Сбербанку и Т-Банку всё труднее найти энергию для строительства дата-центров.

Над созданием собственных ЦОД работают и другие российские банки. По мнению экспертов, для развития ИИ и других IT-технологий организациям нужны дата-центры с высокой энергоэффективностью, способные использовать высоконагруженные стойки (от 22 кВт). На отечественном рынке таких предложений сейчас нет, поэтому достаточно богатые компании сами строят ЦОД под свои задачи, передают «Известия». Также отмечается, что банки всё в большей степени превращаются в IT-бизнес, от которого при этом требуется защита данных клиентов.

Оператор экологичных HPC ЦОД atNorth анонсировал существенное расширение двух дата-центров в Исландии. В рамках курса на обеспечение экоустойчивости компания заключила соглашение со стартапом Hringvarmi, специализирующемся в том числе на утилизации ненужного тепла.

Кампус ICE02 возле исландского Кеблавика (Keflavík) получит дополнительно 35 МВт, ICE03 в Акюрейри (Akureyri) — 16 МВт. Обе площадки располагают дополнительным пространством для дальнейшего расширения мощностей с учётом роста спроса. Обе обеспечивают PUE на уровне 1,2 и готовы к применению технологий фрикулинга и СЖО. ЦОД готовые к размещению высокоплотной HPC-инфраструктуры. Все работы по обновлению обеих площадок должны завершиться в I половине 2025 года.

atNorth также заключила договор о сотрудничестве со агротехническим стартапом Hringvarmi для утилизации тепла ЦОД, которое поможет в выращивании продуктов. Стартап совместно с агрохолдингом Rækta Microfarm разместит на территории ICE03 прототип оборудования для выращивания микрозелени. В Hringvarmi заявляют, что партнёрство нацелено на развитие исландского сельского хозяйства, на снижение импорта продуктов и увеличения вклада в местную циркулярную экономику.

Источник изображения: atNorth

В atNorth заявляют, что отмечает интерес к своим экобезопасным и энергоэффективным дата-центрам. Сегодня её клиентами являются Crusoe, Advania, RVX, DNV, Opera, BNP Paribas, Tomorrow.io и др. Гиперскейлеров и других клиенов с ресурсоёмкими задачами привлекает качество инфраструктуры и выгодное географическое положение Исландии. Климат здесь прохладный, есть много возобновляемой энергии, каналов связи и квалифицированных кадров. atNorth управляет семью ЦОД в четырёх странах Северной Европы. Ещё четыре кампуса находятся в стадии строительства: финские FIN02 (Хельсинки) и FIN04 (Коувола) и датские DEN01 (Баллеруп) и DEN02 (Варде).

«Газпром» предложил довольно необычное применение теплу дата-центров. По информации «Интерфакса», ссылающегося на одну из публикаций первого заместителя АО «Газпром промгаз» Николая Варламова, помочь в утилизации тепла ЦОД могут газораспределительные станции (ГРС) — при понижении давления сильно падает температура, поэтому дополнительный подогрев придётся как нельзя кстати.

По словам топ-менеджера компании, многие российские IT-бизнесы анонсируют строительство ЦОД в разных российских регионах. При этом дата-центры электроэнергию в «мусорное» тепло, которому ищут применение по всему миру — от обогрева теплиц и бассейнов до отопления домов. По словам Варламова, при строительстве ЦОД поблизости от газораспределительных станций можно было бы использовать тепло дата-центров для подогрева природного газа.

При этом ЦОД сможет получать дешёвую электроэнергию, вырабатываемую детандер-генераторными агрегатами (ДГА) газораспределительных станций. Эффективность такой технологии уже подверглась предварительной оценке — вырабатываемая ДГА энергия стоит менее 0,5 руб./кВт∙ч. Другими словами, энергией можно обеспечить не только системы охлаждения ЦОД, но и вычислительные мощности объектов, снижая расход на энергоснабжение ЦОД и выброс вредных веществ в окружающую среду.

Источник изображения: Chad Peltola/unsplash.com

Комплексный подход позволит добиться большей энергоэффективности и обеспечить энергоресурсами внутренние проекты участников. По мнению Варламова, на компрессорных станциях возможно получение энергии и при утилизации тепла выхлопных газов работающих турбин. На тех же станциях в теории можно генерировать водород, на газораспределительных станциях — получать сжиженный природный газ (СПГ), который, в числе прочего, способен служить резервным источником топлива.

У «Газпрома» имеется и собственная развитая IT-инфраструктура и постоянно ведётся работа над новыми проектами. Так, в сентябре 2024 года появилась новость, что компания потратит 45 млрд руб. на строительство дата-центра в Великом Новгороде.

DC01UK представила план строительства в Хартфордшире (Великобритания) одного из крупнейших, по словам компании, дата-центров в Европе. Пресс-служба DC01UK сообщает, что площадь строений составит почти 186 тыс. м2, а площадь территории кампуса — около 34 га. National Grid уже обеспечила на территории резервную мощность 400 МВА. Будущий кампус расположится недалеко от национальных и международных ВОЛС и относительно близко к уже существующим ЦОД.

DC01UK готовятся ввести в эксплуатацию в 2029 году, это сулит экономические выгоды как на местном, так и на общегосударственном уровнях. Оценочная стоимость проекта составляет £3,75 млрд ($4,9 млрд). На этапе строительства будет обеспечено не менее 500 рабочих мест. После ввода в эксплуатацию будет создано 200 постоянных рабочих мест. Местные жители смогут обучиться новым профессиям на базе учебного центра кампуса.

Источник изображений: DC10UK

Косвенно DC01UK обеспечит увеличение валовой добавленной стоимости (GVA) на £1,1 млрд/год и поможет создать 13,7 тыс. рабочих мест в смежных отраслях. Кроме того, DC01UK должен привлечь в регион инвестиции со всех концов света. В рамках проекта предполагается обновление местной дорожной и транспортной инфраструктуры, а также использование тепла ЦОД для отопления новых домов и предприятий — подобные проекты уже реализуются в Великобритании.

Строительство предусматривает использование технологий с низким уровнем углеродных выбросов, предусмотрена и генерация возобновляемой энергии на месте. Утверждается, что не менее 54 % участка останется «открытым зелёным пространством». В компании заявляют, что экопоказатели новых ЦОД превысят отраслевые стандарты. Кампус будет построен в интересах неназванного гиперскейлера.

Примечательно, что буквально вчера в Великобритании объявили о присвоении дата-центрам статуса критически важных инфраструктурных объектов, подлежащих разносторонней государственной защите. Новые меры повысят уверенность бизнеса в инвестициях в эту сферу в Великобритании. Отрасль, по некоторым оценкам, уже приносит £4,6 млрд выручки ежегодно.

Исландский оператор дата-центров atNorth объявил, что его следующий дата-центр, крупнейший для компании на сегодняшний день, будет использовать избыточное тепло для создания больших теплиц и отопления домов. По данным The Register, новый кампус DEN02 разместят возле датского аэропорта Биллунн (Billund).

Кампус предназначен для выполнения интенсивных вычислений для клиентов вроде гиперскейлеров и компаний, работающих с ИИ- и HPC-нагрузками. На момент открытия в 2026 году ёмкость кампуса должна составить 250 МВт, в перспективе она может масштабироваться и дальше. Как и другие операторы ЦОД, atNorth ищет источники возобновляемой энергии для обеспечения своих объектов. В случае с DEN02 речь, вероятно, будет идти о солнечных и ветряных электростанциях в окрестностях объекта.

Источник изображения: atNorth

Как и многие современные проекты экоустойчивых ЦОД, новая инициатива atNorth будет учитывать возможность использования «мусорного» тепла, тем более что среднегодовая температура в Дании составляет около 8˚C. План будет реализован при содействии компании Wa3rm, специализирующейся на «циркулярных промышленных проектах», а тепло DEN02 будет использоваться для выращивания овощей.

Также имеются планы обеспечить отоплением и горячей водой местных жителей, но atNorth сообщила журналистам, что пока ведутся только переговоры с потенциальными клиентами. В компании отметили, что DEN02 может стать эталоном для будущих ЦОД. Предполагается, что высокая энергоэффективность и использование технологий захвата тепла вкупе с выгодным географическим положением в Дании и приверженностью компании к достижению экоустойчивости, является примером для всей индустрии ЦОД. Дания может стать идеальным место для гиперскейлеров и ИИ-бизнесов, стремящихся к декарбонизации своих проектов.

В последние года схемы использования тепла ЦОД весьма распространены, особенно в Европе, где европейская Директива по энергетической эффективности (European Energy Efficiency Directive или EED) требует от операторов ЦОД использовать лучшие отраслевые технологии для достижения энергоэффективности. Впрочем, ассоциация TechUK ранее в этом году предупредила о потенциальных недостатках практики использования тепла ЦОД в районных системах отопления из-за относительно низких температур теплоносителей и отсутствия точных данных о том, сколько именно тепла будет вырабатываться вообще.

О том, что использование тепла не всегда оправдано, говорят и другие исследования. Но всё это не помешало реализации проектов вроде гронингенского в Нидерландах, а также отдельных проектов Google, Microsoft и Yandex в Финляндии. Самым необычным, пожалуй, является проект в Японии (Хоккайдо), где для охлаждения IT-инфраструктуры используется снег, а полученная тёплая вода используется для разведения угрей на продажу.

Принадлежащая шведскому фонду Areim компания EcoDataCentr, занимающаяся строительством и эксплуатацией экобезопасных ЦОД, намерена возвести в шведском Эстерсунде экоустойчивый дата-центр EcoDataCenter 2. Как сообщает HPC Wire, новый кампус предусматривает внедрение «циркулярной» экосистемы, и в числе прочего, обеспечит «симбиоз» с производителями еды.

Известно, что оператор уже реализовал проект EcoDataCenter 1, в рамках которого возведён «первый в мире» ЦОД, построенный полностью из дерева и при участии местной рабочей силы — его избыточное тепло используется при выпуске древесных гранул. Впрочем, теперь речь идёт о значительно более сложном «зелёном» проекте.

EcoDataCenter 2 расположится в муниципалитете Эстерсунд (Östersund) — известно, что в местных энергосетях циркулирует только электричество из возобновляемых источников. Проект позволит создать 800–1000 рабочих мест, а «зелёная» энергия, помимо прочего, позволит выращивать в этой местности нехарактерные для местного холодного климата продукты питания.

Источник изображения: EcoDataCenter

В расчёт принимается и то, какие материалы используются или применяются повторно, как организованы трудовые отношения, какая именно энергия потребляется и другие важные аспекты. Ключевым участником процесса стала компания Wa3rm, на основе идей которой будет строиться «циркулярный» бизнес, именно она будет заниматься производством продуктов питания. В компании заявляют, что проект изначально проектируется с прицелом на реализацию «циркулярной» концепции.

По словам оператора ЦОД, поскольку большая часть HPC-вычислений мало зависит от временных задержек, размещение ЦОД для таких проектов можно проектировать именно там, где будет обеспечен наиболее высокий уровень экологической эффективности систем. К 2026 году планируется ввести в эксплуатацию первую очередь проекта мощностью 20 МВт, к 2033 году он должен «разрастись» до 150 МВт. Известно, что похожие проекты, предусматривающие выращивание рыб и омаров, уже реализованы в Японии и Норвегии.

Провайдер облачных услуг Civo сообщил о сотрудничестве с компанией Heata с целью обеспечения горячей водой домов в Великобритании за счёт отвода тепла от размещённых локально серверов, подключённых к системам отопления. Heata позиционирует себя как разработчик инновационной экологически чистой распределённой вычислительной сети, которая использует «мусорное» тепло, генерируемое при обработке вычислительных нагрузок, для нагрева воды.

Компании планируют запустить совместный пилотный проект, в рамках которого клиентам Civo будет предоставлена возможность опробовать облачные нагрузки в сети Heata. Компании заявили, что это позволит клиентам Civo обеспечить тех, кто столкнулся с нехваткой топлива, бесплатной горячей водой.

Источник изображения: Heata

Компактные серверы Heata (36 × 28 см) устанавливаются на внутридомовых бойлерах. Заказчики платят Heata за обработку своих облачных нагрузок на этих серверах (в пакетном режиме), а отводимое от них тепло используется для нагрева воды в бойлере. Работа системы увязана с существующими системами отопления. Бойлеры были протестированы в сотрудничестве с British Gas. Один такой блок позволяет сократить выбросы углекислого газа на 1 т в год.

В настоящее время Heata вместе с Innovate UK занимается определением домов, где будет установлено вычислительное оборудование. Концепция «цифровых бойлеров» не нова. Наиболее известна такими решениями компания Qarnot из Франции, которая недавно привлекла €35 млн инвестиций. А вот компания Nerdalize, занимавшаяся производством «вычислительных» радиаторов, обанкротилась в 2019 году.

Французская компания Qarnot предоставляет услуги высокопроизводительных вычислений компаниям вроде Adobe, Societe Generale, Illumination и Fix Studio. Изюминкой её деятельности является акцент на использовании тепла серверов в разных целях — на этот раз его применили для приготовления ужина.

Фото: Clément Pellegrini/LinkedIn

Вычислительные кластеры Qarnot OBx, по данным компании, позволяют использовать до 96 % выделяемого серверами тепла для нагрева, например, воды. Один из них и использовала Qarnot, подойдя к вопросу использования тепла с кулинарной изобретательностью. Так, в ёмкости c циркулирующей горячей водой появились утка, говядина и лосось. Чтобы охлаждающая жидкость не превратилась в бульон, продукты разместили в вакуумированной упаковке.

Пока система занималась 3D-рендерингом, температура в ёмкости поддерживалась на уровне +55 °C. Этого вполне достаточно, чтобы использовать французскую технологию приготовления мяса sous vide — она предусматривает приготовление блюд при относительно невысоких температурах. Правда, процесс приготовления в этом случае затягивается. Разумеется, в данном случае речь идёт лишь о демонстрации возможностей решений Qarnot.

Компания активно продаёт отработанное тепло, но оно обычно применяется более традиционными способами, преимущественно для отопления жилых и коммерческих зданий. По словам технического директора компании, её решения снижают энергозатраты на отопление на 65 %, а сопутствующие выбросы углерода — на 81 %. В 2018 году компания представила «криптообогреватели», представляющие собой комбинацию вычислительного устройства и обогревателя для дома, а в 2020 году предложила отапливать дома с помощью б/у серверов.

Необычное решение реализовали на японском острове Хоккайдо. Избыточное тепло дата-центра, использующего для охлаждения талую снежную воду, теперь будут использовать на подшефной ферме, разводящей угрей.

Идея использования лишнего тепла для выращивания продуктов питания не нова. Например, в Норвегии компания Green Mountain использует нагретую оборудованием ЦОД воду для разведения лобстеров и форели. Пока ЦОД White Data Center (WDC) в городе Бибае импортировал мальков угрей и местный персонал будет выращивать их в расположенных на территории ёмкостях. Сопутствующим продуктом станут и грибы — на выращивание тех и других уходит относительно немного времени.

В ноябре ЦОД организовал саму ферму при поддержке городских властей. В ёмкостях круглый год будет поддерживаться оптимальная температура, в них планируется поселить до 300 000 угрей, которые будут расти в течение семи месяцев, пока не достигнут «коммерческого» веса в 250 г. Такая рыба станет продаваться по всей стране для организации школьного питания. Это будут первые угри, выращенные на Хоккайдо.

Источник изображения: Wouter Naert / Unsplash

Местная серверная инфраструктура охлаждается талой водой из снега, собираемого зимой и используемого круглый год. После того, как оборудование ЦОД охлаждается, нагретая вода поступает в ёмкости рыбной фермы. Ранее оператором ЦОД выступал город Бибай — зимой здесь выпадает много снега.

Охлаждение талой водой вычислительного оборудования впервые предложили ещё в 2008 году, а в 2010 реализовали пилотный проект. С 2014 по 2019 годы Бибай эксплуатировал ЦОД White Data Center, доказывая работоспособность предложенной концепции. Конструкция позволяла экономить до 20 % электроэнергии и с апреля 2021 года ЦОД является коммерческим проектом, выкупленным одним из партнёров — компанией Kyodo News Digital. Ожидается, что проект будет обеспечивать нулевой углеродный выброс.

Источник изображения: Datacenter Dynamics

Пока обслуживается 20 стоек с серверами, в текущем году планируется открытие второго ЦОД на 200 стоек. По словам руководства WDC для следующего ЦОД уже сейчас ведутся эксперименты по выращиванию овощей, рыбы и других морепродуктов с помощью избыточного тепла. Идея использовать для охлаждения талую воду пришлась по душе и другим бизнесам — недалеко аналогичный проект реализовала Kyocera, схожие технологии используются даже на юге Японии, где климат мягче.

«Зелёная» экономика, переход на которую стремится осуществить всё больше стран, требует радикального сокращения вредного воздействия техносферы на окружающую среду. Один из эффективных способов достижения этой задачи связан с включением в полезный оборот побочных продуктов экономической деятельности. В случае дата-центров таким продуктом является тепло.

Великобритания, Дания и другие страны направляют тепло от ЦОД в отопительные системы домов, а Норвегия обогревает им омаровые фермы и планирует обязать дата-центры отдавать «мусорное» тепло на общественные нужды. Французская компания Qarnot решила посмотреть на эту задачу под другим углом, разработав в 2017 г. концепцию электрообогревателя для жилых и офисных помещений на процессорах AMD и Intel.

В 2018 г. Qarnot продолжила изыскания и выпустила криптообогреватель QC-1. А недавно она порадовала своих заказчиков следующим поколением отопительных устройств QB, которое создано в сотрудничестве с ITRenew. Новые модули используют OCP-серверы, которые ранее работали в дата-центрах гиперскейлеров. Оснащённые водяным охлаждением, они обогревают помещения пользователей и обеспечивают дополнительные мощности для периферийных облачных вычислений.

Изображение: Qarnot (via DataCenterDynamics)

Система отводит 96% тепла, производимого кластером серверов, которое попадает в систему циркуляции воды. IT-часть состоит из процессоров AMD EPYC/Ryzen или Intel Xeon E5 в составе OCP-платформ Leopard, Tioga Pass или Capri с показателем PUE, который, по словам разработчиков, стремится к 1,0. При этом вся система практически бесшумная, поскольку вентиляторы отсутствуют.

В компании заявляют, что с февраля уже развёрнуто 12 000 ядер, и планируется довести их число до 100 000 в течении 2022 года. Среди предыдущих заказчиков систем отопления Qarnot числятся жилищные проекты во Франции и Финляндии, а также банк BNP и клиенты, занимающиеся цифровой обработкой изображений.

По словам технического директора Qarnot Клемента Пеллегрини (Clement Pellegrini), QB приносит двойную пользу экологии, используя не только «мусорное» тепло, но и оборудование, которое обычно утилизируется. У ITRenew уже есть очень похожий совместный проект с Blockheating по обогреву теплиц такими же б/у серверами гиперскейлеров.