Амстердам станет первым городом в Нидерландах, где построят центр обработки данных, способный обеспечивать централизованное теплоснабжение. Строительством этого ЦОД в районе порта Амстердама в настоящее время занимается Caransa Group. Он будет состоять из трех 80-метровых зданий.

В Амстердаме снова разрешили строительство ЦОД в июле. До этого в городе в течение года действовал мораторий, так как строительство дата-центров вышло из-под контроля, впрочем, как и расходование ими электроэнергии. Развёртывание здесь ЦОД теперь может продолжаться только с учётом установленных норм по мощности и занимаемой площади. Новый дата-центр, по заявлением создателей, будет самым энергоэффективным в городе.

Caransa Group

Использование отработанного тепла ЦОД для отопления близлежащих предприятий и жилых домов более распространено в странах Северной Европы, где есть системы централизованного теплоснабжения. Отработанное тепло нового амстердамского объекта будет поставляться в сеть централизованного теплоснабжения Westpoort Warmte, совместного предприятия Nuon, компании Vattenfall и муниципалитета Амстердама.

В Амстердаме и ранее обсуждались вопросы централизованного теплоснабжения. В сентябре компания CyrusOne объявила о партнёрстве с муниципалитетом Харлема и бизнес-парком PolanenPark с целью проведения исследования возможности использования отработанного тепла ЦОД Amsterdam I.

Еще в 2018 году власти Амстердама объявили о планах использовать избыточное тепло ЦОД, чтобы помочь в реализации городского проекта по отказу от газового центрального отопления к 2050 году. Часть домов Амстердама получает отопление за счет избыточного тепла от электростанций и предприятий по переработке отходов. А в 2019 году шведская энергетическая компания Vattenfall и AEB объявили, что инвестируют 400 млн евро в течение следующих трёх лет в развитие сети централизованного теплоснабжения.

Дата-центр «ТрастИнфо», находящийся под управлением компании «Сервионика» (ГК «АйТеко»), успешно завершил сертификацию Uptime Institute уровня Tier III в категории Design Documents.

Выданный Uptime Institute сертификат подтверждает, что центр обработки данных «ТрастИнфо» спроектирован в соответствии с современными мировыми практиками строительства вычислительных площадок. Уровень надёжности Tier III подразумевает осуществление любого технического обслуживания, ремонта или замены компонентов без остановки дата-центра.

Центр обработки данных «ТрастИнфо» был запущен в коммерческую эксплуатацию в конце 2008 года. В конце 2012 года компания «Ай-Теко» расширила вычислительные мощности объекта и довела суммарную площадь всех десяти машинных залов дата-центра до 4500 кв. м. Всего в вычислительном комплексе задействованы 1200 стойко-мест. ЦОД развернут на территории режимного объекта (ЦНИЭВТ) с доступом 24х7, а его инфраструктура отвечает требованиям стандарта Tier III+ по классификации ANSI/TIA-942-2005 «Telecommunications Infrastructure Standard for Data Centers», которые предписывают высокий уровень доступности оборудования и резервирование всех критически важных систем.

Дополнительные сведения о центре обработки данных «ТрастИнфо» опубликованы на сайте trustinfo.ru.

Производитель OCP-систем ITRenew объединил усилия с голландским облачным хостинг-провайдером Blockheating, чтобы предложить контейнеризированные дата-центры «всё-в-одном», которые поставляют ненужное тепло в теплицы. Blockheating производит микро-ЦОД с жидкостным охлаждением, благодаря чему «мусорное» тепло может передаваться с водой (t°=65 °C) в близлежащие теплицы.

В рамках партнёрства контейнеры будут укомплектованы стоечными серверами и системами хранения Sesame от ITRenew. Согласно совместному заявлению компаний, в Нидерландах имеется более 3700 га коммерческих теплиц. Один микро-ЦОД может обогревать два гектара теплиц летом и полгектара зимой. Этого, по словам Blockheating, достаточно для выращивания тонны помидоров в год. Что более важно, тепло, выделяемое в виде отходов ЦОД, обходится намного дешевле природного газа, сжигаемого фермерами для обогрева теплиц.

Blockheating

Blockheating заявила о разработке «нового способа водяного охлаждения серверов», который делает его рентабельным. В 2019 году компания провела испытания тестового ЦОД мощностью 60 кВт в Венло, недалеко от границы с Германией (на фото выше). Сейчас решения Blockheating имеют мощность 200 уже кВт. Поскольку они охлаждаются жидкостью, это устраняет потребность в установке оборудования для кондиционирования воздуха и повышает энергоэффективность.

В свою очередь системы ITRenew Sesame, устанавливаемые в микро-ЦОД, используют б/у-оборудование гиперскейлеров вроде Facebook и Microsoft. Таким образом, снижается стоимость покупки и владения, почти на четверть сокращаются выбросы CO₂ и объёмы электронного мусора, связанные с ИТ-индустрией.

Телекоммуникационная компания Tele2 объявила о сотрудничестве с правительством Ростовской области, целью которого является запуск в регионе двух центров обработки данных. Общий объём инвестиций в проект составит почти 2 млрд рублей.

Сообщается, что Tele2 уже завершила строительство первого ЦОД и выполнила основную часть работ по созданию второго. Дата-центры занимают территорию общей площадью более 820 кв. м и 3000 кв. м соответственно. Машинные залы рассчитаны на 216 и 540 стойко-мест и размещение вычислительного, телекоммуникационного и прочего оборудования суммарной мощностью до 5 МВт. В новых центрах обработки данных будет размещено оборудование для всех информационных систем оператора, включая биллинг, VAS и другие платформы.

Источник изображения: Tele2

Согласно подписанному соглашению, правительство Ростовской области рассматривает возможность предоставления Tele2 государственной поддержки в ходе проекта и подключения ЦОД к инженерно-техническим сетям региона. В свою очередь, оператор обеспечит реализацию строительства объектов, создаст рабочие места и гарантирует должный уровень заработной платы для сотрудников, занятых в работе вычислительных площадок.

«Строительство и эксплуатация ЦОД Tele2 будут способствовать технологическому развитию региона — цифровизации сервисов и процессов, повышению доступности телеком-услуг для населения и созданию IT-инфраструктуры для умного города, промышленности, энергетики и сельского хозяйства», — говорится в заявлении телекоммуникационной компании.

Компания «Ростелеком — Центры обработки данных» («Ростелеком-ЦОД») объявила о запуске в эксплуатацию дата-центра NORD-5, расположенного на Коровинском шоссе в Москве. В проекте участвует DataLine, которую «Ростелеком» приобрёл в начале текущего года.

Изображения «Ростелеком-ЦОД»

Новый дата-центр рассчитан на 600 стоек, для размещения которых служат три машинных зала. В частности, имеется выделенный зал со стойко-местами с повышенной мощностью — до 20 кВт. Общая площадь NORD-5 составляет 1500 квадратных метров.

Дата-центр соответствует требованиям международного стандарта Tier III Uptime Institute. Инфраструктура предусматривает возможность обслуживания или ремонта оборудования без остановки работы.

«В Москве сохраняется высокий спрос на услуги коммерческих ЦОД, и мы стараемся развивать свою сеть дата-центров так, чтобы поддержать растущие потребности клиентов. В следующем году мы рассчитываем открыть ещё одну площадку на 600 стоек и запустить первую очередь масштабного дата-центра уровня Tier IV на 2000 стоек», — отмечает руководство компании «Ростелеком-ЦОД».

Сообщается также, что уже до конца текущего года «Ростелеком-ЦОД» введёт в строй новые площадки в Санкт-Петербурге и Новосибирске. Кроме того, центры обработки данных появятся в Екатеринбурге и Нижнем Новгороде. 

Компании Schneider Electric, Avnet и Iceotope заключили альянс в области разработки иммерсионных систем охлаждения для рынка микро-ЦОД и систем машинного обучения ещё в прошлом году. Результатом стало создание уникальных вычислительных мини-комплексов под общим названием Ku:l, а сейчас к группе, возглавляемой Iceotope, присоединился такой крупный производитель серверов, как Lenovo.

Иммерсионный поддон Iceotope с установленным сервером

Напомним вкратце: разработанная союзом трёх компаний система охлаждения представляет собой нечто среднее между классическими контурными и погружными СЖО. Вычислительный модуль устанавливается в специальный полупогружной поддон Iceotope, но внутри имеются и трубчатые элементы, а в общую для стойки систему охлаждения поток тепла выводится исключительно с помощью теплообменника, поскольку сам поддон герметичен.

Микро-ЦОД серии Ku:l с серверами Lenovo доступны для заказа в двух вариантах. Первый из них являет собой стойку половинной высоты (24U), которая вмещает до четырёх серверов Lenovo ThinkSystem SR670. Нижнюю часть стойки занимают холодильники и прочие элементы системы охлаждения, общая потребляемая мощность составляет менее 5 киловатт.

Модуль Iceotope с сервером Lenovo. Система трубок обеспечивает подвод теплоносителя к критическим точкам

Более крупный вариант вмещает в себя уже до 16 серверов, обеспечивая их питанием мощностью до 46 кВт и поддерживает масштабирование, допуская объединение в единый комплекс нескольких стоек. Сами стойки разработаны Schneider Electric и относятся к серии NetShelter. Если в полноразмерной версии используется внешний насос (HRU), то в малой он интегрирован в стойку и занимает 5U в высоту.

Поддерживается интеграция в уже имеющиеся в помещении ЦОД системы охлаждения, для этого система может комплектоваться модулем HRU с системой распределения тепла (CDU). За мониторинг параметров отвечает служба Schneider EcoStruxure, с возможностью заказа обслуживания на всё время работы оборудования, включая установку и демонтаж. Совместимость с протоколами удалённого управления RedFish обеспечивает модуль MaaXBoard IoT.

Микро-ЦОД Iceotope Ku:l, малая версия. В нижней части стойки видны узлы системы охлаждения

Сама система Lenovo ThinkSystem SR670 — классический «вычислительный сервер» высотой 2U, поддерживающий установку до четырёх полноразмерных двухслотовых PCIe-ускорителей, однако версия для Ku:l лишена каких-либо вентиляторов, не имеет движущихся частей и вообще не требует наличия какого-либо воздушного притока. В поддонах обеспечивается лишь подведение теплоносителя к критическим точкам с помощью системы распределительных трубок.

Существует возможность заказа микро-ЦОД в периферийном исполнении, с полной герметизацией и защитой серверных узлов от какого-либо проникновения пыли и загрязнений; также система защищена от конденсации влаги. Таким образом, микро-ЦОД серии Ku:l представляют собой полностью законченные решения, могущие работать в широком диапазоне условий, но требующие меньше затрат на обслуживание, нежели классические серверные стойки с воздушным охлаждением. Более подробная информация содержится на сайте компании Iceotope.

Китайский гигант Alibaba рассказал о некоторых особенностях функционирования своей масштабной облачной платформы, которая поддерживает работу всевозможных сервисов электронной коммерции, а также предоставляет вычислительные ресурсы сторонним заказчикам.

Речь идёт о площадке Alibaba Cloud. Она входит в четвёрку ведущих мировых облачных провайдеров вместе с Amazon Web Services (AWS), Microsoft Azure и Google Cloud. По итогам третьего квартала текущего года доля Alibaba Cloud в общем объёме глобального рынка облачных услуг составила 6 % в денежном выражении.

Платформе Alibaba Cloud приходится справляться с огромными нагрузками. К примеру, на недавней распродаже в «День холостяков», который в Китай отмечался 11.11, количество сделок в пике достигло 583 тысяч в секунду. Россияне потратили на площадке 19,3  млрд рублей, из них 4 млрд — в первый же час распродажи.

Для обеспечения надёжности в таких условиях Alibaba ищет, разрабатывает и тестирует специальные технические решения. К примеру, Alibaba Cloud использует роботов-техников для замены проблемных накопителей. Такие машины самостоятельно находят и извлекают сбоящие жёсткие диски из стоек и устанавливают на их место новые.

Кроме того, в одном из ЦОД компании внедрена иммерсионная система охлаждения: часть оборудования погружена в непроводящую жидкость, что обеспечивает эффективный отвод тепла и высокую плотность размещения компонентов. Говорится, что такой подход на 70% более энергоэффективнее традиционных, а показатель PUE приближется к максимально возможному значению 1.0.

Как уже неоднократно говорилось, любой достаточно крупный центр обработки и хранения данных требует мощных подсистем питания и отвода тепла, а тепла такие ЦОД выделяют очень много. Идея использования для охлаждения вычислительных центров климатических особенностей не нова и, по сути, лежит на поверхности. Недавняя публикация о «снежном» охлаждении японских ЦОД может служить хорошим примером. Однако Совет Федерации, как сообщает РБК, предложил пойти ещё дальше.

Высказанная идея принадлежит совету по развитию цифровой экономики при Совете Федерации, а суть её проста — разместить крупные российские центры обработки и хранения данных в арктических районах. Речь идёт, как минимум, о нескольких десятках ЦОД, призванных обслуживать арктические проекты, такие как Северный морской путь. При этом предлагается как можно шире использовать программно-аппаратные комплексы российской разработки.

По мнению Совета по развитию цифровой экономики, постройкой и эксплуатацией таких ЦОД могут заниматься частные компании, однако рентабельными они смогут стать лишь при наличии господдержки. К примеру, часть затрат на возведение арктической цифровой инфраструктуры может быть субсидирована за счёт федерального бюджета, но при условии использования российских решений. Напомним, японский «снежный» проект также в существенной мере ($7,3 млрд) финансируется правительством страны.

Конечная цель проекта: «сделать ИТ в Арктике привлекательнее, чем в любом другом месте». Правительству будет предложено разработать комплекс мер для поддержки ИТ-резидентов особой экономической зоны (ОЭЗ) в Арктике, причём разрабатываться он будет совместно с ИТ-сообществом и потенциальными инвесторами.

Насколько реален проект? Технических запретов на возведение ЦОД в северных регионах с использованием климатических условий для их охлаждения нет, это доказано многими экспериментами, в частности, проведёнными японцами на острове Хоккайдо в 2016 году. Программно-аппаратные средства российской разработки тоже существуют: можно вспомнить 16-ядерные процессоры «Эльбрус-16С» и проектируемые сейчас 7-нм 32-ядерные «Эльбрус-32С», а также системы хранения данных BITBLAZE Sirius 8000 на базе данной архитектуры. Есть и коммутаторы.

Объём рынка ЦОД в России в прошлом году оценивался в 34,9 млрд рублей, а по итогам 2020 года он может вырасти до 43,8 млрд рублей и, если сбудутся позитивные прогнозы, далее он может расти ещё на 15% каждый год. Экономия на системах охлаждения, как мы уже знаем, может быть весьма значительной.

Однако аналитики указывают на то, что для обеспечения хорошей связности и доступности ИТ-услуг потребуется прокладка широких каналов связи, чем арктический регион пока похвастаться не может. Необходимо также обеспечить надёжное электропитание и решить вопрос с высококвалифицированными кадрами, которые, несомненно, потребуются для постройки и обслуживания «северных центров обработки данных». Кроме того, удалённость ЦОД повлияет и на время отклика.

Пунктиром обозначена будущая трансарктическая линия данных

Пока, напоминаем, речь идёт лишь о рекомендации совета при Совете Федерации. Однако ещё в 2019 году компания МегаФон достигла договорённости с финской компанией Cinia в вопросе создания консорциума по строительству трансарктической линии связи протяжённостью более 10 тысяч километров. Эта линия будет иметь отводы для клиентов Арктики и Дальнего Востока, так что при наличии надёжной связи и достаточной проработки целей проекта создание российских арктических ЦОД выглядит более реальным.

Компания Huawei объявила на саммите Digital Power Summit 2020 о запуске микро-ЦОД нового поколения Smart Modular Data Center 5.0, который был анонсирован в сентябре на мероприятии Digital Energy China Tour 2020.

В качестве источника бесперебойного питания в новом ЦОД используется интеллектуальная литиевая батарея SmartLi. В этом дата-центре нет традиционного фальшпола, так как трубы охлаждающей системы и электрические кабели проложены сверху. Это означает, что оборудование ЦОД можно разместить в помещении высотой 2,6 м вместо традиционных 3,0 м.

ИБП SmartLi отличается низкой нагрузкой — менее 1000 кг/м², указанных в качестве предельного значения согласно стандарту TIA-942 для центров обработки данных Tier III и Tier IV. Это означает, что система электропитания и IT-оборудование могут быть размещены в одном помещении. По данным Huawei, благодаря отсутствию надобности в отдельном помещении, для размещения источников питания требуется на 75 % меньше площади.

В модульном центре обработки данных также используется 43-дюймовый сенсорный экран, позволяющий техническим специалистам контролировать системы центра и интегрировать инструменты управления программным обеспечением, такие как алгоритмы искусственного интеллекта.

Экран модульного ЦОД поддерживает управление следующими умными функциями:

• iPower: отображение информации о распределении питания в ЦОД и о профилактическом обслуживании.
• iCooling: визуализация охлаждения и оптимизация энергоэффективности охлаждения с помощью ИИ, повышающая эффективность использования энергии (PUE) на 8 %.
• iManager: использование, диагностика и оптимизация ЦОД, позволяющая сократить затраты на эксплуатацию и техническое обслуживание на 35 %.
• Опциональная функция распознавания лица для авторизации и доступа к системе управления ЦОД.

Крупные центры обработки и хранения данных — весьма серьёзные потребители электроэнергии; также они требуют соответствующего охлаждения, мощность систем которого может исчисляться мегаваттами. Министерство окружающей среды Японии считает, что в охлаждении ЦОД может помочь сама окружающая среда, а именно — снег.

Не секрет, что стиль жизни населения планеты Земля с появлением коронавируса начал сильно изменяться. Всё больше людей предпочитают проводить время дома, чтобы уменьшить вероятность заражения и всё больше компаний используют удалённые места работы с теми же целями. Нагрузка на компьютерные сети растёт, а с учётом популярности видеоконференций и стриминговых служб вроде Netflix — растёт весьма серьёзно. Соответственно растёт и энергопотребление центров обработки данных.

Бибай, остров Хоккайдо, Япония. Место размещения первого экспериментального «снежного» ЦОД

Согласно статистике, приводимой японскими источниками, лишь один сегмент крупного современного ЦОД может потреблять до 40 мегаватт. В 2019 году ЦОД потребляли порядка 1% всей производимой на планете энергии, и эта цифра не думает уменьшаться. Вполне закономерно, что в свете этих тенденций Министерство окружающей среды Японии обеспокоилось данной проблемой.

В рамках создания более дружественных экологии ЦОД планируется субсидировать строительство таких дата-центров из правительственного бюджета, причём доля субсидий в проекте может достигать 50%, а общий объём затрат на эту инициативу должен составить 757 миллиардов йен ($7,3 млрд).

Система, использующая снег для охлаждения, не слишком сложна

Самым интересным в этой инициативе является использование снега в системах охлаждения ЦОД. Подобная возможность уже опробована некоторыми японскими компаниями. Так, в городе Нагаока (примерно 280 км к северу от Токио) провайдер DataDock использует искусственный снегоуловитель высотой четыре метра для охлаждения своего компьютерного центра, благо климат в этом регионе позволяет делать это с декабря по февраль. Полученная в результате вода затем используется на соседних гидропонных фермах.

В разные времена года «снежные» системы охлаждения будут функционировать по-разному

Ещё севернее, на острове Хоккайдо в городе Исикари, где температура может падать до -5 °C, провайдер Sakura Internet построил свой вычислительный комплекс площадью почти 52 тыс. м². Глава компании заявляет, что ЦОД в Исикари может обходиться без вспомогательных систем охлаждения с октября по май, когда температура не превышает 18 °C.

Этот центр снабжен системами забора окружающего воздуха, который и охлаждает оборудование, а затем, будучи нагретым, используется для предотвращения обледенения ведущих к ЦОД дорожек. В сравнении с аналогичным ЦОД, расположенным в Токио, энергопотребление удалось снизить на 40% просто за счёт размещения оборудования в более холодной климатической зоне.

Системы охлаждения ЦОД нового поколения дружественны к экологии и помогают другим отраслям

Вскоре в этом же регионе компания Kyodo News Digital планирует запустить ещё один «снежный» ЦОД площадью свыше 36 тыс. м². Гибридная система охлаждения будет потреблять на 55% меньше энергии в сравнении с системами классического типа. Ранее в этом же месте, в городе Бибай, уже был проведен эксперимент, подтвердивший работоспособность подобных систем охлаждения серверных помещений и оборудования.

У подобного похода есть недостатки: системы охлаждения, зависящие от снега и низкой окружающей температуры, могут работать не круглый год. К тому же требуется прокладывать новые линии передачи данных до удалённых ЦОД, а дополнительные расстояния могут негативно сказаться на времени отклика. Однако выгоды, приносимые экономией энергии, всё-таки достаточно велики, чтобы инициатива «снежного охлаждения» вышла в Японии на государственный уровень.