SK Holdings, материнская компания крупного южнокорейского конгломерата SK Group, заплатила $300 млн за 8,9 % акций поддерживаемого американской инвестиционной компанией Bain Capital провайдера сервисов ЦОД Chindata Group. По данным источника газеты South China Morning Post, исходя из этой сделки рыночная стоимость Chindata оценивается в $3,1 млрд.

Сделка должна быть одобрена регулирующими органами двух стран и, как ожидается, будет закрыта в третьем квартале этого года. SK Group — один из крупнейших конгломератов Южной Кореи, работающий в различных секторах экономики, включая химическую промышленность, энергетику, логистику, фармацевтику, производство полупроводников и телекоммуникации.

Холдинг SK уже вложил значительные средства в дата-центры в Южной Корее, где он владеет шестью ЦОД с эксплуатационной мощностью более 100 МВт. Основанная в 2015 году компания Chindata со штаб-квартирой в Пекине является одним из крупнейших гиперскейлеров-провайдеров ЦОД, ориентированных на Китай, Индию и Юго-Восточную Азию.

Bain приобрела Chindata у компании Wangsu Science and Technology Company в мае 2019 года, инвестировав в бизнес $570 млн. В июле прошлого года она объединила компанию с Bridge Data Centers.

«За последние пять лет Chindata Group продемонстрировала быстрый рост, построив ряд сверхкрупных ЦОД нового поколения для технологических гигантов на конкурентных и многообещающих рынках, таких как Китай, Малайзия и Индия», — рассказал Алекс Джу (Alex Ju), основатель и исполнительный директор Chindata.

Добавим, что Chindata заняла первое место в рейтинге китайских технологических компаний по степени использования возобновляемых источников энергии, опередив таких гигантов, как Alibaba, Tencent и Baidu. В настоящее время Chindata изучает возможность первичного публичного размещения акций в США в конце этого года.

Исследовательская и консалтинговая компания TeleGeography, известная благодаря своей бесплатной для пользования карте подводных кабелей, опубликовала карту дата-центров шести крупнейших поставщиков публичного облака. Речь идёт как о собственнных ЦОД, так и об арендуемых площадках, благодаря которым заказчики могут получить прямое подключение к облачным провайдерам.

Новая карта облачной инфраструктуры «иллюстрирует то, о чём мы говорили в течение многих лет: облако не повсеместно», — отметил главный аналитик TeleGeography Патрик Кристиан.

В то время как большинство пользователей подключается к публичным облачным платформам через общедоступный Интернет, крупные компании, которые не доверяют уровню безопасности или производительности, обеспечиваемому в Интернете, платят значительные средства за частное подключение к мощностям своих облачных провайдеров. Предоставление точек доступа к облачным платформам стало неотъемлемой частью предложения провайдеров колокации.

Карта центров обработки данных TeleGeography включает регионы и точки доступа к облачным платформам Amazon Web Services, Microsoft Azure, Google Cloud, IBM Cloud, Oracle и Alibaba. В ней перечислены 122 ЦОД в Азии и 98 дата-центров в США и Канаде, что в сумме составляет 67 % всех облачных ЦОД в мире. Ещё 23 % ЦОД находится в Европе, а в Латинской Америке их насчитывается всего 2 %. Наибольшее количество зон доступности находится в США и Китае: 65 и 55 соответственно. «Япония, Великобритания и Сингапур замыкают пятерку лидеров», — говорится в сообщении TeleGeography.

Провайдеры, представленные на карте, только в этом году открыли 19 новых облачных регионов и объявили о предстоящем запуске 29 новых регионов в течение следующих двух лет.

Китайская компания Alibaba Cloud завершила строительство трех «супер-центров обработки данных» в Наньтуне, Ханчжоу и Уланкабе. Вместе они предлагают достаточно места для размещения более одного миллиона серверов. В апреле 2020 года Alibaba объявила, что планирует потратить 200 миллиардов юаней (28,2 миллиарда долларов) на облачную инфраструктуру в течение трех лет.

Было заявлено, что расширение связано с повышенным спросом на цифровые ресурсы, в результате пандемии Covid-19. По данным исследовательской компании Canalys, Alibaba является крупнейшим поставщиком облачных услуг в Китае (доля рынка 46,4 %) и занимает заметную долю рынка в Азиатско-Тихоокеанском регионе – 19,6%. Alibaba управляет более чем 100 центрами обработки данных в 22 регионах мира.

Ранее компания считала, что только два из них заслуживают статуса «супер-центров обработки данных», они расположены в провинции Хэбэй на севере Китая и в провинции Гуандун на юге Китая. Теперь Alibaba завершила еще три мегапроекта: в Наньтуне в провинции Цзянсу, Ханчжоу, в столице провинции Чжэцзян и городе Уланкаб на юге центральной части Внутренней Монголии. Они будут обслуживать три экономические зоны: Пекин-Тяньцзинь-Хэбэй, дельту реки Янцзы и Гуандун-Гонконг-Макао. Alibaba заявила, что в ближайшем будущем планирует удвоить количество «супер-центров обработки данных».

Объект в Ханчжоу особенно интересен тем, что в нем применяется технология жидкостного охлаждения, что может сэкономить более 70% энергии. Также на новых объектах используются роботы-ремонтники для круглосуточной работы.

Выделение особо крупных центров обработки данных в отдельную категорию не является чем-то необычным, в мире существует более 540 крупных дата-центров, причем более 100 из них были построены за последние 2 года. Еще более 170 крупных дата-центров находятся на различных стадиях планирования или строительства, что является хорошей новостью для поставщиков оборудования.

Оператор дата-центров Switch вместе с фондом Capital Dynamics вложат $1,3 млрд в создание экологичного комплекса выработки и хранения электроэнергии, достаточно мощного для питания дата-центров. Проект подразумевает использование солнечных панелей First Solar и аккумуляторных блоков Tesla MegaPack.

Ничего необычного в таком сочетании нет, но суммарная мощность всего проекта, который называется Gigawatt 1, впечатляет: солнечные электростанции на 555 МВт и 800 МВт∙ч аккумуляторной ёмкости. Комплексы из панелей и батарей будут находиться в нескольких местах на территории Невады, а один их них разместится рядом с бизнес-парком Reno, где находятся крупнейший, по заявлениям Switch, в мире дата-центр Citadel и Гигафабрика Tesla.

Кампус Citadel имеет 690 тыс. м² для размещения оборудования суммарной мощностью до 650 МВт. Первая очередь ЦОД TAHOE RENO 1 чуть скромнее: 121 690 тыс. м² и 130 МВт. Он получит солнечную электростанцию мощностью 127 МВт и набор Tesla MegaPack ёмкостью 240 МВт∙ч, которые, к слову, будут изолированы от публичной энергосистемы и питать только Switch, на что потребовалось отдельное разрешение. Компания обещает сохранить цену на уровне 5 центов за кВт∙ч.

Впрочем, дата-центры компании уже несколько лет на 100% снабжаются электроэнергий из возобновляемых источников. Зачастую таковыми являются ГЭС, но гиперскейлеры выбирают их вовсе не из-за экологичности, а просто потому, что стоимость энергии у них одна из самых низких. Солнечные электростанции хороши для засушливых районов, а аккумуляторы помогут сгладить неравномерность выработки энергии. Однако для охлаждения современных дата-центров всё равно требуется достаточно много воды.

Аналитическая компания Synergy Research сообщила, что в этом году, несмотря на пандемию Covid-19, по всему миру было открыто 26 новых центров обработки данных гиперскейлеров.

Согласно данным Synergy Research, общее число ЦОД в мире сейчас составляет 541, что на 41 больше, чем в октябре 2019 года.

«За последние восемь кварталов было открыто 100 новых центров обработки данных гиперскейлеров, причём 26 из них были созданы в первой половине этого года», — заявил Джон Динсдейл (John Dinsdale), главный аналитик Synergy Research Group.

Он добавил, что ещё 176 ЦОД находятся на разных этапах планирования или строительства, и это «является хорошей новостью для поставщиков оборудования для дата-центров и оптовых операторов ЦОД».

США по-прежнему лидируют на этом рынке, обладая 40 % от общего количества ЦОД в мире, но EMEA и Азиатско-Тихоокеанский регион имеют самые высокие темпы роста. Второе место у Китая с 9 %, у Японии — 6 %, за ними следуют Великобритания, Германия и Австралия. На эти шесть стран приходится 67 % от общего числа ЦОД в мире. В США, Южной Корее, Швейцарии, Италии, ЮАР и Бахрейне было зарегистрировано самое большое пополнение новыми ЦОД за последний год.

Быстрее всех строили за последний год Amazon и Google, на которые приходится половина новых ЦОД гиперскейлеров. За ними следуют по уровню активности Microsoft и Oracle. При этом большинство (70 %) ЦОД гиперскейлеров арендуются у операторов или принадлежат партнёрам.

«Компании с самым широким охватом ЦОД являются ведущими облачными провайдерами — Amazon, Microsoft, Google и IBM, — говорится в пресс-релизе Synergy. — Каждая из них имеет 60 или более ЦОД, по крайней мере, три в каждом из четырех регионов — Северной Америке, APAC, EMEA и Латинской Америке. Oracle также имеет достаточно широкое присутствие ЦОД. Остальные фирмы, как правило, размещают свои ЦОД прежде всего в США (Apple, Facebook, Twitter, eBay) или в Китае (Alibaba, Baidu, Tencent)».

Согласно новому прогнозу IDC, ежегодный доход глобального рынка инфраструктуры Open Compute Project (OCP) достигнет к 2024 году $33,8 млрд. 

В то время как темпы роста рынка в 2020 году несколько замедлились из-за преобладания среди инвесторов стратегии на сохранение капитала во время пандемии коронавируса, рынок вычислительной и СХД инфраструктуры, построенной в соответствии с концепцией Open Compute Project (OCP), по данным IDC, будет в течение 2020–2024 гг. в среднем ежегодно увеличиваться на 16,6 %.

Аналитики IDC предполагают быстрое восстановление этого рынка в 2021–22 годах, чему будет способствовать устойчивое восстановление экономики во всем мире. Однако длительный кризис и экономическая неопределённость могут задержать восстановление рынка далеко за пределами 2021 года, хотя инвестиции в провайдеров облачных услуг, возможно, будут преобладать над инвестициями в инфраструктуру.

Проект Open Compute Project (OCP) был создан в 2011 году как открытое сообщество, нацеленное на разработку аппаратных решений для эффективной поддержки растущих требований к вычислительной инфраструктуре средних и крупных операторов ЦОД (гиперскейлеров). В настоящее время стандарты OCP поддерживаются лидерами рынка, такими как Facebook, Microsoft, LinkedIn, Alibaba, Baidu, Tencent и Rackspace. OCP поощряет поставщиков инфраструктуры, гиперскейлеров, провайдеров облачных сервисов, системных интеграторов и поставщиков компонентов к совместной работе над инновациями, спецификациями и инициативами в нескольких ключевых областях.

IDC полагает, что сегмент вычислений останется основным драйвером общего дохода от инфраструктуры OCP в ближайшие пять лет, составляя примерно 83 % всего рынка. Несмотря на то, что вычислительные ресурсы будут занимать гораздо большую долю рынка, их ежегодный рост в период до 2024 будет сопоставим с ростом СХД.

Сегмент вычислений. Расходы на вычислительные платформы (т. е. серверы, включая ускорители и интерконнект-модули), по оценкам аналитиков, будут расти из расчёта 16,2 % в год и достигнут $28,07 млрд. Этот сегмент включает внешние полки с массивами ускорителей, также известные как JBOG (GPU) и JBOF (FPGA).

Сегмент СХД. Расходы на хранение (т. е. серверные платформы, внешние платформы и системы), по оценкам аналитиков, будут расти ежегодно на 18,5% и достигнут $5,73 млрд. Внешние подключённые платформы (полки) также известны как JBOF (Just a Bunch of Flash) и JBOD (HDD) и не содержат контроллера. 

Закупки членов правления OCP составляют основную часть рынка инфраструктуры OCP, и, как ожидается, они будут расти в период до 2024 года в среднем на 14,8 % в год, в то время как на них будет приходиться чуть менее 75 % всего рынка. Вместе с тем предполагается, что расходы, не связанные с деятельностью членов правления OCP, будут увеличиваться в течение пяти лет на 23,2 % ежегодно, благодаря чему их доля на рынке инфраструктуры OCP вырастет за этот период чуть более чем на 600 базисных пунктов.

Глобальная инвестиционная компания KKR выделила $1 млрд на создание новой компании для строительства сверхкрупных ЦОД в Европе под руководством опытного и известного в этой области предпринимателя Франека Содзавичны (Franek Sodzawiczny).

Компания получила название Global Technical Realty (GTR). Она будет строить и эксплуатировать ЦОД для сверхкрупных клиентов.

Послужной список Содзавичны включает создание двух британских провайдеров колокейшн-центров обработки данных — Sentrum, который был продан Digital Realty примерно за $1 млрд в 2012 году, и Zenium, проданный компании CyrusOne за $442 млн в 2017 году. В число партнёров нового предприятия вошла компания Mercury Engineering, предоставляющая услуги строительства дата-центров по всему миру.

В условиях быстрого роста облачных сервисов появилась острая потребность в быстром создании новых объектов для ограниченного круга крупных облачных провайдеров. Это задача решается очень крупными операторами центров обработки данных, такими как Digital Realty и СП GIC и Equinix. Но KKR считает, что на рынке есть место и для другого игрока.

GTR, описываемая как платформа для строительства под заказ арендатора и консолидированного приобретения ЦОД, получит $1 млрд из фонда, принадлежащего KKR. В будущем возможны дополнительные финансовые вливания. Во всяком случае в пресс-релизе KKR говорится, что её долевое обязательство может составить более $2,5 млрд, чтобы удовлетворить высокий спрос на ЦОД.

Чтобы успешно работать на этом рынке, «оптовики» вроде Digital Realty и GIC имеют жизнеспособный стандартизированный шаблон ЦОД и методику его быстрого развертывания в нескольких местах одновременно. Mercury Engineering разработает для GTR стандартизированную платформу решений, предназначенную для поставщиков гипермасштабируемых облачных вычислений.

«Мы очень рады, что нашли такого инвестора, как KKR, который разделяет наше видение будущего рынка ЦОД», — отметил генеральный директор и основатель GTR Франек Содзавичны.

Гиганты Google, Facebook и Microsoft каждый год покупают огромное количество серверов, которые могут работать и до 10 лет. Однако через 2-3 года они заменяются на новые, более производительные модели, так как для гиперскейлеров это проще и быстрее, чем строить или расширять ЦОД. При объемах закупок от 100 тыс. серверов в год каждый квартал более 10 тыс. единиц оборудования выводится из эксплуатации. 

Утилизировать всю эту технику было бы слишком расточительно, ведь даже серверы возрастом 2-3 года из ЦОД гиперскейлеров мощнее многих серверов, которые используются на предприятиях сегодня. ITRenew предлагает разумный выход из ситуации.

Стойки ITRenew Sesame

ITRenew подписала с гиперскейлерами контракты на выкуп старого оборудования. Впрочем, «старое» — не совсем подходящее слово, так как оно отработало в среднем от 2 до 5 лет. Компания помогает значительно снизить издержки, дав, с одной стороны, возможность гипескейлерам вернуть часть вложенных средств, а с другой — снизить затраты на 40-50% для небольших предприятий, которые оснащают свои дата-центры. 

Для многих компаний это единственная возможность купить оборудование такого класса, так как ODM вроде Wiwynn, Inspur, Quanta продают его только гиперскейлерам 1-го уровня (Amazon, Facebook, Google) и не собираются менять свою модель продаж, поскольку у них нет проблем со сбытом своей продукции. 

Еще один важный момент, на который обращают большое внимание в Европе и США, связан с экологией. То, что техника продолжает использоваться, а не уничтожается, позволяет экономить ресурсы и не загрязнять окружающую среду. Это особенно важно в свете того, что Китай закрыл ввоз подобного оборудования для утилизации и сортировки. И пока тенденция агрессивного обновления крупнейших дата-центров сохраняется, объем выведенной из эксплуатации техники будет расти. 

Может сложиться впечатление, что покупка б/у оборудования — это удел отсталых и бедных компаний, которые не хотят вкладывать деньги в развитие IT. Однако это далеко не так! Оборудованием от ITRenew комплектуются целые дата-центры, например, шведский ЦОД Hydro66.

Все оборудование в ITRenew проходит обязательную процедуру обслуживания: компоненты с малым остаточным ресурсом заменяются новыми или снятыми с других единиц техники. Затем всё проверяется, настраивается и упаковывается для транспортировки новым владельцам.

Узлы ITRenew Sesame

Несмотря на то, что оборудование из дата-центров гиперскейлеров выпущено разными производителями (Wiwynn, Quanta и другими), оно проходит процедуру стандартизации и настройки, после чего управлять и поддерживать его гораздо проще, чем «зоопарком» обычного серверного оборудования разных брендов. Кроме того, многие компоненты таких систем открыты — они будут иметь полноценную поддержку долгие годы.

Одна из причин, почему продажа б/у-оборудования от гиперскейлеров до сих по не стала действительно массовым явления, в том, что оно имеет OCP-исполнение, отличное от принятых в корпоративном мире стандартов. Это касается и шасси, и прошивок, и ПО. Именно поэтому ITrenew создала серию платформ Sesame (Сезам), готовых принятть OCP-оборудование, со всем необходимым ПО для оркестрации Kubernetes. 

Sesame позволит объединить до 20 стоек (более 750 узлов) в один кластер с 25GbE-подключение. Слоган нового решения: «Сила гиперскейлеров для всех». Звучит довольно громко, однако так оно и есть. Теперь даже мелкие компании могут приобрести производительное оборудование, которое не стоит огромных денег.  А для «самых маленьких» компания предлагает Sesame Fast Start, мини-стойку на колёсиках со всем необходимым. Fast-Start помещается под столом — она рассчитана на 5 узлов суммарной мощностью до 1600 Вт и имеет 10GbE-коммутатор.

Новая серия MegaDC ориентирована прежде всего на гиперскейлеров и поставщиков облачных услуг, для которых на первом месте стоит цена решения и скорость развертывания дата-центров. В MegaDC входят пока 5 моделей: две в форм-факторе 1U и три в 2U-шасси.

Отличительной особенностью всех моделей является встроенный на материнской плате сетевой адаптер Mellanox с двумя портами SFP28 25 Гбит/с и специальный слот OCP 3.0 для карт расширения, которые не занимают PCIe слоты.

Все серверы поддерживают установку до двух процессоров Intel Xeon последнего поколения и имеют 16 слотов для оперативной памяти DDR-4. Блоки питания дублированные, мощностью от 750 до 1600 Вт.

MegaDC Storage предназначен для создания программно-определяемых СХД и представляет собой платформу, которая позволяет разместить в корпусе 1U до 12 дисков 3,5 дюйма с возможностью «горячей замены». Это стало возможно благодаря специальной конструкции отсеков, которые располагаются один за другим и откидывающейся верхней панели сервера.

MedaDC Compute является компактным вычислительным узлом. Он аналогичен предыдущей модели по форм-фактору, слотам памяти и процессорам и поддерживает установку до 10 дисков 2,5 дюйма с возможностью «горячей замены», из них до 4 NVMe.

MegaDC GPU System предназначен для ИИ, видео-аналитики, анализа больших данных. Имеет форм-фактор 2U, поддерживает установку двух ускорителей/GPU двойной ширины, либо до пяти одинарной ширины. На лицевой панели находятся 12 отсеков для дисков 3,5 дюйма с возможностью «горячей замены».

MegaDC I/O Optimized предназначен для хостинга и задач, требующих большое количество интерфейсов ввода/вывода (например, биллинг). Он имеет аналогичный форм-фактор 2U, но, в отличие от предыдущей модели, поддерживает установку до 6 карт расширения PCIe.

Крупнейшие провайдеры услуг облачных вычислений испытывают трудности с получением базовых компонентов для центров обработки данных, в связи с чем им пришлось отложить планы строительства новых объектов.

Хотя на время пандемии сотрудники ЦОД классифицируются так же, как медицинский персонал или персонал продуктовых магазинов, с запуском новых объектов в отрасли наблюдаются проблемы.

Главная проблема, по словам Рика Вилларса (Rick Villars), вице-президента IDC по ЦОД и облачным технологиям, заключается не в размещении заказов или отсутствии необходимого ИТ-оборудования, а в недостаточных поставках таких компонентов, как оптоволокно, аккумуляторы и стойки.

Тем не менее, как утверждает Вилларс, у провайдеров имеется достаточно запаса прочности, чтобы справиться с этим. «За последние три года для облачных и колокейшн-операторов было построено больше мощностей для ЦОД, чем за всю историю, — заявил Вилларс. — Есть свободные мощности и нет недостатка ни в производительности, ни в пропускной способности. Однако если ничего не будет построено в ближайшие два года, тогда это может стать проблемой».

Основная часть строительства ЦОД в 2020 году приходится на гиперскейлеров, таких как AWS, Microsoft и т. д., сообщил Вилларс. Участие в этом провайдеров колокейшн-сервисов вроде Equinix и Digital Reality Trust минимально.

Большое внимание провайдеров ЦОД сейчас приковано к Японии, у которой нет собственной развитой облачной структуры. Ранее в этом месяце Equinix объявила о создании совместного предприятия с сингапурской финансовой корпорацией GIC, которое инвестирует $1 млрд в строительство трёх гипермасштабируемых дата-центров в Японии. Equinix не указала, кто именно их будет использовать, но можно предположить, что это будет кто-то из её клиентов, крупнейших облачных провайдеров, включая AWS, Microsoft, Google и IBM.

Её главный конкурент, Digital Realty Trust, сотрудничает с Mitsubishi, с целью строительства новых ЦОД в Токио и Осаке. Одним словом, несмотря на пандемию коронавируса, развитие облачной индустрии продолжается.