Бывший генеральный директор Google Эрик Шмидт (Eric Schmidt) прогнозирует, что в обозримом будущем в США и Китае большие суперкомпьютеры будут заниматься ИИ-вычислениями под защитой военных баз. В интервью Noema он подробно рассказал о том, каким видит новые ИИ-проекты, и это будущее вышло довольно мрачным.

Шмидт поведал о том, как правительства будут регулировать ИИ и искать возможности контроля ЦОД, работающих над ИИ. Покинув Google, бизнесмен начал очень тесно сотрудничать с военно-промышленным комплексом США. По его словам, рано или поздно в США и Китае появится небольшое число чрезвычайно производительных суперкомпьютеров с возможностью «автономных изобретений» — их производительность будет гораздо выше, чем государства готовы свободно предоставить как своим гражданам, так и соперникам.

Каждый такой суперкомпьютер будет соседствовать с военной базой, питаться от атомного источника энергии, а вокруг будет колючая проволока и пулемёты. Разумеется, таких машин будет немного — гораздо больше суперкомпьютеров будут менее производительны и доступ к ним останется более широким. Строго говоря, самые производительные суперкомпьютеры США принадлежат Национальным лабораториям Министерства энергетики США, которые усиленно охраняются и сейчас.

Источник изображения: Joel Rivera-Camacho/unsplash.com

Как заявил Шмидт, необходимы и договорённости об уровнях безопасности вычислительных систем по примеру биологических лабораторий. В биологии широко распространена оценка по уровням биологической угрозы для сдерживания её распространения и оценки уровня риска заражения. С суперкомпьютерами имеет смысл применить похожую классификацию.

Шмидт был председателем Комиссии национальной безопасности США по ИИ и работал в Совете по оборонным инновациям. Также он активно инвестировал в оборонные стартапы. В то же время Шмидт сохранил влияние и в Alphabet и до сих пор владеет акциями компании стоимостью в миллиарды долларов.

Военные и разведывательные службы США пока с осторожностью относятся к большим языковым моделям (LLM) и генеративному ИИ вообще из-за распространённости «галлюцинаций» в таких системах, ведущих к весьма правдоподобным на первый взгляд неверным выводам. Кроме того, остро стоит вопрос сохранения секретной информации в таких системах.

Ранее в этом году Microsoft подтвердила внедрение изолированной от интернета генеративной ИИ-модели для спецслужб США после модернизации одного из своих ИИ-ЦОД в Айове. При этом представитель Microsoft два года назад предрекал, что нынешнее поколение экзафлопсных суперкомпьютеров будет последним и со временем все переберутся в облака.

Microsoft и G42, базирующаяся в ОАЭ, объединили усилия для постройки дата-центра в Кении. Его электропитание будет обеспечиваться за счёт геотермальной энергии. Datacenter Knowledge сообщает, что это лишь начальная часть многолетнего плана, в рамках которого будут значительно увеличены облачные мощности на востоке Африки. В конце прошлого года Кения уже заявляла о намерении направить $4,5 млрд на «зелёные» проекты: 200-МВт ЦОД EcoCloud, геотермальную энергетику и умное сельское хозяйство.

G42 займётся инвестициями на первом этапе и будет отвечать за строительство объекта в Олкарии, где расположено немало геотермальных источников. Это важно для континента, где перебои с электроэнергией — скорее норма, чем исключение. Кроме того, проект отвечает планам Microsoft по декарбонизации своей деятельности. Первая очередь обеспечит 100 МВт и будет введена в эксплуатацию в ближайшие пару лет. Для полной реализации проекта потребуется 1 ГВт, причём пока не сообщается, сколько времени пройдёт до ввода всех объектов в эксплуатацию и во сколько это обойдётся.

Microsoft намерена использовать первую очередь объекта для создания восточноафриканского региона Azure. Пока ближайший к клиентам из Кении ЦОД Microsoft расположен в Южной Африке. В рамках новой сделки кенийские власти согласились перенести больше своих сервисов в облака, что, по расчётам Microsoft, будет стимулировать спрос в целом. Новый ЦОД предложит ИИ-сервисы и облачные вычисления и ближайшим странам вроде Уганды, Руанды и Танзании.

Источник изображения: Matt Palmer/unsplash.com

Инициатива Microsoft и G42 анонсирована накануне встречи американского и кенийского президентов, намеренных объявить об укреплении связей между странами для противостояния китайскому и российскому влиянию в регионе. Компании вроде Huawei активно вкладывают деньги в Африку, создавая ЦОД, интернет-сервисы, системы слежения и умные энергосети. А экспансия в Кении — лишь часть проекта ОАЭ по получению влияния в Африке, куда Эмираты готовы инвестировать $100 млрд.

В апреле Microsoft согласилась инвестировать $1,5 млрд в G42. Активное участие в сделке приняла администрация президента США — предположительно, G42 согласилась прекратить ведение бизнеса с компаниями КНР, включая Huawei, и обязалась использовать вместо китайских американские технологии. При этом президент Microsoft Брэд Смит (Brad Smith) должен войти в состав совета директоров G42, а последняя будет использовать облако Azure для своих ИИ-проектов.

В Кении G42 будет работать над большими языковыми моделями для суахили и английского, а также французского и других локальных языков. Также компания будет создавать ИИ-модели для сельского хозяйства и других сфер деятельности, а Microsoft будет отвечать в том числе за киберзащиту местных клиентов и поможет обеспечить широкополосным интернетом около 40 % населения Кении уже к концу следующего года. Ожидается, что прибыль партнёры начнут получать через несколько лет.

Компания Wildberries, как сообщает Инвестиционный портал Московской области, создаст современный высокотехнологичный ЦОД в Подмосковье. Вложения в строительство объекта и его ввод в эксплуатацию только на первом этапе составят не менее 1,5 млрд руб. Дата-центр расположится на территории городского округа Наро-Фоминск. Собственно здания ЦОД и необходимые инфраструктурные объекты разместятся на территории площадью 6,5 га.

Говорится об использовании наиболее эффективных инженерных решений. Планируемая мощность первой очереди дата-центра составляет 8 МВт. Прочие подробности пока не раскрываются. «После ввода в эксплуатацию нового центра, там будет создано более 30 рабочих мест, в том числе для высококвалифицированных специалистов Наро-Фоминского городского округа», — сообщил заместитель председателя правительства — министр инвестиций, промышленности и науки Московской области.

Источник изображения: Wildberries

Ранее стало известно, что маркетплейс Wildberries намерен создать дата-центр в Дубне на севере Московской области: планируемая мощность этой площадки стоимостью 6,5 млрд руб. составляет 8 МВт. Кроме того, компания ввела в эксплуатацию ЦОД мощностью 3,5 МВт, также расположенный в Московской области. На этом объекте задействована система охлаждения уличным воздухом без применения холодильных установок (прямой фрикулинг).

В России резко возрос спрос на услуги ЦОД. В 2023 году объём соответствующего рынка достиг 42,8 млрд руб. Это на 21,2 % больше по сравнению с предыдущим годом. Фактически спрос в настоящее время превышает предложение. Вместе с тем из-за участившихся атак российские компании переносят информацию из дата-центров в Московском регионе за Урал. На этом фоне Минцифры рекомендует госорганам развернуть дополнительную IT-инфраструктуру по всей России. Кстати, в столице недавно было завершено строительство одного из крупнейших в стране дата-центров «Москва-2».

Норвежская энергетическая компания Norsk Kjernekraft намерена строить малые модульные реакторы (SMR) для дата-центров. Datacenter Dynamics сообщает, что поможет разгрузить энергетические сети страны. Это особенно актуально на фоне прошлогоднего скандала, когда строящийся для нужд TikTok дата-центр практически «отобрал» энергию у оборонного предприятия.

Часто атомная энергия называется экологически безопасной и подходящей для обеспечения работы ЦОД. SMR в перспективе будут дешевле и проще в строительстве и эксплуатации, чем крупные АЭС, а компании вроде Norsk Kjernekraft готовятся внедрять их непосредственно рядом с кампусами ЦОД. По расчётам последней, в ближайшие годы в Норвегии понадобится дополнительно от 50 до 233 ТВт∙ч, тогда как в 2023 году все электростанции страны поставили 156 ТВт∙ч.

Источник изображения: Michael Fousert/unsplash.com

Уже сегодня норвежские электросети полностью работают на возобновляемой энергии, в основном благодаря гидроэлектростанциям, на которые приходится 88 % поставок электричества в стране, а также ветряным электростанциям. С учётом прохладного климата Норвегия является оптимальным местом для размещения дата-центров.

При этом атомных реакторов там до сих пор нет, но в Norsk Kjernekraft подчёркивают необходимость получения дополнительного электричества в больших объёмах. Вопрос в том, сколько смогут вырабатывать электростанции страны в экоустойчивом режиме. Дело в том, что имеется «потолок» для объёмов именно возобновляемой энергии, поэтому придётся пересмотреть взгляды на энергетику в целом.

В Norsk Kjernekraft заявляют, что установка SMR при дата-центрах высвободит ресурсы магистральных электросетей, сегодня используемых для питания цифровой инфраструктуры. А тепло реакторов можно дополнительно направить на производственные нужды, для захвата углерода, добычи водорода, аммиака и т.н. электротоплива, а также обогрева помещений. Огромным преимуществом является отсутствие необходимости в прокладке к ЦОД серьёзных ЛЭП.

Пока разработчик не сообщает, сколько энергии будут генерировать SMR, как и того, вызвала ли идея интерес у местных операторов ЦОД. Компания предлагает построить до пяти SMR в коммуне Эйгарден (Øygarden) к западу от Бергена. Уже заключена сделка с Rolls-Royce, которая должна будет поставлять реакторы для площадки. Ранее последняя предлагала свои SMR напрямую операторам. Согласно расчётам, электростанция должна заработать в ближайшие десять лет.

Целесообразность использования атомной энергии уже изучается некоторыми операторами ЦОД. Например, в марте 2024 года Amazon (AWS) заплатила $650 млн за кампус ЦОД в Пенсильвании, который строится вблизи АЭС и будет питаться от неё, а Microsoft формирует команду специалистов по атомной энергетике для того, чтобы изучить возможность использования SMR для энергоснабжения собственных ЦОД.

В прошлом месяце компания Google анонсировала долгожданный серверный CPU на архитектуре Arm. Впрочем, как сообщает The Register, она уже оказалась третьей на рынке процессоров для ЦОД (сюда входят не только CPU, но и GPU, TPU и иные ускорители). Согласно отчёту TechInsights, компания теперь уступает только NVIDIA и Intel и давно обогнала AMD.

Источник изображения: Google

Как и другие крупные облачные операторы, IT-гигант выпускает собственные чипы TPU, шестое поколение которых было представлено на прошлой неделе. Хотя на сторону их не продают, компания заказывает огромные партии TPU для оснащения собственных ЦОД — только в прошлом году речь шла о 2 млн штук. Ключевым партнёром Google в создании кастомного «кремния» является Broadcom.

Поставки TPU нарастают с каждым поколением, следуя за ростом самой компании. После премьеры TPU v4 в 2021 году в связи с развитием больших языковых моделей (LLM) объём полупроводникового бизнеса Google значительно вырос. TPU применяются компанией для внутренних задач, а ускорители NVIDIA — для облака. В TechInsights считают, что на сегодняшний день у Google имеется крупнейшая в отрасли база установленных ИИ-ускорителей и самая масштабная ИИ-инфраструктура.

Источник изображения: TechInsights

В прошлом году на серверным рынке произошла «масштабная коррекция запасов» — гиперскейлеры увеличили срок службы оборудования, отложив замену серверов общего назначения и повысив капитальные затраты на ИИ-серверы и ускорители NVIDIA. Аналитики Omdia говорят о таких тенденциях на рынке что в прошлом, что в начале этого года. В TechInsights считают, что по итогам I квартала 2024 года Google сможет догнать или даже перегнать Intel по доле на этом рынке.

Конечно, Google — не единственная облачная компания, разрабатывающая собственные чипы. Microsoft работает над серверным CPU Azure Cobalt и ИИ-ускорителями Maia 100. AWS и вовсе годами использует собственные Arm-процессоры Graviton и ИИ-ускорители серий Trainium и Inferentia. В прошлогоднем докладе Bernstein Research сообщалось, что архитектуру Arm используют уже около 10 % серверов по всему миру, а более 50 % из них внедряется AWS. Softbank в начале 2023 года говорила о том, что Arm захватила 5 % облачного рынка.

Источник изображения: TechInsights

Впрочем, с появлением процессоров TPU V5e и TPU V5p решения Google будут использоваться всё шире из-за «взрывного роста» больших языковых моделей вроде Gemini. В 2024 году у Google появится Arm-процессор Axion. И его внедрение, по мнению TechInsights, будет происходить намного быстрее, чем Graviton, поскольку у Google уже имеется программная инфраструктура для такого чипа. Всё это необходимо компании, чтобы идти в ногу с AWS, Microsoft и, в меньшей степени, Alibaba. При этом в докладе упоминается, что рынок полупроводников для ЦОД быстро меняется — раньше на нём доминировала Intel с архитектурой x86. Теперь его структура определяется потребностями ИИ-систем.

«Ростелеком — Центры обработки данных (ЦОД)» и правительство Нижегородской области пришли к соглашению, предусматривающему увеличение мощности принадлежащего оператору дата-центра. Сотрудничество областных властей и оператора предполагает создание базы для IT-инфраструктуры в рамках национального проекта «Цифровая экономика», утверждённого президентом России.

По словам главы области, особое внимание при взаимодействии будет уделяться совместной образовательной и научной деятельности, подготовка специалистов в области информационных технологий станет осуществляться на базе профильного кампуса «НЕЙМАРК», также будет организовано развитие технологий искусственного интеллекта.

Источник изображения: Scott Graham/unsplash.com

Помимо подготовки квалифицированных специалистов, предусмотрено и развитие уже действующего ЦОД благодаря увеличению его ёмкости с 440 до 1 тыс. стойко-мест. Всего «РТК-ЦОД» принадлежит 22 дата-центра. Согласно отчёту iKS-Consulting, компания является лидером как по количеству стойко-мест, так и на облачном рынке России. Осень 2024 года оператор намерен провести IPO.

По данным Bloomberg, Google намерена потратить на расширение основного дата-центра в Финляндии €1 млрд ($1,1 млрд) — преимуществом ЦОД является его лёгкий доступ к «зелёной» энергии. Расширение позволит на четверть увеличить штат, наняв ещё 500 человек в этом и следующем годах.

ЦОД расположен в городе Хамина на южном побережье Финляндии. В регионе хорошо налажены поставки возобновляемой энергии, что вполне соответствует цели компании по полному переходу офисов и дата-центров на «зелёную» энергетику до конца текущего десятилетия.

IT-гигант развивает и сотрудничество с местной коммунальной компанией — тепло от работы ЦОД будет передаваться в местную систему отопления. Технология районного центрального отопления весьма популярна в этой части севера Европы. Если проект успешно реализуют, это будет способствовать и будущим инвестициям. По словам представителя Google, со временем новые площадки, возможно, будут строиться в местах, где легче использовать «мусорное» тепло дата-центров. В ходе пилотного проекта тепло коммунальной компании Haminan Energia Oy будет поставляться бесплатно.

Источник изображения: rivage/unsplash.com

Google — не первая технологическая компания, предлагающая тепло своих ЦОД местным поставщикам тепла в северных широтах. Например, Microsoft намерена обогреть теплом ЦОД в Дании до 6 тыс. домов. С той же целью тепло нескольких ЦОД применяется и в Стокгольме. При этом финский дата-центр Yandex почти восемь лет назад начал отапливать дома жителей Мянтсяля.

С 2023 года стремительно растёт доля строящихся в Северной Америке дата-центров, которые бронируются ещё до того, как они готовы к эксплуатации. The Register сообщает, что в I квартале текущего года речь шла уже о 84 % предварительно забронированной ёмкости.

По данным CBRE за 2023 год, более 2,5 ГВт (83 %) из 3 ГВт строящихся мощностей уже арендованы. Эта тенденция сохранится и в 2024 году. Так, в I квартале 2024 года доля таких ЦОД составила уже 84,3 % от общей ёмкости. Ранее этот показатель был ближе к 50 %, а теперь речь, вероятно, идёт о рекорде как минимум с 2020 года. Спрос в Европе тоже достиг рекордных показателей, взрывной рост заблаговременной аренды начался во II квартале 2023 года.

При этом строительство ЦОД выросло на 46 % в 2023 году в сравнении с 2022-м, а фактическое предложение увеличилось на 26 %. В уже существующих дата-центрах свободно лишь порядка 3,7 % ёмкости — это не антирекорд всех времён, но довольно близко к этому. При этом далеко не все владельцы кампусов горят желанием продлять договоры на прежних условиях, многие предпочитают освобождать ёмкости для сдачи уже по новым, максимально высоким ценам. Поскольку спрос весьма высок, стоимость аренды выросла в 2022 году на 14,5 % в сравнении с предшествовавшим годом, а в 2023 взлетела на 18,6 %.

При этом новые ЦОД вряд ли значительно упростят ситуацию для потенциальных арендаторов, поскольку выросла цена строительства с учётом дефицита критически важных материалов вроде генераторов, систем охлаждения и трансформаторов. Правда, сам дефицит оборудования, по слухам, напрямую связан именно с ростом темпов строительства. И, конечно, строительство новых дата-центров происходит не так уж быстро — обычно на реализацию проекта уходит от года до трёх.

Возможность строить много ЦОД во многом зависит от готовности инвестировать в такие проекты. Крупные компании вроде Microsoft намерены резко нарастить ёмкость своих объектов, хотя в масштабах рынка потребуется намного больше средств, чем готовы выделить компании. В CBRE ожидают, что в долгосрочной перспективе вложения окупятся с учётом ежегодного совокупного увеличения выручки от ИИ-решения на 58 % (по оценкам S&P Market Intelligence). Впрочем, если прогнозы не оправдаются, вряд ли спрос на новые мощности ЦОД останется на прежнем высоком уровне.

Кампус ЦОД ёмкостью 386 МВт и стоимостью около £3 млрд ($3,8 млрд), строительство которого планируется в графстве Линкольншир (Великобритания), должен стать источником тепла для не только для районной системы отопления, но и для подсобного тепличного хозяйства, передаёт Datacenter Dynamics.

Согласно заявке, строительство кампуса Humber Tech Park предполагается в поселении Южный Киллингхолм. Компания намерена получить разрешение на строительство объекта из трёх зданий общей площадью 278 тыс. м². ЦОД подойдёт для размещения ИИ-систем, хотя о том, какое именно оборудование будет использовано, пока не сообщается. На территории кампуса будет построена и новая электроподстанция для обеспечения потребностей оборудования и инфраструктуры в энергии.

Источник изображения: Markus Spiske/unsplash.com

Проект предполагает несколько вариантов утилизации «мусорного» тепла для повышения экологичности. Предложено уже традиционное подключение к локальной отопительной системе. Но план предусматривает и постройку комплекса теплиц площадью 27 тыс. м² для выращивания помидор. Ожидается, что подсобное хозяйство будет приносить до £3,5 млн ($4,43 млн) ежегодно. Тепло ЦОД в последние годы часто применяется для выращивания водорослей, овощей и рыбы, поэтому британский проект стал лишь одним из многих подобного типа.

Подводным ЦОД ещё предстоит отвоевать свою нишу на рынке дата-центров, но они уже, похоже, оказались уязвимыми для акустических атак. По данным The Register, учёные Университета Флориды и японского Университета электрокоммуникаций выяснили, каким способом можно нанести чувствительные удары таким ЦОД, даже не прибегая к глубинным бомбам или торпедам.

Участниками рынка заявляется, что подводные и, в частности, глубоководные ЦОД используют окружающую воду для охлаждения и защиты от внешних воздействий — Microsoft экспериментирует с ними в рамках инициативы Project Natick, компания Subsea Cloud уже предлагает коммерческие решения, а китайская Highlander и вовсе намерена сделать такие объекты массовыми.

Источник изображения: Biorock Indonesia/unsplash.com

Однако, как выяснилось, что с расстояния до 6 м по таким ЦОД можно наносить акустические удары, влияющие на жёсткие диски в составе RAID-массивов. Исследователи моделировали ситуации с воздействием атак как на системы только с HDD, так и на гибридные платформы, сочетающие SSD и HDD. Добившись резонанса, можно нарушить работу головок чтения-записи и пластин дисков, вызывая вибрации, разрушительный эффект которых повышается с ростом интенсивности звуков.

Источник изображения: arxiv.org

Для эксперимента сервер Supermicro CSE-823 с RAID5-массивом из SATA-накопителей Seagate Exos 7E2, дополненным SSD Intel D3-S4510, помещали в металлические контейнеры в лаборатории и открытых водоёмах, в частности — в озере при кампусе Университета Флориды. Звук генерировали с помощью подводного динамика. Выяснилось, что пропускная способность RAID-массива падала при воздействии звуком с некоторыми частотами, например, речь шла о 2, 3,7, 5,1–5,3 и 8,9 кГц. Нарушения в работе ФС наблюдались уже после 2,4 мин. устойчивого акустического воздействия, это приводило к росту задержек доступа к базе данных на 92,7 %. В экстремальном случае некоторые жёсткие диски полностью выходили из строя.

Атаки можно выполнять с помощью модулей, подключаемых к лодкам или подводным аппаратам. Кроме того, подводные ЦОД могут пострадать и от случайных воздействий. По словам одного из экспертов, океан полон звуков. Для нейтрализации подобных угроз есть несколько методов, включая, например, использование звукопоглощающих материалов, которые, правда, негативно влияют на температуру системы. Кроме того, такую защиту можно одолеть, просто увеличив «громкость». Впрочем, некоторые результаты даёт использование машинного обучения для распознавания нетипичного поведения накопителей и оперативного переноса нагрузок на другие узлы.