Инициатива Open Flash Platform (OFP) призвана полностью пересмотреть работу с флеш-памятью в ИИ ЦОД. Участники OFP — Hammerspace, Linux Foundation, Лос-Аламосская национальная лаборатория (LANL), ScaleFlux, SK hynix и Xsight Systems — намерены отказаться от традиционных All-Flash хранилищ и контроллеров. Вместо них предложено использовать флеш-картриджи с минимумом аппаратной начинки, а доступ к таким массивам предоставлять посредством DPU и pNFS.

Как отмечено в пресс-релизе, OFP отвечает многим фундаментальным требованиям, возникающим в связи со следующим этапом развития СХД для ИИ. Для ИИ требуются поистине огромные массивы данных, но вместе с тем ЦОД сталкиваются с дефицитом энергии, повышением температуры и недостатком свободного места. Именно поэтому в OFP решили, что инфраструктуры хранения для ИИ лучше разработать с чистого листа.

Если 10 лет назад технология NVMe вывела флеш-память на новый уровень производительности благодаря отказу от устаревших шин данных и контроллеров, то теперь OFP обещает раскрыть возможности флеш-памяти, исключив посредников в виде серверов хранения и проприетарных программных стеков. OFP же опирается на открытые стандарты и open source решения, в частности, Parallel NFS (pNFS) и стандартный Linux, для размещения флеш-памяти непосредственно в SAN. А отказ от традиционных СХД обеспечит на порядок большую плотность размещения данных, существенную экономию энергии и значительно более низкую совокупную стоимость владения.

Источник изображения: openflashplatform.org

OFP отметила, что существующие решения изначально привязаны к модели сервера хранения, которая требует чрезмерных ресурсов для повышения производительности и возможностей. Конструкции всех современных поставщиков AFA не оптимизированы для достижения максимальной плотности размещения флеш-памяти и привязаны к сроку службы CPU (обычно пять лет), тогда как срок службы флеш-памяти в среднем составляет восемь лет. Эти серверы хранения также предлагают проприетарные структуры и уровни хранения данных, что приводит к увеличению количества копий данных и добавлению расходов на лицензирование для каждого узла.

Комментируя инициативу, ресурс Blocks & Files отметил, что Pure Storage и другие поставщики AFA уже предлагают оптимизированные схемы лицензирования и подписки, в том числе с обновлением контроллеров и дисковых полок. Та же Pure Storage предлагает более высокую плотность хранения, чем многие другие поставщики, хотя и использует проприетарные решения. Поддержкой DPU тоже удивить нельзя. Например, VAST Data уже поддерживает работу своего ПО на NVIDIA BlueField-3. А большинство поставщиков флеш-массивов и так поддерживают RDMA и GPUDirect.

OFP выступает за открытый, основанный на стандартах подход, включающий несколько основных элементов:

• Флеш-устройства на основе QLC (но не только) для повышения плотности. Закупки не должны быть привязаны к одном поставщику (впрочем, сейчас на рынке именно такая ситуация).
• IPU/DPU, которые стали достаточными зрелыми, чтобы заменить гораздо более требовательные процессоры для обслуживания данных. Более низкая стоимость и энергопотребление означают гораздо более высокую эффективность для сервисов обработки данных.
• Картриджи OFP, которые включают всё необходимое оборудование для хранения и обслуживания данных в форм-факторе, оптимизированном для низкого энергопотребления и повышения плотности размещения флеш-памяти.
• Шасси OFP, которые вмещают несколько картриджей OFP и обеспечивают распределение питания и возможность монтажа в различные типы стоек.
• Linux в качестве основной программной платформы со стандартной реализацией NFS (но это и так индустриальный стандарт).

Благодаря использованию открытых архитектур и компонентов, соответствующих отраслевым стандартам, реализация OFP приведёт к значительному повышению эффективности хранения данных, утверждают основатели инициативы. Так, обещано десятикратное увеличение плотности размещения данных, что позволит «упаковать» в одну стойку 1 Эбайт, попутно снизив энергопотребление на 90 %, увеличив срок службы флеш-памяти на 60 % и уменьшив совокупную стоимость владения (TCO) на 60 % по сравнению со стандартными массивами хранения.

По мнению Blocks & Files, в текущем виде OFP выглядит скорее как маркетинговая инициатива, от которой в первую очеред выиграют её участники. Концепция же «сетевых» SSD сама по себе не нова. Весной Kioxia показала SSD с «оптикой». Да, тут речь идёт скорее о блочном доступе и NVMe-oF, но, например, Nimbus Data в прошлом году представила ExaDrive EN с поддержкой NFS.

OpenAI объявила о заключении соглашения с Oracle о строительстве дополнительных ЦОД мощностью 4,5 ГВт в США в рамках расширенного партнёрства, что станет дальнейшим развитием проекта Stargate.

OpenAI пока не назвала площадки для этих ЦОД, но рассматриваются штаты, Мичиган, Висконсин и Вайоминг, пишет Bloomberg. Компания сообщила, что с учётом строящегося объекта в Абилине (штат Техас), общая мощность дата-центров Stargate в США составит более 5 ГВт, и в них будет использоваться более чем 2 млн чипов для ИИ-задач. Ранее в этом месяце стало известно о планах OpenAI арендовать дополнительные мощности ЦОД у Oracle.

В январе OpenAI, Oracle и SoftBank Group объявили о намерении инвестировать $500 млрд в развёртывание ИИ-инфраструктуры на 10 ГВт в США в течение следующих четырёх лет. Теперь OpenAI заявляет, что рассчитывает превысить это обязательство «благодаря сильной динамике сотрудничества с такими партнёрами, как Oracle и SoftBank».

Источник изображения: OpenAI

Как отметил Bloomberg, хотя OpenAI назвала строительство дополнительных ЦОД совместно с Oracle частью проекта Stargate, SoftBank не участвует в его финансировании. В мае Bloomberg сообщил, что SoftBank столкнулась с трудностями в переговорах о финансировании проекта на фоне общей экономической неопределенности, связанной с пересмотром пошлин США.

OpenAI также рассказала о ходе строительства кампуса Stargate I в Абилине (Техас), где часть объекта уже введена в эксплуатацию. Oracle начала поставлять первые стойки с чипами NVIDIA GB200 в прошлом месяце, и часть ЦОД уже работает несколько недель, сообщила компания. Также OpenAI отметила, что Microsoft продолжит предоставлять облачные сервисы для неё, в том числе через Stargate.

DNA Data Storage Alliance, сообщество при ассоциации SNIA (Storage Networking Industry Association), подготовило обзор технологии хранения данных на основе синтетических ДНК. В числе прочего, рассматриваются технологии кодирования/декодирования информации, метрики готовности к коммерческому использованию и основные вызовы, сообщает Blocks & Files.

Данные в ДНК кодируются с помощью четырёх нуклеотидов: аденина (A), гуанина (G), цитозина (C) и тимина (T). Они формируют спираль биополимерной молекулы. Данные в этом случае могут храниться в очень небольшом объёме и веками. Хранение данных в ДНК уже неоднократно опробовано экспериментально, но невысокая скорость записи и чтения, а также размеры оборудования для этого, его большая сложность и высокая стоимость пока не позволяют даже мечтать о коммерчески успешном продукте.

Источник изображения: SNIA

В обзорном документе выделены пять ключевых вызовов:

• Низкая скорость записи/чтения из-за химической природы реакций;
• Высокая совокупная стоимость владения (TCO);
• Надёжность носителя и сохранность данных;
• Био- и информационная безопасность;
• Стандартизации.

Авторы доклада подчёркивают, что скорость передачи данных в традиционных накопителях заметно выше и значительно превышает возможности биотехнологических методов чтения и записи ДНК. Увеличение скорости — одна из фундаментальных задач. Поскольку речь идёт о медленных химических реакциях, достигнуть роста скорости можно было бы масштабированием параллельных операций записи/чтения. Кроме того, нужно уменьшать совокупную стоимость владения.

Документ заключает, что технология хранения данных в ДНК находится на ранней стадии развития и пока далека от коммерциализации, но базовые процессы записи/чтения, а также хранения информации уже доказали работоспособность и возможность масштабирования платформ. Более того, непрекращающиеся инвестиции в технологии работы с ДНК помогут дальнейшим инновациям.

Источник изображения: SNIA

Ожидается, что ДНК-хранилища дополнят, а не заменят существующие технологии архивирования, позволяя создавать относительно недорогие долгосрочные хранилища зеттабайтного уровня. Предполагается, что сценарии прикладного использования технологии появятся в ближайшие три-пять лет. По оценкам Blocks & Files, ключевыми игроками станут Biomemory, Catalog и Atlas Data Storage.

Есть и другие перспективные альтернативы. Так, HoloMem предложила недорогую и эффективную замену LTO и другим системам — 200-Тбайт картриджи HoloDrive, которые прослужат не менее 50 лет.

«Группа Астра» в сотрудничестве с YADRO строит на базе российских решений альтернативу западным облачным платформам, которая позволит российским компаниям ускорить переход на цифровые сервисы. YADRO выступает ключевым партнёром в масштабном развитии облачной инфраструктуры Astra Cloud, в основе которой лежат её серверы, СХД и сетевые решения.

В частности, в инфраструктуре Astra Cloud используются серверы VEGMAN R220 G2, СХД корпоративного уровня TATLIN.UNIFIED GEN2, а также сетевые коммутаторы KORNFELD производства YADRO. В дальнейшем в рамках проекта может быть расширен спектр используемых аппаратных решений YADRO. В частности, планируется тестирование сценариев использования TATLIN.OBJECT и TATLIN.BACKUP.

Источник изображения: «Группа Астра»

В рамках совместного проекта будет установлено 300 серверов VEGMAN, две СХД и 38 коммутаторов с последующим расширением инфраструктуры до тысяч серверов в ближайшие годы по мере развития сервиса. Первый этап проекта планируется завершить в III квартале 2025 года.

Благодаря реализации проекта становятся более доступными в инфраструктуре Astra Cloud такие продукты «Группы Астра», как почтовый сервер RuPost, корпоративное файловое хранилище Astra Disk, платформа виртуализации рабочих мест Termidesk и другие сервисы. Astra Cloud ориентируется как на бизнес, так государственный сектор, гарантируя соответствие регуляторным требованиям, говорит компания. В зависимости от потребностей заказчиков Astra Cloud обеспечивает развёртывание изолированной и аттестованной моделей, включая возможность создания выделенных инсталляций.

Сотрудничество со стратегическим партнёром создаёт прочную основу для предоставления программных решений «Группы Астра» по подписочной модели — в полностью отечественном облаке, говорит «Астра Облако». «Вместе мы создаём рынок, на котором заказчики могут быть уверены: всё, от оборудования до ПО и сервисов, разрабатывается и поддерживается в России. Такой подход позволяет клиентам строить как локальные инфраструктуры, так и надёжные облачные сервисы на единой технологической базе, сохраняя высокий уровень производительности и безопасности», — отмечает YADRO.

xAI приобрела бывшую газовую электростанцию Duke Energy в Саутхейвене (Southaven, Миссисипи), неподалёку от нового дата-центра в Мефисе (Теннесси). Точнее говоря, то, что от неё осталось. Главную ценность представляют земля и коммуникации, сообщает Datacenter Dynamics.

Площадка находится на Стентон-роуд (Stanton Road) в штате Миссисипи, в нескольких километрах от Тулейн-роуд (Tulane Road), где xAI намерена возвести ЦОД площадью более 90 тыс. м², который станет частью уже действующего суперкомпьютера Colossus. xAI уже эксплуатирует дата-центр в Мемфисе и недавно получила разрешение на использование газовых турбин на площадке на постоянной основе, к большому сожалению местных активистов.

Ранее местные СМИ сообщали, что бывшая электростанция с территорией была куплена калифорнийской MZT Tech LLC. По официальным данным, xAI контролирует её деятельность. По данным местных властей, формально xAI приобрела собственность у некой Джули Джеймс (Julie M. James) за $10 наличными. Ранее сотрудников xAI уже замечали на площадке, но представитель xAI заявил, что компания не раскрывает происходящего на территории бывшей электростанции. На тот момент, по его словам, сделка была «всё ещё на стадии обсуждения».

Источник изображения: Troy Mortier/unsplash.com

Электростанция на территории 46 га в Саутхейвене была построена Duke Energy в 2003 году и в своё время могла обеспечить до 640 МВт. Позже владелец продал объект, наряду с семью другими газовыми электростанциями на северо-востоке США, компании Kgen Partners за $475 млн. Спутниковые изображения свидетельствуют, что на площадке осталось немного инфраструктуры, но сохранились подключения к коммунальным сетям — электричеству, газу и воде. Фактически площадка имеет подключение к 200-МВт газовой электростанцией Southaven, управляемой Tennessee Valley Authority (TVA).

Компании, похоже, приходится рассматривать самые необычные сценарии для обеспечения своих потребностей в энергии. Пару недель назад её основатель Илон Маск (Elon Musk) заявил, что намерен купить электростанцию за границей и импортировать её в США для обеспечения своих дата-центров электричеством.

Компания AAEON пополнила ассортимент одноплатных компьютеров моделью PICO-TWL4 для задач промышленной автоматизации. Изделие выполнено в форм-факторе Pico-ITX с размерами 100 × 72 мм, а в основу положена аппаратная платформа Intel Twin Lake.

В зависимости от модификации установлен чип Intel Processor N150 (четыре ядра; до 3,6 ГГц; 6 Вт) или Core i3-N355 (восемь ядер; до 3,9 ГГц; 15 Вт). Процессоры наделены графическим ускорителем Intel UHD Graphics. Объём оперативной памяти DDR5-4800 Non-ECC достигает 16 Гбайт (один модуль SO-DIMM).

В оснащение входят сетевые контроллеры Intel I226 2.5GbE и Realtek RTL8111H-CG 1GbE с разъёмами RJ45, звуковой кодек Realtek ALC256 (опционально), полноразмерный слот mSATA/mPCIe, слот M.2 2230 E-Key для адаптера Wi-Fi/Bluetooth и модуль TPM 2.0 для обеспечения безопасности. Накопитель может быть подключён к порту SATA-3. Есть два порта USB 3.2 Gen2 и коннектор HDMI 1.4 с возможностью вывода изображения с разрешением до 3840 × 2160 пикселей (30 Гц).

Источник изображения: AAEON

Через разъёмы на плате могут быть задействованы четыре последовательных порта (по два RS-232/422/485 и RS-232), интерфейс LVDS (1920 × 1200 точек; 60 Гц) или eDP 1.4 (3840 × 2160 пикселей; 60 Гц), четыре порта USB 2.0, линейный аудиовыход и пр. Питание (12 В) подаётся через двухконтактный разъём Phoenix. AAEON отмечает, что диапазон напряжений можно расширить до 9–36 В с помощью дополнительной платы-адаптера. Новинка может эксплуатироваться при температурах от 0 до +60 °C. Предусмотрен четырёхконтактный разъём для подключения вентилятора охлаждения. Заявлена совместимость с Windows 10/11 и Ubuntu 22.04.2 (ядро 5.19).

Компания Kioxia анонсировала первый в отрасли твердотельный накопитель NVMe, способный вместить 245,76 Тбайт информации. Устройство, вошедшее в семейство LC9, рассчитано прежде всего на рабочие нагрузки, связанные с генеративным ИИ.

SSD серии LC9 дебютировали в марте нынешнего года. Их основой служат чипы флеш-памяти BiCS FLASH QLC 3D с технологией CBA (CMOS directly Bonded to Array). Задействован неназванный проприетарный контроллер, совместимый с NVMe 2.0. Для обмена данными используется интерфейс PCIe 5.0 x4 (с поддержкой двух портов).

Изначально в семействе LC9 были представлены решения в формате U.2 вместимостью до 122,88 Тбайт. Теперь максимальная ёмкость таких устройств увеличилась в два раза — до 245,76 Тбайт. Кроме того, в серии LC9 появились изделия типоразмера EDSFF E3.L на 245,76 Тбайт, а также EDSFF E3.S на 122,88 Тбайт.

Источник изображения: Kioxia

Скорость последовательного чтения достигает 12 Гбайт/с, скорость последовательной записи — 3 Гбайт/с. Это не самые высокие показатели для SSD корпоративного класса с интерфейсом PCIe 5.0, но в данном случае Kioxia пришлось пойти на компромисс с целью достижения рекордной вместимости. Величина IOPS на операциях произвольного чтения составляет до 1,3 млн IOPS, на операциях произвольной записи — до 50 тыс. Накопители рассчитаны на 0,3 полных перезаписи в сутки (показатель DWPD).

SSD поддерживают ряд функций для повышения надёжности и обеспечения целостности данных. Это средства защиты от внезапного отключения питания (PLP), технология FDP (Flexible Data Placement) для повышения долговечности, инструмент управления ошибками на основе контроля четности и пр. Реализованы шифрование AES-256 и алгоритмы постквантовой криптографии, устойчивые к атакам будущих квантовых компьютеров.

Власти Великобритании подписали с компанией OpenAI договор о новом стратегическом партнёрстве для углубления сотрудничества в области исследований аспектов ИИ-безопасности. Также будут изучаться возможности инвестиций OpenAI в британскую ИИ-инфраструктуру, сообщает Reuters.

По словам представителя правительства, искусственный интеллект будет играть основополагающую роль для изменений по всей стране — от улучшения работы системы здравоохранения до устранения барьеров, мешающих экономическому росту.

Власти считают, что добиться этого невозможно без компаний вроде OpenAI, которые продвигают новую технологическую революцию на международном уровне. Благодаря новому соглашению значительная часть соответствующих работ будет проводиться в Великобритании.

Правительство намерено организовать инвестиции £1 млрд в вычислительную инфраструктуру для развития ИИ, рассчитывая увеличить публичные вычислительные мощности в 20 раз в течение следующих пяти лет.

Источник изображения: Ian Taylor/unsplash.com

В гонке технологий искусственного интеллекта в лидеры выходят США, Китай и Индия, а Европа играет роль «догоняющего». Партнёрство с OpenAI, чье взаимодействие с Microsoft в своё время привлекло внимание британского регулятора, возможно, позволит компании расширить лондонский офис и изучить возможность применения ИИ в самых разных областях — при отправлении правосудия, в обороне, для обеспечения безопасности и в образовательных целях.

Глава OpenAI Сэм Альтман похвалил правительство за то, что оно признало потенциал ИИ-технологий в рамках проекта AI Opportunities Action Plan, инициатива в реализации которого принадлежит британскому премьеру, планирующему превратить страну в «ИИ-сверхдержаву» — для этого рассматривается даже создание новых АЭС.

Правительство лейбористов не особенно справляется с обеспечением экономического роста в первый год у власти и теперь заявляет, что ИИ может повысить производительность на 1,5 % в год, что принесёт £47 млрд ($63,37 млрд) ежегодно в течение десятилетия.

Новые данные экспертов Synergy Research Group показывают, что 62 % текущей IT-мощности ЦОД гиперскейлеров приходится всего на 20 регионов, это ряд штатов США и крупных городских агломераций. Так, только на Северную Вирджинию и «Большой Пекин» приходится 20 % от общемирового объёма. За ними следуют штаты Орегон и Айова, Дублин (Ирландия), штат Огайо, Даллас (Техас) и Шанхай (КНР).

Из 20 крупнейших рынков ЦОД гиперскейлеров 14 находятся в США, 5 — в Азиатско-Тихоокеанском регионе (Китае (Пекин и Шанхай), Австралии, Японии, Сингапуре) и лишь 1 — в Европе. На вторую двадцатку рейтинга приходится ещё 17 % рынка, причём в этом случае более заметную роль играют площадки за пределами США. Так, Амстердам и Франкфурт ранее входили в первую двадцатку рынка, но недавно ослабили позиции.

Лидерство США на первых 20 позициях рейтинга обусловлено тем, что 60 % мировых гиперскейлеров, включая четыре крупнейших, находятся в Штатах. Кроме того, на страну приходится почти половина всех доходов рынка облачных вычислений в нескольких ключевых сегментах. Доминировать по ключевым показателям, вероятно, продолжат США и Китай, хотя более заметную роль начинают играть и некоторые перспективные рынки «второго эшелона».

Исследование основано на анализе парка дата-центров 20 крупнейших мировых компаний, стоящих за облачными и интернет-сервисами, включая крупнейших операторов SaaS/IaaS/PaaS, поиска, социальных сетей, электронной коммерции и игровой индустрии. Наиболее крупные ЦОД у Amazon, Microsoft и Google. Помимо значительного присутствия в США, каждая из компаний имеет несколько ЦОД во многих других странах мира. В целом на тройку лидеров приходится 58 % мощностей гиперскейлеров. За лидерами следуют Meta/Facebook, Alibaba, Tencent, Apple, ByteDance и иные «малые гиперскейлеры».

Источник изображения: Synergy Research Group

Прогнозы Synergy основаны на отслеживании проектов гиперскейлеров по созданию дата-центров. Всего известно о 535 объектах, которые находятся на разных стадиях планирования, строительства или оснащения. По данным Synergy, на выбор локации для ЦОД влияет близость к клиентам, доступность и стоимость недвижимости и электроэнергии, наличие сетевой инфраструктуры, простота ведения бизнеса, местные финансовые стимулы, политическая стабильность и минимум последствий стихийных действий.

По данным Synergy, в условиях стремительного роста спроса на ИИ-технологии и инфраструктуру, всё более важным критерием становится доступность электроэнергии. Это часто снижают конкурентоспособность крупных экономических мировых хабов вроде Лондона, Нью-Йорка и Франкфурта, в то время как относительно малонаселённые штаты США вроде Орегона, Айовы и Небраски выигрывают в силу местной специфики и позиции властей, желающих привлечь больше инвестиций.

Хотя прогнозы компании показывают, что Северная Вирджиния останется крупнейшим рынком гиперскейлеров в США, интерес будет всё больше смещаться в сторону Юга и Среднего Запада США. За пределами США рост рынков ЦОД ожидается в Индии, Австралии, Малайзии, Испании и Саудовской Аравии.

Год назад Synergy сообщала, что ключевыми рынками ЦОД гиперскейлеров остаются Северная Вирджиния, Пекин и Дублин. В конце июня 2025 года она же опубликовала исследование, согласно которому у гиперскейлеров есть уже 1,2 тыс. дата-центров, а через пять лет они будут доминировать на рынке ЦОД.

ИИ-стартап xAI Илона Маска (Elon Musk) разместил вакансии для разработчиков кастомных полупроводников, сообщил ресурс DataCenter Dynamics (DCD). Стартап ищет сотрудников для «создания ИИ-систем нового поколения, охватывающих весь спектр, от полупроводниковых чипов до компиляторов и моделей». Круг должностных обязанностей специалистов включает «разработку и доработку новых аппаратных архитектур для расширения границ вычислительной эффективности», а также использование ИИ в процессе проектирования оборудования.

От кандидатов на должность ожидается знание инструментов для создания чипов, таких как Chisel, а также VHDL и Verilog. В идеале претенденты должны иметь опыт «симуляции обучающих рабочих нагрузок на новых аппаратных ИИ-архитектурах». Соответствующий требованиям сотрудник присоединится к команде xAI, работающей над «созданием ИИ-систем нового поколения, которые обеспечат революционную эффективность и масштабируемость на новом оборудовании, компиляторах и моделях».

Источник изображения: xAI

Как полагает DCD, команду, о которой идёт речь, возглавляет Сяо Сан (Xiao Sun), ранее работавший в Meta✴, а до этого занимавшийся разработкой аппаратного обеспечения и алгоритмов машинного обучения, а также CMOS-устройств в IBM. DCD отметил, что на данный момент неясно, сотрудничает ли xAI с другой компанией в разработке полупроводниковых чипов, как, например, Google и OpenAI, которые работают с Broadcom над созданием семейства TPU и ИИ-чипа соответственно.

Компания Tesla, в которой Маск является крупнейшим акционером, также разработала собственный чип — Dojo D1, ориентированный на обработку видеоданных для обучения полуавтономных автомобилей. Однако большая часть команды, стоящей за чипом Dojo D1, покинула Tesla, и его будущее туманно. Илон Маска показал систему в 2024 году. Годом ранее Маск заявил, что чип используется из-за нехватки ускорителей NVIDIA: «Честно говоря, я не знаю, смогут ли они поставить нам достаточно графических процессоров — возможно, Dojo нам и не нужен, — но они не смогут».

Как и Tesla, xAI использует значительное количество ускорителей NVIDIA для своих вычислительных задач, более 200 тыс. из них входят в состав суперкомпьютера Colossus в Мемфисе (США). Маск надеется расширить Colossus до миллиона ускорителей. В свою очередь, xAI приобрела участок под второй дата-центр в Мемфисе.