Технологии искусственного интеллекта (ИИ) сегодня бурно развиваются и требуют всё более серьёзных вычислительных мощностей. Но наряду с наращиванием этих мощностей растут требования и к сетевой подсистеме, поэтому крупные компании и исследовательские организации ищут всё новые способы оптимизации инфраструктуры.

Компания Meta✴ в сотрудничестве с Массачусетским технологическим институтом (MIT) и рядом прочих исследовательских организаций опубликовала данные любопытного эксперимента, в котором ИИ-кластер мог менять топологию своего интерконнекта с помощью механической «роборуки».

Система получила название TopoOpt, поскольку вычислительные узлы в ней использовали полностью оптическую сеть с оптической же патч-панелью. Эта сеть объединяла 12 вычислительных узлов ASUS ESC4000A-E10, каждый из которых был оснащён ускорителем NVIDIA A100, сетевыми адаптерами HPE и Mellanox ConnectX-5 (100 Гбит/с) с оптическими трансиверами.

Источник здесь и далее: USENIX

Наиболее интересное устройство в эксперименте — оптическая патч-панель Telescent, оснащённая механическим манипулятором, способным производить перекоммутацию на лету. Эта «роборука» работала под управлением специализированного ПО, целью которого ставилось нахождение оптимальной сетевой топологии и сегментации сети применительно к различным задачам машинного обучения.

Система с перекоммутируемой оптической сетью не требует энергоёмких высокоскоростных коммутаторов и обеспечивает ряд других преимуществ

Такая роботизированная патч-панель не столь расторопна, как оптические коммутаторы Google с микрозеркальной механикой, но стоит впятеро дешевле и имеет больше портов. Опубликованные экспериментальные данные уверенно свидетельствуют о том, что топология «толстого дерева» (fat tree), использующая несколько слоёв коммутаторов, не оптимальна и даже избыточна для ряда нейросетевых задач.

К тому же перекоммутируемая оптическая сеть без традиционных высокоскоростных коммутаторов требует меньше оборудования, а значит, может быть не только быстрее сети fat tree в ряде ИИ-задач, но и существенно дешевле в развёртывании и поддержании в рабочем состоянии — как минимум за счёт отсутствия затрат на питание множества коммутаторов.

Оператор дата-центров Aruba Global Cloud приобрёл две гидроэлектростанции на итальянской реке Брембо. Они обеспечат дополнительной «зелёной» энергией кампус компании в провинции Бергамо. Оператор всерьёз подходит к реализации «зелёных» проектов — теперь у компании в собственности есть сразу девять ГЭС и ряд других источников экологически безопасной энергии.

Источник изображения: Aruba

Мощность новых ГЭС Paladina и Ponte Briolo составляет 2 МВт, они расположены на одной реке недалеко от ЦОД Aruba, расположенного на территории муниципалитета Понте-Сан-Пьетро провинции Бергамо. Ещё одна из уже имеющихся в распоряжении компании электростанций тоже расположена на той же реке. Суммарная мощность всех ГЭС компании достигает 9,2 МВт, а ежегодно компания намерена получать от них порядка 50 ГВт·ч.

Как сообщает DataCenter Dynamics, Aruba инвестировала немалые средства в «зелёные» источники энергии. Так, кампус в Понте-Сан-Пьетро (30 тыс. м²) питается от солнечных элементов совокупной мощностью почти 5 МВт, а также получает энергию от ГЭС и геотермальных источников. Но этого мало, поскольку в перспективе планируется нарастить площадь кампуса до 200 тыс. м² , а мощность довести до 60 МВт. Также у Aruba есть два объекта в городе Ареццо, а ещё два — в Риме и в чешском Ктише — пока строятся. Экологически чистая энергия будет поставляться как минимум на некоторые из этих площадок. В частности, солнечные панели будут активно применяться в римском ЦОД.

Фондовая биржа Euronext завершила проект по переносу своего дата-центра из британского Базилдона в кампус IT3 компании Aruba Global Cloud, расположенный в итальянском Бергамо. Миграция планировалась не первый год в связи с несколькими факторами, включая покупку итальянской Borsa Italiana Group, а также Brexit. Компания заявила о наличии «веских оснований» разместить основной дата-центр в стране, где у Euronext имеется большой бизнес.

В частности, руководство биржи говорит о предсказуемой нормативной среде — после Brexit перспективы правовых отношений между Великобританией и ЕС остаются неясными. По словам руководства Euronext, миграция мощностей в Италию через год с небольшим после закрытия сделки по приобретению итальянской фондовой биржи Borsa Italiana Group является важной вехой в переносе инфраструктуры на территорию Евросоза. В 2011 году Euronext перенесла ЦОД из Парижа в Лондон, но после приняла решение уйти из Великобритании.

Теперь главный ЦОД компании обслуживает 25 % объёмов общеевропейских торгов. Общая площадь дата-центра в Бергамо составит 200 тыс. м², мощность — 60 МВт. По данным Euronext, новый дата-центр будет полностью запитан от возобновляемых источников, так что будут задествованые солнечная и гидроэнергетика, а также геотермальные источники. В ЦОД используется система динамического естественного охлаждения.

Фото: Aruba Global Cloud