Материалы по тегу: ангара

22.02.2021 [22:19], Алексей Степин

Российский интерконнект Ангара-2: 200 Гбит/с при задержках до 0,8 мкс

Пять лет назад мы рассказывали о первом поколении российского интерконнекта Ангара или, если говорить более официально, межузловой высокоскоростной коммуникационной сети для суперкомпьютеров и кластеров. В рамках Elbrus Tech Day разработчики из НИЦЭВТ рассказали про второе поколение интерконнекта под названием Ангара-2, которое будет намного быстрее и эффективнее предыдущего.

В сравнении с первой версией были уменьшены задержки — они составляют менее 0,8 мкс, что ниже, нежели у нынешних InfiniBand FDR/EDR/HDR и Intel OmniPath. Снизилась и задержка на сетевой хоп. Скорость соединения выросла до 200 Гбит/с (в планах 400 Гбит/с), появилась поддержка топологий сети вплоть до 6D-тора.

Как и прежде, развитая поддержка RDMA позволяет в рамках сети эффективно строить гибридные системы, включающие в себя узлы на базе архитектур x86, Эльбрус и ARM, а также различные ускорители, в том числе, на базе ПЛИС. Кроме того, создатели работают и над поддержкой NVMe-oF. А в Ангара-2 также появится полноценная поддержка SR-IOV.

Для сети Ангара разработан собственный программный стек, ориентированный, в первую очередь, на высокопроизводительные вычисления. Как и в случае Intel DPDK, есть возможность общения приложений непосредственно с адаптером, минуя стандартные механизмы ядра Linux, за счёт чего и достигается низкий уровень задержек MPI. В Ангара-2 появится более широкий набор поддерживаемых типов сообщений, что упростит создание распределённых СХД на её основе.

Но может Ангара работать и с TCP/IP — совсем недавно разработчики представили вторую версию стека, обеспечивающего функциональность IP-over-Angara. Этот вариант не столь производителен, зато обеспечивает совместимость с существующими IP-решениями, позволяя задействовать RDMA для, к примеру, кластерных ФС.

Решения второго поколения должны появиться к концу текущего года. Контроллер Ангара-2 получит 32 линии PCIe 4.0, причём будет возможность мультихостового подключения — одна карта сможет обслуживать сразу несколько узлов. Адаптеры будут выпущены как в формате полноразмерных карт расширения с шестью портами QSFP-DD для безкоммутаторной топологии, так и в виде низкопрофильных плат с двумя портами для работы с коммутатором.

В первом случае возможно объединить до 1024 узлов в 3D-тор, во втором же использование 40-портовых коммутаторов позволит связать 20480 узлов в сеть с топологией 4D-тор. Под заказ НИЦЭВТ готов создать кастомные варианты с поддержкой 6D-тора и скоростями до 400 Гбит/с на порт.

Первое поколение Ангары уже давно используется в составе различных кластеров, в том числе с современными AMD EPYC Rome. Оно же будет актуально и для новых российских процессоров Эльбрус, так как в прошлом поколении, по словам представителя НИЦЭВТ, скорость работы фактически упирается в южный мост КПИ-2, который имеет только линии PCIe 2.0 x16 и x4.

Постоянный URL: http://servernews.ru/1033236
23.07.2018 [13:40], Сергей Карасёв

Новая система «Ангара» объединит любые компьютеры в вычислительные кластеры

Ростех сообщает о том, что российские специалисты разработали коммуникационную сеть «Ангара» следующего поколения, которая позволяет объединять любые компьютеры с поддержкой PCI Express в мощные вычислительные кластеры.

Платформа «Ангара» даёт возможность формировать суперкомпьютерные комплексы самого разного масштаба. Специальные адаптеры позволяют взаимодействовать узлам, находящимся как в одном здании, так и на расстоянии в несколько тысяч километров друг от друга (правда, тут уже речь о низких задержках не идёт).

Разработку системы ведёт «Научно-исследовательский центр электронной вычислительной техники», который входит в холдинг «Росэлектроника» госкорпорации Ростех. Сеть «Ангара» нового поколения обеспечивает в три раза более высокую скорость обмена данными по сравнению с предыдущей версией платформы. Таким образом, существенно возрастёт общая производительность суперкомпьютерного комплекса.

«Ангара» даёт возможность объединять в единую сеть практически любое количество узлов — от нескольких единиц до десятков тысяч. Для связи могут использоваться стандартные медные или оптические кабели. Коммуникационная задержка при передаче данных между вычислительными узлами составит всего 0,85 мкс.

Сеть «Ангара» также может являться основой ЦОДов, систем хранения данных, программно-аппаратных комплексов для работы с большими данными. Ожидается, что новая разработка даст толчок развитию суперкомпьютерных технологий в России, а также отечественной науки и промышленности в целом. О первом поколении данного интерконнекта можно узнать в материале с ПаВТ-2016

«Ангара»: низкопрофильный адаптер

«Ангара»: низкопрофильный адаптер

Обновление. Разработчики уточнили, что это не следующее поколение их интерконнекта, а новая версия первого поколения сети: «На выставке Иннопром-2018 АО «НИЦЭВТ» представило второе поколение сетевого оборудования Ангара на базе СБИС ЕС8430. Данное решение включает в себя low-profile адаптер ЕС8432 и 24-портовый сетевой коммутатор. Обновленная версия сетевого оборудования в первую очередь предназначена для использования в составе вычислительных кластеров с высокими требованиями к плотности компоновки системы. Также обеспечена поддержка кабелей со стандартным коннектором CXP».

Сетевой коммутатор «Ангара»

Сетевой коммутатор «Ангара»

Постоянный URL: http://servernews.ru/972953
Система Orphus