Облачные системы и сервисы сегодня необычайно популярны, поскольку позволяют пользоваться солидными мощностями, иметь единый источник данных для всех работников и при этом не тратить огромные суммы на содержание собственного ЦОД. Но не для любой задачи облака подходят хорошо — к примеру, редактирование несжатого видео требует устойчивых и высоких скоростей, которые часто в облаке недостижимы из-за сетевых ограничений. Но Amazon Web Services надеется преодолеть и этот барьер с помощью Cloud Digital Interface.
Редактирование видеоматериалов обычно производится в несжатом видео, либо с использованием методов сжатия без потерь, иначе не избежать многократного пересжатия с потерей качества. Однако даже формат 1080p при 60 кадрах в секунду требует устойчивой передачи данных на скорости 3 Гбит/с, а 2160p при той же частоте кадров перегрузит и 10-гигабитную сеть — битрейт составляет уже 12 Гбит/с. Обычно для передачи несжатого видео используют такие стандарты, как Serial Digital Interface (SDI), либо похожую выделенную сетевую инфраструктуру.
Но такой подход исключает работу с облаками для многих задач и рабочих процессов, связанных с видео, от цифрового сетевого вещания до вставок различных спецэффектов. Слишком высоки требования к таймингам, пропускной способности и синхронизации нескольких машин, задействованных в подобного рода задаче. Amazon Web Services заявила, что разрешила, как минимум, часть проблемы: в инстансах Elastic Compute Cloud (EC2) компания задействовала соединение 12G-SDI между виртуальными машинами, что позволяет передавать нежсатый поток видео в формате 2160p при 60 кадрах в секунду с глубиной цвета до 3 байт на пиксель.
AWS Elastic Fabric Adapter на уровне программного обеспечения
Но речь идёт лишь о частичном решении с массой условий: во-первых, каждый инстанс EC2 должен быть снабжен адаптером EFA (Elastic Fabric Adapter), а во-вторых, системы, используемые в AWS CDI, должны располагаться неподалёку друг от друга, желательно в одном физическом кластере. Уже представлены библиотеки и драйверы AWS EFA как для Windows, так и для Linux; впрочем, тестовая конфигурация cdi_test под Windows пока не поддерживает разрешение 4K.
Передача видео в таком формате загружает примерно 80% одного процессорного ядра, так что компания рекомендует выбирать достаточно мощные инстансы EC2. Новый стандарт AWS Cloud Digital Interface нацелен на профессиональных видеопродюсеров и позволяет использовать несжатые видеоданные в любом формате. При этом CDI представляет собой открытый стандарт и сопровождается SDK, который можно загрузить с соответствующего репозитория на GitHub.
В портфолио AWS есть и другие инстансы с адаптерами EFA, которые обеспечивают скорость от 10 до 100 Гбит/с. Они ориентированы на создание кластеров для HPC, ИИ и других нагрузок, требующих обмена большими объёмами данных на высокой скорости и с низкой задержкой.
Источник:
