Компания Netflix проявляет самый пристальный интерес к развитию таких отраслей ИТ-индустрии, как пограничные или периферийные (edge) вычисления и беспроводные сети нового поколения.

Как полагают в Netflix, данные технологии могут оказать серьезную помощь в процессе производства фильмов и сериалов.

Знаменитая 24-метровая видеостена в штаб-квартире Netflix

Вице-президент сетевого подразделения Netflix, Дэйв Темкин (Dave Temkin) отметил, что в кинопроизводстве серьезную трудность представляют ситуации, когда съемочная группа находится в одном месте, к примеру, в Мумбаи в то время, как продюсерский состав остаётся в Лондоне.

При этом последнему очень важна возможность просмотра отснятого материала как можно быстрее. Однако до сих пор это было связано с необходимостью записи материала на картриджи LTO с последующей их транспортировкой авиалиниями, что, естественно, приводило к достаточно серьёзным задержкам.

Ленточные картриджи LTO активно используются для перевозок больших объёмов кино-и видеоматериалов

Компания полагает, что сочетание пограничных вычислений и беспроводных сетей нового поколения позволит избавиться от этих задержек. Если к 5G вопросов не возникает — быстрые сети естественным образом подойдут для передачи больших объёмов данных, то в случае пограничных вычислений следует сделать пояснение.

Даже новое поколение сетей вряд ли справится с передачей несжатых видеоматериалов — и вот тут-то производительные пограничные серверы и придут на помощь, позволяя на лету сжимать и конвертировать видео в удобный для сетевой передачи формат с минимальной задержкой. В этом Netflix поможет инициатива AWS Local Zones и AWS Outposts — малая и сверхмалая распределённая облачная инфраструктура.

Базовая стойка AWS Outpost

В настоящее время Netflix практикует съёмку в разрешении 8K, и даже при сжатии минута такого видео занимает 12,5 Гбайт. Это слишком серьёзная нагрузка даже для 5G, отмечает Темкин. Однако возможность транскодирования видео «на месте» для последующей передачи и вещания позволит съёмочным группам действовать более оперативно в тех случаях, когда руководству съемок не требуется видео максимального качества.

Менее чем через месяц после объявления о покупке Packet, одного из ведущих стартапов в инфраструктуре периферийных вычислений, крупнейшая в мире сеть дата-центров Equinix предприняла ещё один шаг для расширения своего влияния на архитектуру периферийных (edge) вычислений, интерес к которым стремительно растёт.

Компания объявила о присоединении к фонду LF Edge, который входит в Linux Foundation. Являясь один из топ-участников фонда, она получила место в совете управляющих фонда, которое будет занимать технический директор Equinix. Членство в фонде на высшем уровне позволит Equinix влиять на формирование направлений его деятельности, в том числе, на принятие новых проектов.

Фонд LF Edge был создан в рамках Linux Foundation около года назад с целью финансирования разработки платформы с открытым исходным кодом для периферийных вычислений, «независимых от аппаратного обеспечения, процессоров, облака или операционной системы ». В настоящее время он ведёт сопровождение семи проектов, включая Akraino Edge Stack, EdgeX Foundry, Home Edge и Project EVE.

Помимо Equinix, высший уровень членства в фонде LF Edge имеют 32 компании. В основном это телекоммуникационные компании, хотя среди них есть производители мобильных устройств и устройств IoT, а также разработчики ПО для гибридной облачной среды. Компании из последней категории всё чаще рассматривают периферийные центры обработки данных как часть гибридного/мультиоблачного ландшафта. Впрочем, есть в фонде и множество молодых компаний. 

Членство в LF Edge обойдётся Equinix в $50 000 в год, в дополнение к $20 000 в год, которые она уже платит за членство в Linux Foundation Silver.

Компании Winbond Electronics и Macronix International намерены в текущем году предложить новые продукты на основе флеш-памяти SLC NAND. Об этом сообщает ресурс DigiTimes, ссылаясь на отраслевые источники.

Технология SLC, или Single-Level Cell, предусматривает хранение только одного бита информации в одной ячейке. По сравнению с изделиями MLC (Multi-Level Cell) такие чипы обладают более высокими надёжностью и долговечностью.

Сообщается, что Winbond и Macronix намерены расширить ассортимент продуктов на базе SLC NAND для промышленного применения, а также для ряда нишевых областей.

Предполагается, что выпуск новых продуктов на базе технологии SLC NAND поможет компаниям повысить прибыль. К примеру, Winbond отмечает рост спроса на память NAND: в конце прошлого года на эти изделия пришлось около 9 % в общей выручке компании против 7 % в начале 2019 года.

Winbond рассчитывает на увеличение до 25% доли продукции для промышленного и автомобильного секторов. Отмечается, что в нынешнем году ожидается хороший спрос на высокоплотные чипы SLC NAND ёмкостью 512 Мбит и 1 Гбит.

Macronix, в свою очередь, наращивает выпуск SLC NAND, производимой по разработанному в компании техпроцесу 19 нм. Именно эти чипы должны помочь компании завоевать рынок  промышленной памяти.

О «проблеме 2000» в своё время наслышаны были все. Тогда это виделось чуть ли не рукотворным Апокалипсисом, после которого компьютеры прекратят работать или выйдут из-под контроля людей. Однако ничего действительно серьёзного не случилось, в том числе, благодаря своевременным патчам. 

Теперь же назначен следующий «цифровой конец света» — 2038 год. Если точнее, речь идёт о 03:14:07 во вторник, 19 января 2038 года по Всемирному времени (UTC).

anl.gov

Это самая поздняя дата, которая может быть представлена в классическом стандарте POSIX. После этого значение Unix-времени больше не сможет поместиться в 32-разрядное целое число со знаком, что сделает поле данных time_t отрицательным. А это может привести к сбоям в работе вычислительных систем.

Однако уже сейчас разработчики решили эту проблему для ядра Linux 5.6, а также собираются портировать патчи в ранние версии 5.4 и 5.5. Это позволит запускать 32-битные приложения на протяжении и после 2038 года. Идея состоит в том, чтобы пользовательское пространство и приложения, работающие в нём, были построены на базе 64-битного формата time_t, а не 32-битного. Его поддержка есть в библиотеках GNU C 2.32 и Musl libc 1.

Такой подход позволит приложениям использовать все современные системные вызовы ядра Linux. Впрочем, драйверы дорабатывать всё равно придётся. 

Таким образом, за ближайшие 18 лет нужно сделать лишь одно — обновить все актуальные операционные системы и прошивки хотя бы до ядра Linux 5.6. Но будут ли ещё актуальными 32-бит Linux-системы в 2038 году? 

В преддверии Чемпионата мира по футболу 2022 в Катаре запустили первую точку обмена интернет-трафиком QIXP, которая работает в центре обработки данных совместного предприятия Meeza в Дохе. Создание собственных IX должно повысить стабильность доступа в Сеть для болельщиков, а также всех организаций, обслуживающих ЧМ-2022. Пригодятся они и после мероприятия. 

Это первая из нескольких IX-точек, которые будут созданы в Катаре до конца этого года в рамках инициативы Qatar National Vision 2030.

Работа над созданием точки началась в 2018 году, когда указом кабинета министров Катара был сформирован координационный комитет QIXP.

В него вошли Катарская национальная широкополосная сеть (QNBN), Катарский научно-исследовательский институт вычислительной техники (QCRI), телекоммуникационная компания Ooredoo Qatar, сотовый оператор Vodafone Qatar и первая частная подводная кабельная система на Ближнем Востоке Gulf Bridge International (GBI).

 «Мы предпринимаем устойчивые шаги в направлении содействия развитию общества, основанного на знаниях, потому что точки обмена интернет-трафиком снижают стоимость межсетевого взаимодействия и помогают в создании цифровой среды, позволяющей будущим поколениям проявлять творческий подход в мире цифрового контента», — отметил председатель комитета Абдулла Джассми (Abdulla Jassmi).

Технология VPN-туннелей очень распространена и часто используется для допуска в защищённую корпоративную сеть пользователей, работающих удалённо.

Но совсем недавно появилось сообщение о методе атаки, который позволяет подменять или подставлять пакеты в TCP-соединениях IPv4 и IPv6, пробрасываемых через VPN.

Уязвимость получила порядковый номер CVE-2019-1489, она была обнаружена специалистами из Университета Нью-Мексико. Проблема затрагивает почти все UNIX-like операционные системы: Linux, FreeBSD, OpenBSD, Android, MacOS, iOS и другие.

Применяемые в туннелях алгоритмы шифрования не имеют значения: «поддельные» пакеты хотя и поступают из внешнего интерфейса, но обрабатываются ядром, как принадлежащие VPN-интерфейсу. При наличии дополнительных слоёв шифрования (TLS, HTTPS или SSH) вклиниться в VPN-туннель не получится.

Специалисты продемонстрировали успешную подмену для OpenVPN, WireGuard и IKEv2/IPSec. Tor уязвимости не подвержен, поскольку использует SOCKS и lo-интерфейс. В системах с ядром Linux уязвимость для IPv4 напрямую связана с тем, как настроена функция rp_filter (reverse path filtering). В режиме «Strict» уязвимости нет, но дело в том, что начиная с версии systemd 240 по умолчанию используется режим «Loose».

Для защиты VPN-туннелей с адресацией IPv4 достаточно будет переключиться на «Strict», в остальных случаях рекомендуется блокировать прохождение пакетов, у которых в качестве адреса назначения указан виртуальный адрес туннеля. Это временное решение до тех пор, пока в ядра подверженных уязвимости ОС не будет добавлена защита от описанной атаки.

Компания «Доктор Веб» сообщила о включении в состав защитного решения Dr.Web 11.1 для почтовых серверов Unix новой библиотеки антиспама libvaderetro.

Отличительной особенностью нового модуля является поддержка технологии LivePatch, благодаря которой разработчикам удалось многократно повысить частоту обновлений антиспама для поддержания его актуальности.

Новый модуль для борьбы с нежелательной корреспонденцией в почтовом трафике также получил антивирус Dr.Web 11.1 для Linux.

Dr.Web для почтовых серверов Unix включён в реестр отечественного ПО и обладает сертификатами соответствия ФСТЭК и ФСБ России. Продукт обеспечивает выполнение требований норм регуляторов в части антивирусной защиты ИСПДн до 1 уровня защищённости включительно, ГИС до 1 класса защищённости включительно, систем обработки сведений, содержащих гостайну, объектов КИИ вплоть до высшей категории.

Дополнительные сведения о защитном решении доступны на сайте products.drweb.com/mailserver/unix.

Компания Intel представила Stratix 10 GX 10M — самую большую в мире программируемую интегральную схему (FPGA). Новинка выполнена по 14-нм техпроцессу и насчитывает 43,3 млрд транзисторов. Заметим, что предыдущим рекордсменом была ПЛИС  Xilinx Virtex VU19P, обладающая 35 млрд транзисторов. 

Новая матрица Stratix 10 GX 10M насчитывает 10,2 млн логических элементов, на что как раз и указывает сокращение «10М» в её названии. Логика разместилась на двух кристаллах, соединённых между собой вмонтированным в подложку полупроводниковым мостом EMIB (Embedded Multi-Die Interconnect Bridge).

Помимо кристаллов с логикой на подложке Stratix 10 GX 10M расположилось четыре кристалла, на которых в сумме расположилось 48 трансиверов, которые способны обеспечить общую пропускную способность до 0,85 Тбит/с (17,5 Гбит/с каждый). Трансиверы подключены к кристаллам с логикой также посредством интерфейса EMIB.

Всего новинка обладает 25 920 соединениям EMIB, что обеспечивает пропускную способность в 6,5 Тбит/с между всеми кристаллами, из которых состоит Stratix 10 GX 10M. Так что EMIB вряд ли станет узким местом новинки.

Ещё одной важной особенностью рекордной ПЛИС является наличие 2304 контактов ввода/вывода, доступных пользователю. Это позволит создавать самые разнообразные системы с большим количеством внешних интерфейсов. Есть у Stratix 10 GX 10M и 308 Мбит набортной памяти.

По словам Intel, новинка потребляет на 40 % меньше энергии, нежели её прежняя самая большая ПЛИС Stratix 10 GX 2800. Также новая Stratix 10 GX 10M обладает в 3,7 раза более высокой плотностью размещения транзисторов и вдвое большим числом контактов ввода/вывода.

Netflix, ведущая потоковая видеослужба, изучает возможности обновления серверной инфраструктуры. Netflix уже сейчас имеет серверы, которые могут достаточно легко отдавать TLS-поток со скоростью 100 Гбит/с, но компания хочет добиться показателя в 200 Гбит/с.

Дрю Галлатин (Drew Gallatin) на EuroBSDCon рассказал о проделанных оптимизациях во FreeBSD и о тестировании новых платформ  Intel и AMD, которые могут стать основой для следующего поколения серверов Netflix. 

Текущая конфигурация серверов Netflix использует один процессор Intel Xeon, и, учитывая необходимость удвоить пропускную способность, компания может либо перейти на конфигурации с двумя Xeon, либо использовать один чип EPYC. Поскольку выбранные конфигурации AMD и Intel имеют одинаковый показатель совокупной стоимости владения, речь, по сути, идёт о технической оценке двух систем.

В настоящее время Netflix использует в своих серверах чипы Xeon на базе архитектур Broadwell, Skylake и Cascade Lake — они способны обеспечить 100 Гбит/с. Чипы на базе Broadwell имеют пропускную способность памяти на уровне 60 Гбайт/с и 40 линий PCIe 3.0 (32 Гбайт/с пропускной способности ввода-вывода), в то время как Intel Skylake и Cascade Lake обеспечивают пропускную способность памяти в 90 Гбайт/с и 48 линий PCIe Gen3 (38 Гбайт/с пропускной способности ввода-вывода).

В отношении нового оборудования, нацеленного на 200 Гбит/с, компания выбрала две конфигурации. Это двухпроцессорная система с чипами Intel Xeon Silver 4116/4216, которая обеспечивает общую пропускную способность памяти в 180 Гбайт/с и 96 линий PCIe Gen3 (в общей сложности пропускная способность ввода-вывода составляет 75 Гбайт/с). Xeon будут соединены двумя линиями UPI.

С другой стороны, Netflix присматривается к AMD EPYC (Naples или Rome) 7551 или 7502P (более вероятно). Infinity Fabric связывает четыре чиплета внутри упаковки EPYC, а пропускная способность памяти составляет 120–150 Гбит/с. Эта система AMD будет иметь доступ к 128 линиям PCIe Gen3, а в случае с 7502P — Gen4 (пропускная способность ввода-вывода — соответственно 100 и 200 Гбайт/с).

Впрочем, «голые» характеристики не слишком показательны. Для оптимизации потоков данных Netflix разделяет ядра на отдельные NUMA-домены так, чтобы трафик СХД ↔ CPU ↔ NIC по возможности оставался в рамках домена, а общение между доменами по UPI или Infinity Fabric сводилось к минимуму.

В результате проделанной работы удалось получить такие результаты — решение на основе Xeon может достигать максимальной пропускной способности 191 Гбит/с, в то время как конфигурация EPYC может достигать максимальной пропускной способности 194 Гбит/с. При этом в случае с Intel нагрузку на шину UPI удалось снизить втрое, а вот с оценкой Infinity Fabric вышла загвозда — AMD не предоставляет никаких инструментов для работы с ней. 

Учитывая, что обе выбранные конфигурации имеют одинаковую совокупную стоимость владения, Netflix вполне может склониться в сторону AMD благодаря небольшому преимущество в производительности у этого варианта. Однако стоит учитывать затраты на переход с экосистемы Intel на экосистему AMD. Само собой, Intel постарается не упустить столь крупного клиента. 

В ознаменование 50-летия UNIX Центр истории программного обеспечения Музея компьютерной истории опубликовал некоторые из самых ранних исходных кодов UNIX. Эти данные были найдены в бумагах Денниса Ричи. Там обнаружилось 190 страниц распечатанного кода на ассемблере для PDP-7.

Предполагается, что эти записи датируются 1970 г. или началом 1971 г., так как именно в 1971-м разработчики перенесли операционную систему на PDP-11. Данные доступны для загрузки в формате PDF.

Кен Томпсон (Ken Thompson) и Деннис Ричи (Dennis Ritchie) за PDP-11. Фото: computerhistory.org

В коде приводятся преимущественно математические операции для задач с плавающей запятой и другие подобные данные. Разумеется, они представляют на сегодняшний день разве что исторический интерес.

Однако сам факт публикации исходников одной из старейших операционных систем весьма интересен. С помощью их можно понять, как шла разработка, какие были проблемы и как они решались.

Напомним, что наследие UNIX огромно. Именно в качестве «противовеса» коммерческой ОС был создан проект GNU. Позднее появился Linux и многочисленные UNIX-подобные системы, как проприетарные, так и свободные. Одними из самых известных примеров UNIX-подобных ОС (помимо GNU/Linux) являются macOS, Solaris, семейство BSD и NeXTSTEP.

Кроме того, сам подход к UNIX повлиял на современные ОС и сделал их такими, какие они есть.