На свет «умные» сетевые адаптеры появились не вчера — технология возмужала и доросла до концепции DPU, сопроцессора данных, могущего взять на себя не только обработку трафика, но и многое другое, вплоть до обслуживания гипервизора. Текущие реализации DPU базируются на проприетарных технологиях, но организация Linux Foundation хочет положить этому конец и сделать такие сопроцессоры по-настоящему популярными.

На этой неделе организация объявила о старте инициативы Open Programmable Infrastructure (OPI), целью которой является разработка открытых программных стандартов для DPU, IPU и SmartNIC. Проект уже получил поддержку от многих ведущих разработчиков аппаратного и программного обеспечения, включая NVIDIA, Intel, Marvell, F5, Keysight, Dell Tech и Red Hat. Стоит ожидать дальнейшего увеличения количества участников.

Изображение: opiproject.org

За счёт унификации и открытости OPI, считает Linux Foundation, темпы внедрения «умных» сетевых ускорителей существенно вырастут. Для гиперскейлеров и крупных облачных провайдеров проприетарное ПО обычно не проблема, но куда сложнее ситуация выглядит для менее крупных компаний.

Проект OPI положит конец ситуации, когда разработчики DPU порой не могут договориться даже о единой терминологии. На первой стадии участники проекта создадут стандартизированные определения для технологий и функций, выполняемых DPU, затем начнётся разработка универсальных API и программных архитектур и фреймворков, не зависящих от «железа» конкретного разработчика.

Такой крупный игрок на рынке DPU, как NVIDIA, приветствует инициативу, и в рамках проекта OPI уже открыла доступ к SDK DOCA разработчикам ПО и аппаратных сетевых средств. Компания и ранее обещала сделать DOCA для сетевых ускорителей тем же, чем стал стандарт CUDA для GPU, но теперь, к счастью, стандарт не будет закрытым: библиотеки и прочие средства, а также документация, уже доступны, а открытая лицензия позволит использовать наработки NVIDIA не только для ускорителей BlueField, но и для решений других производителей. Сайт проекта OPI находится здесь, также имеется репозиторий на GitHub.

Некоммерческая организация Linux Foundation сообщила о новом достижении в 2021 году. Она обучила и выдала сертификаты значительно большему числу специалистов, чем ранее — их количество выросло сразу на 50 %. Почти на треть выросло число слушателей, зачисленных на платные курсы, а аудитория бесплатных курсов и вебинаров превысила 2 млн человек.

Основными направлениями сертификации стали Linux и Kubernetes. Новые сертификационные экзамены, запущенные в 2021 году, включали направления Kubernetes & Cloud Native Associate (KCNA) и TARS. Кроме того, Linux Foundation выдала 500 стипендий для учебных курсов и сертификационных экзаменов в рамках программы LiFT, а также заключила партнёрские соглашения с целым рядом других некоммерческих организаций с целью расширения возможностей обучения и сертификации.

wikipedia.org

Сертификационными экзаменами занимается подразделение Linux Foundation Training & Certification — крупнейшая в мире некоммерческая организация, которая предоставляет услуги обучения и сертификации по целому ряду направлений, так или начае связанных с open source технологиями, для частных лиц и предприятий.

Количество разработанных и курируемых профессионалами учебных курсов выросло на 30 шт. Новые курсы охватывают сразу несколько направлений, таких как DevSecOps, GitOps, Kubernetes, Node.js, RISC-V, Hyperledger и WebAssembly. Эти технологии нужны для современной IT-инфраструктуры и пользуются большим спросом у разработчиков.

Несколько лет назад компания Intel запустила проект Cloud Hypervisor. Это «лёгкий» и безопасный гипервизор, рассчитанный на облачные нагрузки и написанный на Rust. Вскоре после выпуска релиза 20.0 было объявлено, что проект переходит под крыло Linux Foundation. При этом в центре внимания разработчиков останется создание высокопроизводительного и «лёгкого» гипервизора.

Отметим, что ранее в Cloud-Hypervisor «вложились» Microsoft (добавила поддержку Windows), Arm (реализовала поддержку архитектуры AArch64) и другие компании. «Современные облачные рабочие нагрузки требуют высокого уровня безопасности, и проект Cloud Hypervisor преднамеренно создавался с акцентом на этом», — отметил Майк Долан (Mike Dolan), старший вице-президент и генеральный менеджер проектов Linux Foundation.

Как заявил технический спонсор проекта со стороны Intel, Арьян ван де Вен (Arjan van de Ven), у Cloud Hypervisor есть преимущество в виде модульной структуры и возможностей гибкой настройки. По его словам, это ценится поставщиками облачных услуг и компаниями, которые вкладываются в свою собственную инфраструктуру. При этом в Linux Foundation отметили, что размещение у них Cloud Hypervisor позволит проекту развиваться.

Что касается нововведений в 20-й версии, то среди них отметим поддержку до 16 PCI-сегментов, то есть теперь общее количество доступных PCI-устройств выросло с 31 до 496. Также теперь можно «привязать» vCPU к выбранному пользователю CPU. Была улучшена и поддержка технология VFIO, что повысило производительность пробрасываемых в гостевые системы устройств. Наконец, были заменены некоторые потенциально небезопасные участки кода гипервизора и исправлены ошибки. Сегодня же вышел минорный релиз 20.1.

Некоммерческая организация Linux Foundation сообщила, что будет поддерживать проект Apptainer, ранее известный как Singularity. Проект представляет собой контейнерную систему для высокопроизводительных вычислений (HPC). Но она может пригодиться и в корпоративном секторе, и в обычных ЦОД. Apptainer обеспечивает выполнения приложений с максимальной производительностью, сохраняя их безопасность, переносимость и масштабируемость.

«Проект Apptainer значительно вырос и нуждается в нейтральном доме <…>, что нужно для следующей фазы разработки и внедрения. [В Linux Foundation проект также] может сотрудничать с Cloud Native Computing Foundation, Open Container Initiative, OpenHPC и другими проектами для расширения своей экосистемы», — заявил Грегори Курцер (Gregory Kurtzer), глава CIQ, а также основатель и руководитель проекта Singularity/Apptainer.

«Проект Apptainer находится на решающем этапе развития. Мы надеемся поддержать это сообщество и обеспечить возможность перекрёстного сотрудничества с еще большим количеством разработчиков и технологов open source для расширения экосистемы», — отметил Майк Долан (Mike Dolan), старший вице-президент и генеральный менеджер проектов Linux Foundation.

Возможности Apptainer включают в себя:

• Подпись контейнеров публичным/приватным ключом;
• Совместимость с Docker и OCI;
• Шифрование контейнеров;
• Интеграция с Vault и другими платформами управления;
• Защита от несанкционированного повышения привилегий;
• Поддержка GPU, FPGA и других технологий и аппаратных решений.

В Linux Foundation запустили новую программу Secure Open Source (SOS). А компания Google уже сообщила о том, что станет одним из спонсоров проекта. Поисковый гигант начнёт с инвестиций в размере $1 млн, но в будущем обещает расширить масштабы финансирования. В рамках программы планируется поддержка различных улучшений, которые упреждающе защищают критически важные проекты с открытым исходным кодом, а также их инфраструктуру. Это позволит обезопасить приложения и цепочку поставок ПО.

venturebeat.com

Как отмечается, в перечне есть разные проекты с открытым исходным кодом, потому в Google нет единого определения того, что делает тот или иной проект критически важным. В процессе рассмотрения той или иной заявки будет проанализирована вся информация, от частоты использования пакетов до возможных последствий в случае компрометации ПО.

Для участия в программе нужно подать заявку и расписать там все особенности предлагаемого на рассмотрение проекта, после чего специалисты Google проанализируют её. За улучшения положены вознаграждения. В случае серьёзных патчей безопасности можно получить $10 тыс. и более.

Linux Foundation, Joint Development Foundation и сообщество SPDX на днях объявили, что спецификация Software Package Data Exchange (SPDX) опубликована как ISO / IEC 5962: 2021 и признана международным открытым стандартом безопасности при распространении программного обеспечения.

Как отмечается, уже многие компании используют SPDX. В их числе Intel, Microsoft, Siemens, Sony, Synopsys, VMware и WindRiver. Как отмечается, стандарт укрепляет доверие к разработке и системам распространения ПО. Также отмечено, что SPDX идеально подходит для поддержки международных требований к безопасности и целостности программного обеспечения на протяжении всей цепочки поставок.

Сам стандарт разрабатывался порядка 10 лет специалистами различных отраслей. Это делает его наиболее надёжным решением такого класса.

Отметим, что стандартизацию проводила швейцарская независимая неправительственная международная организация ISO / IEC JTC 1. Она базируется Женеве и объединяет более 165 национальных ведомств по стандартизации, в состав которых входят эксперты в различных областях.

Одним из наиболее интересных нововведений в ядре Linux за последние годы стало появление подсистемы eBPF, которая позволяет безопасно запускать код в «песочницах» внутри ядра. Для продвижения использования eBPF было решено сформировать eBPF Foundation в рамках Linux Foundation. Первыми участниками стали Microsoft, Facebook*, Netflix, Google и Isovalent. Помимо доработок под Linux, Microsoft привнесла первичную поддержку eBPF и в Windows.

Как отмечает Microsoft, eBPF кардинально меняет возможности проектирования операционных систем и инфраструктурных сервисов, поскольку «перекидывает мостик» между ядром и пользовательским пространством. Это реализовано за счёт внутриядерного интерпретатора, которому можно отправлять код из пространства пользователя и таким образом на лету менять поведение системы, не трогая структуру самого ядра.

Кроме того, eBPF работает с нативной производительностью, поскольку интерпретатор поддерживает JIT-компиляцию. Основными областями применения eBPF являются как традиционные мониторинг, отладка или профилирование, так и достаточно глубокое вмешательство в работу подсистем ядра. Впрочем, сейчас eBPF чаще всего используется для ускорения сложных сетевых операций.

* Внесена в перечень общественных объединений и религиозных организаций, в отношении которых судом принято вступившее в законную силу решение о ликвидации или запрете деятельности по основаниям, предусмотренным Федеральным законом от 25.07.2002 № 114-ФЗ «О противодействии экстремистской деятельности».

Сообщение об открытии большого фрагмента кода IBM Blockchain Platform было сделано на глобальном форуме Hyperledger, прошедшем на прошлой неделе. Доступными для изучения станут исходники пользовательского интерфейса Fabric Operations Console, библиотека разработки средств обмена токенами Fabric Token SDK и средства поддержки распределённого реестра (DLT).

Также IBM пообещала, что осенью этого года все пользователи Hyperledger Fabric получат доступ к дополнительным сервисам в рамках Red Hat Marketplace, в том числе доступ к сертифицированным образам IBM, к дополнительным функциям безопасности и техническую поддержку. По заявлению технического директора IBM Кристофера Ферриса (Chris Ferris), эти шаги помогут расширить внедрение корпоративного блокчейна с открытым исходным кодом и сделать использование Hyperledger более удобным.

Генеральный менеджер IBM по блокчейн и ИИ-приложениям, Карим Юсуф (Kareem Yusuf), пояснил, что передача части кода Blockchain Platform сообществу Linux Foundation нельзя интерпретировать как отказ компании от технологий блокчейн. Он обозначил области, в которых, по его мнению, IBM сможет извлечь выгоду: консультирование по реализации конкретных сценариев использования + готовые продукты, такие как IBM Food Trust и IBM Blockchain Transparent Supply.

Linux Foundation (LF) и Альянс мобильных сетей следующего поколения (Next Generation Mobile Networks, NGMN) подписали Меморандум о взаимопонимании. Целью нового сотрудничества станет создание открытых и масштабируемых решений для операторов и поставщиков услуг сетей передачи данных стандарта 5G и 6G.

«Мы очень надеемся на взаимовыгодное и плодотворное сотрудничество с Linux Foundation. Open source всё более востребован при реализации наших ключевых программ, таких как “Освоение пути к дезагрегации”, “Устойчивость и зелёные сети будущего”, а так же 6G», — сказала Анита Доулер (Anita Döhler), генеральный директор NGMN.

5G Super Blueprint

По мнению NGMN, создание и распространение открытых, масштабируемых «строительных блоков» для операторов и поставщиков услуг имеет решающее значение при внедрении 5G и последующих технологий. Совместная работа затронет такие области как обеспечение устойчивости, автоматизация и автономная работа сетей на базе ИИ-решений, безопасность, cloud-native решения, виртуализация, дезагрегация, архитектура на основе услуг и т.д.

«Интеграция опыта по ключевым программам NGMN с проектами LF Edge, LF Energy и других в рамках инициативы LF Networking 5G Blueprint, является закономерным шагом для отрасли», — сказал генеральный менеджер LF по сетям по сетям, Edge и IoT Арпит Джошипура (Arpit Joshipura). Курс LF на гармонизацию открытого программного обеспечения с открытыми стандартами действует уже несколько лет — фонд сотрудничает с ETSI, TMF, MEF, GSMA, O-RAN Alliance и др. NGMN также поддерживает давнее сотрудничество с этими организациями.

Организация Linux Foundation выпустила ежегодный отчёт State of the Edge, в котором в связи глобальной пандемией COVID-19 скорректировала свой прошлогодний прогноз относительно использования периферийных вычислений для ключевых отраслей в 2028 году.

Мэтт Трифиро (Matt Trifiro), сопредседатель State of the Edge и директор по маркетингу компании Vapor IO, занимающейся периферийными центрами обработки данных, отметил, что спрос на такую инфраструктуру в мире вырос в связи с продолжающейся пандемией COVID-19. «Новые цифровые нормы, созданные в связи с пандемией, будут постоянными. Это позволит активизировать внедрение новых технологий, таких как беспроводная связь 5G и автономные транспортные средства, но также затронет почти все секторы экономики, от промышленного производства до здравоохранения», — заявил он.

Цифровое здравоохранение — наиболее очевидный пример отрасли, которая во время пандемии значительно расширила использование периферийных вычислений. Поэтому в отчёте State of the Edge прогнозируется, что к 2028 году на отрасль здравоохранения будет приходиться 8,6 % глобальной инфраструктуры такого типа, что выше предыдущего прогноза в 6,8 %. По той же причине вырос прогноз и для сектора производств — 6,2 % к 2028 году вместо 3,9 %.

Ещё одна отрасль, в которой будет всё более важную роль играть архитектура периферийных вычислений — розничная торговля. В прошлогоднем отчёте не было долгосрочного прогноза для этого сектора экономики, а в этом году прогнозируется, что в 2028 году её доля составит 4,6 %.

Вместе с тем не везде увеличение доли использования периферийной вычислительной архитектуры можно отнести за счёт пандемии COVID-19. Это и автомобильная промышленность, которая испытывает значительно возросший спрос на электромобили, и производство автономных систем, таких как автономные мобильные роботы. Также в периферийных вычислительных системах будут нуждаться умные города, которые используют ряд цифровых сервисов, и такие виды деятельности, как переработка отходов или очистка воды.

В отчете State of the Edge также рассказано о технологиях, лежащих в основе архитектуры периферийных вычислений, в том числе:

• Сервисы и приложения, предназначенные для снижения рисков быстрого развёртывания на периферии: разнообразные процессорные платформы, ориентированные на периферию, которые теперь включают решения на базе Arm, SmartNIC с FPGA и графические процессоры.
• Новые типы интерконнекта на периферийных объектах.
• Стандартизация 5G, SD-WAN нового поколения и SASE (Secure Access Service Edge).