Некоммерческий консорциум Linux Foundation сообщил о переводе платформы машинного обучения PyTorch, созданной Meta*, в недавно созданное подразделение PyTorch Foundation. PyTorch является одним из ключевых и одним из самых популярных ИИ-фреймворков. С момента выхода в 2016 году более 2,4 тыс. участников и 18 тыс. организаций использовали данную платформу в академических исследованиях и производственных средах.

Linux Foundation сообщил, что будет работать с сопровождающими проект сообществом разработчиков и первоначальными членами-основателями PyTorch с целью поддержки экосистемы. Став частью Linux Foundation, платформа и её сообщество получат выгоду от программ и инфраструктуры поддержки консорциума, включая программы обучения и сертификации, исследования, локальные и глобальные мероприятия, площадки для совместной работы и поиска сотрудников и т.д.

Источник: PyTorch

«Мы благодарны команде Meta*, где PyTorch был создан и превратился в огромную экосистему, за то, что они доверили Linux Foundation эту важную работу», — сообщил Джим Землин (Jim Zemlin), исполнительный директор Linux Foundation. В свою очередь, Марк Цукерберг (Mark Zuckerberg), основатель и гендиректор Meta*, заявил, что будет «рад и далее развивать сообщество PyTorch и продвигать исследования в области ИИ».

Исполнительным директором PyTorch Foundation назначен Ибрагим Хаддад (Ibrahim Haddad), вице-президент по стратегическим программам Linux Foundation. PyTorch Foundation будет управляться советом, включающим представителей членов-основателей: AMD, Amazon Web Services (AWS), Google Cloud, Meta*, Microsoft Azure и NVIDIA.

Источник: CNCF

В пресс-релизе отмечено, что такие проекты, как PyTorch, способные стать базовой платформой для критически важных технологий, выигрывают от нейтрального окружения, каким является Linux Foundation. По состоянию на август 2022 года PyTorch входил в пятёрку самых быстрорастущих open source проектов в мире наряду с ядром Linux и Kubernetes. С августа 2021 года по август 2022 года PyTorch насчитал более 65 тыс. коммитов.

* Внесена в перечень общественных объединений и религиозных организаций, в отношении которых судом принято вступившее в законную силу решение о ликвидации или запрете деятельности по основаниям, предусмотренным Федеральным законом от 25.07.2002 № 114-ФЗ «О противодействии экстремистской деятельности».

Аналитики компании J’son & Partners Consulting подсчитали, что объем российского рынка офисного ПО за 2021 год составил 42,5 млрд руб.: коммерческий сектор — 28,8 млрд руб., госсектор – 10,9 млрд руб., физические лица — 2,8 млрд руб. В 2020 объем рынка составлял 38,8 млрд руб. Прогноз роста доли рынка отечественного офисного ПО в связи с изменившейся экономической ситуацией — до 82 % к 2027 году.

По данным J’son & Partners Consulting, наблюдаемые макроэкономические факторы, динамика спроса в 2022 году, требования госрегулирования ведут к изменению структуры рынка в течение ближайших 3–5 лет, в том числе к резкому увеличению доли российского офисного ПО.

Источник: J'son & Partners Consulting

Так, ранее ожидались более плавная динамика увеличения доли российского офисного ПО (с 7 % в 2020 году до 40 % в 2026 году) и open source ПО (с 15,5 % до 30 %) и уменьшение доли зарубежного ПО (с 77,5 % до 30 %). При условии сохранения наблюдаемых тенденций эксперты ожидают, что к концу 2027 года большую долю рынка будут занимать российские платформы офисного ПО, на долю open source решений останется 10 %, а на долю зарубежных — всего 8 %.

Источник: J'son & Partners Consulting

В 2022–2023 гг. эксперты прогнозируют резкое увеличение темпов роста российского рынка ПО, несмотря на ожидаемое сокращение общих темпов роста экономики. До 2025 года рост будет умеренным, далее замедлится в связи с ожидаемой реакцией госсектора и коммерческого сектора на требования государства по импортозамещению и с учетом скорости принятия решений, проведения закупок и внедрения. Среднегодовой темп роста (CAGR) в 2022–2027 годах составит 10–12 %.

«Яндекс» опубликовал исходный код и документацию фреймворка userver. Это первый открытый набор инструментов, который позволяет создавать высоконагруженные приложения на языке С++, заявляют в компании. userver подходит для разработки приложений с микросервисной архитектурой. Микросервисы автономны, поэтому решения на подобной архитектуре легко обновлять и добавлять в них новые функции. Фреймворк выпущен под открытой лицензией Apache 2.0.

По словам Антона Полухина, одного из авторов фреймворка и руководителя группы бэкенд-разработки решений для продуктовых команд RideTech и eCom, внутри userver есть все необходимое для разработки, диагностики, мониторинга, отладки и экспериментов. Например, userver подсказывает как исправить ошибки еще на этапе компиляции, умеет работать с разными базами данных, менять параметры на лету.

Источник изображения: Яндекс

«Яндекс» использует userver в «Go», «Лавке», «Доставке», «Маркете», финтех-проектах и других сервисах. Изначально фреймворк разрабатывался в «Такси». С его помощью команда перешла от монолитногй архитектуры к микросервисной, начав использовать последнюю в разных приложениях. Ранее «Яндекс» выложил в open source распределенную СУБД YDB, а также библиотеку машинного обучения CatBoost, которую компания применяет в «Поиске».

BMC можно найти практически в любом сервере или рабочей станции. Этот контроллер отвечает, в числе прочего, и за функции удалённого управления системой. Обычно это чипы Aspeed, хотя крупные производители вроде Dell и HPE используют и собственные решения. Однако всё это закрытые системы, которые могут содержать серьёзные уязвимости и даже специально оставленные бэкдоры. Поэтому компания Raptor Computing Systems решила пойти альтернативным путём.

Raptor Computing известна своими решениями на базе IBM POWER с полностью открытым дизайном и программным обеспечением, что нынче редкость. Но эти системы используют проприетарные BMC-чипы, на замену которым компания готовит SoftBMC-решение на базе Kestrel от Raptor Engineering. Kestrel, по словам создателей, является первой в мире действительно открытой реализацией BMC, поскольку доступна и прошивка, и HDL-описание. Работает Kestrel на FPGA.

Фото: Timothy Pearson / Raptor Engineering

Теоретически можно самостоятельно собрать BMC-плату и установить и настроить необходимое ПО, но это довольно трудоёмкий процесс, так что Raptor Computing Systems создала законченное решение под названием Arctic Tern, которое будет совместимо с платформами Blackbird и Talos II. Текущий прототип в формате небольшой PCIe-карты снабжён 1GbE-портом, видеовыходом mini-HDMI и 1 Гбайт DDR3 (SO-DIMM). Одним из преимуществ новинки станет практически мгновенная загрузка после подачи питания, но из-за достаточно медленного открытого OpenPOWER-ядра Microwatt на FPGA разработчики были вынуждены использовать RTOS Zephyr вместо OpenBMC.

Компания «Инфосистемы Джет» взяла на техническое обслуживание оркестратор управления приватным облаком в Росбанке. Система работает на открытой платформе Manage IQ и в компании говорят, что с каждым годом проектов на базе Open Source становится все больше.

Техническая поддержка включает в себя контроль работоспособности системы и доработку ее функциональности, автоматическое тестирование корректной работы услуг и регулярные обновления. Система работает в двух ЦОДах в Москве, охватывая около 40% вычислительного оборудования банка.

Сотрудники «Инфосистемы Джет» внедрили новый оркестратор управления частным облаком на основе Open Source-решения Manage IQ в Росбанке в конце 2021 года. Облако позволяет финансовой организации быстрее выводить новые банковские продукты на рынок, значительно сократить затраты на ИТ-инфраструктуру, а также улучшить основные бизнес-показатели. На данный момент более 150 ИТ-систем, включая все дистанционные сервисы банковского обслуживания физических и юридических лиц и большую часть информационных систем банка, находятся в под управлением Manage IQ.

«Проектов с использованием Open Source с каждым годом становится все больше. Однако после внедрения подобных решений остро встает вопрос с их эксплуатацией: на рынке недостаточно специалистов, разбирающихся в специфике и требованиях enterprise», — отмечает заместитель директора департамента аутсорсинга и системного администрирования «Инфосистемы Джет» Александр Казаков. Ранее в Росбанке было развёрнуто частное облако на VMware, постепенно его ресурсов стало недостаточно. Кроме того, банк решил перейти на технологии Open Source.

Компания Hewlett Packard Enterprise объявила в ходе конференции HPE Discover 2022, что её давний партнёр Red Hat присоединяется к экосистеме HPE GreenLake. Сотрудничество позволит объединить на платформе HPE GreenLake новые сервисные предложения HPE с технологиями Red Hat с открытым исходным кодом, такими как Red Hat OpenShift, Red Hat Enterprise Linux и Red Hat Ansible Automation Platform.

Это поможет удовлетворить потребности ИТ-организаций в гибких технологических решениях, которые могут ускорить достижение бизнес-результатов и способствовать цифровой трансформации. В рамках партнёрства HPE и Red Hat предлагают готовые открытые решения, которые позволят компаниями сократить затраты и снизить сложность выполнения работ, а также повысить стабильность и производительность в различных ИТ-средах. Эта инициатива призвана помочь организациям среднего размера, предприятиям и государственным организациям модернизировать свои ИТ-комплексы, ускорить выход на рынок, внедрить инновации и создать устойчивое конкурентное преимущество.

Объединение HPE GreenLake с Red Hat несёт в себе целый ряд плюсов:

• Более надёжная работа. Платформы и решения, созданные для различных рабочих нагрузок, с высокой доступностью и защитой данных обеспечивают более высокую надёжность инфраструктуры с расширенными функциями безопасности независимо от местоположения.
• Снижение риска и сложности. Компании HPE и Red Hat стремятся предоставлять архитектуры, необходимые для достижения бизнес-целей, ориентируясь на долгосрочный успех клиентов.
• Низкая стоимость владения — доступные масштабируемые решения, оптимизированные для каждого клиента, помогают лучше контролировать расходы.
• Скорость. Компании, использующие комплексные ИТ-решения с открытым исходным кодом, могут развиваться быстрее и быстрее адаптироваться к рыночным и отраслевым изменениям, чтобы сократить время выхода на рынок и получить конкурентное преимущество.
• Комплексная поддержка. HPE предоставляет клиентам услуги мирового класса и поддержку физических, виртуальных и мультиоблачных сред.
• Надёжная технология с открытым исходным кодом. Red Hat является ведущим в мире поставщиком корпоративных решений с открытым исходным кодом. Более 90 % компаний из списка Fortune 500 используют технологии Red Hat.

Лаборатория искусственного интеллекта «Сбербанка» и Институт AIRI сообщили о разработке библиотеки Eco2AI с открытым исходным кодом. Она предназначена для оценки эквивалентного углеродного следа для электроэнергии, затраченной на тренировку ИИ-моделей. Библиотека определяет доступные CPU и ускорители, позволяет задавать региональные нормы углеродной стоимости генерации электроэнергии и рассчитывает расход энергии на исполнение кода.

Библиотека даёт возможность отслеживать эффективность с точки зрения вычислительной сложности. Предполагается, что мониторинг динамики потребления энергоресурсов поможет исследователям оценивать количество необходимых для работы моделей параметров, максимально облегчать их архитектуры и внедрять более оптимальные и энергоэффективные модели.

Источник изображения: pixabay.com / geralt

«Знание энергетического баланса позволяет рассчитать, сколько каждый сеанс обучения той или иной модели искусственного интеллекта требует ресурсов и какой оставляет эквивалентный углеродный след. Библиотека Еco2AI позволяет отслеживать энергопотребление и углеродный след в процессе обучения моделей искусственного интеллекта», — отмечается в публикации.

Проект Open Mainframe Project объявил, что Zowe, программная среда с открытым исходным кодом для мейнфреймов, получила обновление до версии 2.0, которая относится к категории Long Term Support (LTS). Новая версия, которая появилась через 2 года после выхода первого LTS-релиза, предложит поставщикам и клиентам повышение удобства использования, упрощённые процессы развёртывания и администрирования, а также новые функции.

Изображение: Zowe

Преимущества Zowe LTS V2.0 включают в себя:

• Стабильность раюоты.
• Совместимость на всех уровнях.
• Актуальность — систему обещают поддерживать на протяжении нескольких лет.
• Дополнительные встроенные функции безопасности, которые гарантируют защиту данных.
• Улучшение производительности при работе в интерфейсе командной строки.
• Новые API, созданные сообществом.
• Расширяемость.
• Современные инструменты для администрирования. К примеру, это н овая структура команд сервера z/OS, обеспечивающая согласованность работы всех компонентов z/OS Zowe.

Zowe 2.0 работает на платформах IBM Z, поддерживающих z/OS версии 2.3 (5650-ZOS) или более поздних.

ВТБ сообщил о переводе сервисов виртуализации инфраструктуры, используемых в работе банковских приложений, на импортонезависимую платформу виртуализации OpenStack. Эта платформа, основанная на открытом ПО, является компонентом облачной платформы VTB.Cloud, запуск которой состоялся в прошлом году. Платформа VTB.Cloud зарегистрирована в реестре отечественного ПО.

Благодаря ускоренному доступу к необходимым ресурсам в облаке платформа OpenStack позволяет адаптировать банковские продукты с учётом потребностей заказчика буквально за 5 мин. Использование OpenStack позволяет исключить зависимость банка от зарубежных разработок, сохранив при этом необходимый уровень информационной безопасности и отказоустойчивости. Кроме этого, отказ от импортозависимого ПО даёт значительный экономический эффект.

Источник изображения: ВТБ

Согласно пресс-релизу, перевод информационных систем ВТБ на платформу OpenStack идёт опережающими темпами, и все внедрения банковских продуктов осуществляются уже на ней. Как ожидается, перевод критический инфраструктуры банка на OpenStack будет завершён до конца 2024 года. Это направление курирует центр компетенции по развитию технологических инструментов виртуализации инфраструктуры.

Также отмечается, что в рамках стратегии по импортозамещению банк продолжает оптимизировать собственные бизнес-процессы и переходить на отечественные разработки — отказ от использования зарубежных решений при внедрении новых продуктов позволит унифицировать этот процесс на единой платформе, и обеспечит конкурентное преимущество банка с точки зрения оптимизации разработки продуктов под нужды клиентов.

Грег Лэвендер (Greg Lavender), технический директор Intel, сообщил о том, что к корпорации присоединился Брендан Грегг (Brendan Gregg) — известный эксперт в области оптимизации производительности Linux и BSD. Он займёт должность научного сотрудника Intel.

Брендан Грегг ранее работал в Netflix, Sun Microsystems, Oracle и Joyent. Он разработал ряд методик для оценки и детального анализа производительности компьютерных систем. Это, в частности, технология USE Method — Utilization Saturation and Errors Method. Грегг развивал DTrace, а также приложил руку к ZFS и повлиял на развитие (e)BPF. Кроме того, он является автором целого ряда книг.

Источник изображения: brendangregg.com

Open source инструменты Брендана Грегга включены во многие операционные системы и продукты и используются компаниями по всему миру. Его разработки дают возможность получать уникальную информацию о поведении системы. В Intel Брендан Грегг будет работать в команде разработчиков ПО для Intel xPU, то есть CPU, GPU, ускорителей и т.д.