Рынок

Российский рынок серверов, по данным IDC, показал в третьем квартале 2019 года падение продаж на 16,9 % по сравнению с аналогичным периодом предыдущего года (33 334 сервера всех типов), но в денежном выражении вырос на 6,5% до $266,74 млн. Продажи х86-серверов в штуках сократились на 17,1 %, но по-прежнему составили львиную долю сегмента: 99,3 % в количественном исчислении и 88,7 % в денежном. На фоне этого значительным образом, на 61,6 % по сравнению с прошлогодним результатом, выросли поставки RISC-систем.

По мнению аналитиков Digitimes Research, глобальный рынок серверов после незначительного спада в 2019 году покажет 5-6 % рост и по итогам 2020 года, чему будут способствовать закупки оборудования крупными американскими ЦОДами и гиперскейлерами, которые активно растут. В 2019 году число сверхкрупных дата-центров во всём мире перевалило за полтысячи — по данным Synergy Research, в третьем квартале 2019 года количество ЦОД для облачных вычислений, электронной коммерции или социальных сетей, мощности которых измеряются десятками тысяч серверов, составило 504 против 390 в конце 2017 года.

В России в 2019 году продолжился курс на импортозамещение. В частности, правительство РФ ввело 2-годичный запрет на приобретение иностранных СХД для государственных и муниципальных нужд «в целях обеспечения безопасности критической информационной инфраструктуры Российской Федерации, в том числе используемой при реализации национальных проектов (программ)». Глава Минпромторга Денис Мантуров сказал, что ежегодно госсектор закупает оборудование для хранения данных на 8-9 млрд рублей. Он отметил, что в стране немало отечественных производителей СХД.

Облака

Рынок публичных облаков показал отличную динамику в 2019 году и будет расти дальше: по прогнозам Gartner, по итогам 2019 года этот сегмент достигнет $227,8 млрд, показав годовой рост на 15–16%.

В общем объёме рынка чуть менее половины — $99,5 млрд, пришлось на платформы SaaS, $43,7 на BPaaS, $40,3 млрд на IaaS, около $32,2 млрд на PaaS, и ещё примерно $12,0 млрд на сервисы в сфере безопасности и управления. В 2020 году Gartner прогнозирует 17% рост рынка до $266,4 млрд, на 2021 год прогнозируется $308,5 млрд, на 2022 год – до $354,6 млрд.

Российскому рынку облачных услуг, который IDC по итогам 2018 года оценивала в $804 млн, на 2019 год прогнозировался рост расходов на публичные и частные cloud-сервисы на 23,6%, до 2023 года среднегодовые темпы роста рынка оценивались на уровне 14,6%, до $1,6 млрд.

Итогом одного из крупнейших в мире облачных тендеров 2019 года стало решение Минобороны США о выборе Microsoft в качестве ключевого подрядчика по созданию платформы JEDI (Joint Enterprise Defense Infrastructure Cloud) для создания распределённой облачной инфраструктуры хранения и обработки данных разных уровней секретности Пентагона. Ожидается, что до полного ввода системы JEDI в действие в 2029 году подрядчик получит около $10 млрд.

В борьбе за контракт JEDI схватились Microsoft, Amazon, IBM и Oracle, при этом пятый потенциальный участник тендера, Google, отказалась от участия «по этическим причинам» после протестов собственных сотрудников. Amazon такое решение не устроило, и в ноябре компания подала иск в федеральный суд США к Министерству обороны США. Вместе с контрактом на JEDI, по мнению аналитиков, Microsoft также получила дополнительные рычаги для продвижения Azure в других государственных облачных тендерах США. По оценкам Wedbush Securities, расходы госорганов США на облачные вычисления в следующем десятилетии составят порядка $100 млрд.

ПО

Главной сделкой на рынке ИТ в 2019 году стало приобретение IBM компании Red Hat за $34 млрд. Эта сделка, самая большая за всю историю IBM, усилит облачный бизнес компании за счет гибридной многооблачной платформы на технологиях с открытым исходным кодом, таких как Linux и Kubernetes. В IBM заверили, что Red Hat продолжит расширять партнёрские отношения, в том числе, с крупными облачными провайдерами, такими как Amazon Web Services, Microsoft Azure, Google Cloud и Alibaba. По прогнозам Red Hat, ОС Red Hat Enterprise Linux поможет сгенерировать компаниям более $10 трлн выручки в 2019 году, а к 2023 году в мире появятся 640 тысяч новых рабочих мест, связанных с технологиями Red Hat. 

Программный комплекс Kubernetes, появившийся всего пять лет назад, к 2019 году успел стать самым популярным средством для развертывания и управления контейнеризированными приложениями. Настолько популярным, что даже VMware в рамках проекта Pacific работает над поддержкой средств управления Kubernetes в vSphere. Это позволит работающим с vSphere системным администратором управлять контейнерными приложениями, а тесная интеграция vSphere и Kubernetes позволит управлять средствами последнего и классическими виртуальными машинами. В VMware считают, что Kubernetes может стать единой системой управления всеми видами рабочих нагрузок.

Из крупных сделок последних дней также отметим покупку Veeam за $5 млрд. В мире open source наиболее важными являются релизы ядра Linux 5.4 и грядущие 5.5 и 5.6, которые привнесут просто огромное количество нововведений и улучшений. 

Что касается средств разработки, то ключевым анонсом, пожалуй, стал выход oneAPI под эгидой Intel — унифицированной модели программирования для разных архитектур, которая позволяет с минимальными правками в коде переносить нагрузку на различные ускорители, включая GPU, ИИ-акселераторы, FPGA. Для последних Xilinx представила платформу Vitis, которая также значительно ускоряет разработку ПО для ПЛИС компании. Наконец, AMD представила ROCm 3.0, следующую версию платформы для унификации вычислений на CPU и GPU. 

Процессоры

В ряду крупнейших событий 2019 года можно назвать апрельский анонс процессоров Intel Xeon Cascade Lake, которые получили обратную совместимость с прошлым поколением, поддержку памяти Optane DCPMM в слотах DDR4, набор инструкций для ускорения ИИ, аппаратные «заплатки» против нашумевших уязвимостей. В новом семействе чипов также появились специализированные модели, включая 2-кристальные мультичиповые AP с числом ядер до 56. 

Мощным во всех смыслах ответом стал выпуск серверных процессоров AMD EPYC Rome с 64/128 ядрами/потоками, поддержкой 8 каналов памяти DDR4-3200 и 128 линий PCI Express 4.0 в одном чипе. Впервые за многие годы речь не только о возвращении AMD на серверный рынок, но также о серьезной конкуренции господству Intel. 

Чипы AMD EPYC Rome на базе микроархитектуры Zen2 являются сборкой из блоков (CCD) с ядрами и L3-кешем, но в составе CCD теперь может быть восемь ядер. В сумме на сокет приходится до 64 ядер, а в 2-сокетной конфигурации получается до 128 ядер и до 256 потоков.

Однако в 2019 году произошло другое, не менее важное событие. В архитектуру ARM для серьезных серверных решений наконец-то поверили. Все немногочисленные, но крупные участники рынка серверных ARM-решений показали свои новые продукты: Huawei представила 64-ядерный ARM-процессор Kunpeng 920, Ampere Computing объявила о планах производства флагманских 7-нм 64-битных CPU Ampere с числом ядер до 80; Amazon представила 32-ядерный ARM-процессор AWS Graviton второго поколения на базе 7-нм ядер Neoverse N1 с архитектурой ARMv8-A (ядра Cortex-A76 с оптимизациями). 

Из «старой гвардии» выжили лишь ThunderX. Комментируя планы относительно Marvell ThunderX3 и X4, которые получат SVE, в Marvell отметили, что экосистема ARM в серверном и HPC-сегментах за последние два года значительно выросла, в немалой степени благодаря сотрудничеству с Cray. В Fujitsu отметили, что в отличие от «мобильного мира» ARM, его серверный путь только зарождается. Именно эта компания стала технологическим лидером серверных ARM. Подтверждением тому — первый суперкомпьютер Fugaku на базе архитектуры Fujitsu A64FX в последнем TOP500, и сразу на первом месте в Green500.

Ускорители

В прошлом году Intel анонсировала начало поставок новой  ПЛИС Stratix 10 DX, которая отличается от других моделей серии Stratix 10 поддержкой более скоростных внешних интерфейсов, включая Ultra Path Interconnect (UPI), памяти Intel Optane, и шины PCI Express 4.0 для более скоростной связи между FPGA и другими устройствами. Вместе с Cascade Lake компания анонсировала новое поколение ПЛИС Agilex. Заодно Intel успела чуть обогнать Xilinx по числу логических элементов: у августовской Virtex UltraScale+ VU19P их 9 млн, а у ноябрьской Stratix 10 GX 10M уже 10 млн. Кроме того, Xilinx показала новое поколение Alveo. А Achronix предствила 7-нм Speedster7t.

В области уже традиционных ускорителей NVIDIA и AMD событий не так много. «Зелёные» выпустили минорное обновление Tesla V100s PCIe, и был замечен серверный вариант GeForce RTX 2080 Ti. «Красные» же, похоже, отказались от старшей модели Radeon Instinct MI60, но уже имеются признаки скорого выхода нового флагмана MI100. Впрочем, у NVIDIA был ещё один важный анонс, но он касается не «железа», а ПО — компания представила референсную платформу на базе ARM CPU ThunderX2 и Tesla вместе со всем необходимым программным стеком. Кроме того, NVIDIA представила EGX для периферийных вычислений. 

Про анонс ускорителей Intel X^e HPC не упомянуть нельзя, однако пока они существуют только на бумаге. Известно, что новинки получат сразу несколько микроархитектур для разных видов расчётов, память HBM и особый кеш, а также возможность лёгкого объединения CPU и GPU для простоты масштабирования. 

Но всё это меркнет на фоне бесчисленных анонсов ИИ-акселераторов для обучения и исполнения нейронных сетей. Отметим лишь некоторые наиболее значимы и интересные среди них. Во-первых, Intel, наконец, довела до ума Nervana, представив NNP-T и NNP-I. Заодно компания прикупила Habana Labs. Во-вторых, до реальных машин добрались ускорители Graphcore. В-третьих, в лидеры среди доступных продуктов выбился Grog. Ну а самым большим ускорителем стал Cerebras, который размещён на кристалле со стороной 21,5 см и содержит 1,2 трлн транзисторов. 

Память

В сегменте оперативной памяти интереснейшим событием стала инициатива IBM по созданию стандарта DDIMM-памяти Open Memory Interface (OMI) для серверов с целью уменьшения числа модулей и ускорения подсистемы памяти: даже для DDR4 можно получить 4 Tбайт или 650 Гбайт/с оперативной памяти на сокет. В основе открытого интерфейса OMI лежат семантика и протоколы OpenCAPI 3.1 с использованием шины BlueLink (25 Гбит/с), которая в нынешних POWER-чипах отвечает за работу NVLink и Open(CAPI). DDIMM будет работать и с DDR5, первые тестовые платформы для которой должны появиться в 2020 году.

Кроме того, в 2019 году наконец-то заговорили об удешевлении Storage-class memory (SCM), типичным примером которой является Intel Optane. Одновременно с анонсом Xeon Scalable Cascade Lake, компания Intel представила Optane DCPMM в форм-факторе DIMM-модулей, позже Intel выпустила релиз эталонного стека ПО Database Reference Stack 1.0 для упрощения работы баз данных с Optane DCPMM. Конкуренцию Intel составит Micron QuantX, SK Hynix тоже собирается вывести на рынок SCM-продукт, а у Samsung уже есть Z-SSD. 

Сети и хранилища

Стандарт PCI Express 4.0, о котором так много говорили на протяжении последних трёх лет, в 2019 году наконец-то получил коммерческое развитие, отчасти благодаря запуску платформы AMD EPYC Rome 7002, процессоры которой поддерживают до 128 линий такого типа. Они всё же являются более массовыми решениями, чем IBM POWER, за которыми остаётся звание первых CPU с поддержкой этого стандарта.

Теперь вокруг PCI Express 4.0 выстраивается полноценная экосистема во всех секторах. Так, Kioxia (Toshiba)  представила SSD корпоративного класса серии CD/6CM6 с интерфейсом PCIe 4.0 x4, корпоративные SSD Samsung серии PM1733 представлены в вариантах с PCIe 4.0 x4 и в виде карт HHHL с PCIe 4.0 x8. Кроме того, внедрение нового стандарта благотворно скажется и на популяризации «рулеров», которые и сейчас позволяют получить 1 Пбайт в 1U-хранилище. 

Решения под PCIe 4.0 также показали производители сетевого оборудования, да и в целом стоить отметить переход к сетям 200 Гбит/с и подготовку к 400GbE. Mellanox анонсировала 200 Гбит/с сетевые адаптеры ConnectX-6 Dx класса SmartNIC и контроллер BlueField-2 I/O Processing Unit (IPU) для облачных платформ с поддержкой Ethernet и InfiniBand. 

Broadcom представила PCIe 4.0 Ethernet-адаптеры NetXtreme E для платформ класса AMD EPYC Rome 7002 и IBM POWER9, также с поддержкой скоростей до 200GbE. В дополнение, Broadcom выпустила семейство PCIe Gen 4.0 ExpressFabric для ЦОДов и и облачных платформ, включая коммутаторы PEX88000 и ретаймер PEX88T32.

Под конец года на SC’19 компания Viking Enterprise представила СХД NSS-2249 (она же Cray ClusterStor E1000) в форм-факторе 2U на базе двух вычислительных модулей AMD EPYC 7002 с поддержкой 24 NVMe-накопителе PCI Express 4.0. Особенностью системы является 2-портовое подключение SSD формата U.2, что гарантирует видимость всех 24 накопителей системы каждому из обоих процессоров. За счет поддержки PCIe 4.0 узлы общаются друг с другом на скорости до 96 Гбайт/с, а слоты OCP NIC позволяет устанавливать высокоскоростные сетевые карты, включая Broadcom N2200G с двумя портами 200GbE или платы Mellanox ConnectX-6 Infiniband HDR.

В 2019 году наряду с NVM Express 1.4 были представлены спецификации «повзрослевшего» стандарта NVMe-oF (NVMe over Fabrics) версии 1.1. Спецификации NVMe-oF 1.1 включают поддержку транспорта TCP/IP для уже действующей сетевой инфраструктуры, а удалённое подключение SSD и массивов СХД близко по возможностям к системам с прямым подключением. Ряд других улучшений поможет собирать комплексные системы с интеграцией СХД одновременно с прямым и удалённым подключением.

В конце 2019 года соглашение NVIDIA о намерении приобрести Mellanox Technologies за сумму порядка $6,9 млрд было успешно одобрено европейскими регуляторами, и последним препятствием осталось получение разрешения от антимонопольных структур Китая, где у Mellanox находятся крупные клиенты, такие как Alibaba и Baidu. Именно по этой причине финальное поглощение Mellanox отложено на начало 2020 года, заявили в NVIDIA.

С активами Mellanox,NVIDIA получает широкие возможности для укрепления позиций в серверном сегменте, особенно в суперкомпьютерном секторе. Технологии Mellanox, такие как, например, NVMe SNAP (Software-defined Network Accelerated Processing), GPUDirect RDMA, InfiniBand-Ethernet шлюз Skyway, СХД-технологии CNEX Labs и Pliops, органично вписываются в стратегию NVIDIA на освоение рынка оборудования для ЦОДов и HPC.

Послесловие

Что ждать в 2020 году? Одними из ключевых факторов роста станут облака, Интернет вещей, сети 5G и связывающие их воедино периферийные вычисления. Растущее разнообразие вычислительных архитектур повлияет на создание всё более гетерогенных и масштабируемых систем. А глобально всё большую роль будет играть ИИ или, если точнее, нейронные сети. Мы уже делились предсказаниями крупных компания и изданий: от Red Hat, Cisco и Network World. 

Увы, охватить все-все события ушедшего года в одном материале не представляется возможным. Даже SC19 мы оставили в стороне, так как все материалы с конференции отмечены тегом на ServerNews и 3DNews. Что-то могли упустить, про что-то просто забыть. Поделитесь в комментариях, какое событие было самым важным с вашей точки зрения. И не забудьте подписаться на нас, чтобы не пропустить новые материалы, в Я.Дзен, Telegram, Twitter и LinkedIn. А ещё мы всегда рады новым авторам. 

Вычислительная плотность в ЦОД растёт и продолжит расти в обозримом будущем. Вместе с ней растёт и уровень тепловыделения. Производители серверов и разработчики ЦОД всё чаще приходят к выводу о необходимости использования более эффективных методов охлаждения.

Одним из наиболее доступных является переход на использование жидкостного охлаждения. В этой сфере решил попробовать себя известный производитель аппаратных компонентов, компания GIGABYTE.

Источник вдохновения нового проекта: трековые детекторы LHC с фазовой системой охлаждения

GIGABYTE объявила о начале сотрудничества с разработчиком и производителем технологий жидкостного охлаждения, компанией Incooling. Целью совместной деятельности является разработка нового класса двухфазных серверных систем жидкостного охлаждения. В качестве тестовой платформы будет использоваться GIGABYTE R161, допускающая разгон процессоров. Эти платформы используются там, где на счету каждый мегагерц, например, в системах высокочастотной торговли.

Принцип действия разработки Incooling

Технология, предлагаемая Incooling, позволяет снизить температуру комплектующих до существенно более низкой отметки, нежели та, на которой находится температура воздуха в помещении ЦОД. Достигается это с помощью системы охлаждения, основанной на эффекте фазового перехода.

Такая система чем-то напоминает обычный современный компрессорный холодильник: в испарительных камерах, установленных на процессорах, происходит фазовый переход нагнетаемого туда хладагента, после чего получившаяся газово-жидкостная смесь отдаёт тепло в конденсаторе.

GIGABYTE уже использовала эффект перехода фазы в погружной системе, продемонстрированной на SC19

Уже первые предварительные тесты показали на 20 градусов более низкую температуру на процессоре, а тактовую частоту удалось поднять на дополнительные 10%. Совместные исследования GIGABYTE и Incooling должны обеспечить расширение этих лимитов, а также привести к созданию аналогичных систем для других серверов GIGABYTE: H-Series и G-Series. Интересно, что источником вдохновения для Incooling послужила фазовая система охлаждения 2-PACL на основе сжиженного углекислого газа. Она использовалась для охлаждения трековых детекторов Большого Адронного Коллайдера.

Компания SolidRun анонсировала сервер искусственного интеллекта (ИИ) Janux GS31, позволяющий решать различные задачи в области машинного зрения, обнаружения и распознавания объектов, визуальной аналитики и пр.

В устройстве задействован модуль CEx7 LX2160A COM Express, содержащий процессор NXP LX2160A с 16 вычислительными ядрами ARM Cortex-A72 с тактовой частотой до 2,0 ГГц. Объём системной памяти DDR4 RAM может достигать 64 Гбайт.

Сервер может нести на борту до 32 чипов NXP i.MX 8M Cortex-A53 с ускорителем 2D/3D и возможностью аппаратного декодирования видеоматериалов в формате 1080p со скоростью 60 кадров в секунду (до 128 потоков на сервер). В арсенале новинки — до 128 акселераторов искусственного интеллекта Gyrfalcon Lightspeeur SPR2803 AI, обеспечивающих суммарную производительность до 2,15 Пфлопс.

Нажмите для увеличения

За сетевые подключения отвечают два порта 10GbE SFP+ и один разъём Gigabit Ethernet (RJ45). Кроме того, присутствуют два порта USB Type-A и один коннектор Micro-USB.

Сервер выполнен в форм-факторе 1U и рассчитан на монтаж в стойку. Габариты составляют 445 × 500 × 43,5 мм. Энергопотребление не превышает 900 Вт. Диапазон рабочих температур: 10° – 35° C. 

В качестве программной платформы применяется операционная система с ядром Linux. Говорится о совместимости с библиотеками TensorFlow, Caffe и PyTorch. 

Около месяца назад компания Ampere Computing поделилась планами касательно своих серверных ARM-процессоров следующего поколения. Теперь же были раскрыты новые подробности о технических характеристиках будущего флагманского чипа, который получил кодовое название QuickSilver (англ. — ртуть).

Как и сообщалось ранее, будущий процессор Ampere будет производиться по 7-нм техпроцессу на мощностях TSMC и предложит сразу 80 ядер с архитектурой ARM 8.2+. Причём с точки зрения архитектуры ядра будут довольно сильно отличаться от используемых в актуальных процессорах Ampere eMAG кастомных ядрах ARM 8.0.

Ampere QuickSilver создан на базе платформы ARM Neoverse N1, равно как и представленный недавно процессорAmazon Graviton2 , то есть использует ядра с той же архитектурой и явно станет его прямым конкурентом. Новинка в первую очередь предназначена для использования в системах облачных провайдеров.

Помимо большого числа ядер, чипы Ampere QuickSilver предложат более 128 линий PCI Express 4.0, но сколько именно, не уточняется. В любом случае, это больше чем способен предложить любой x86- или ARM-процессор на данный момент. Напомним, что больше всего, 128 линий PCI Express 4.0 на сокет-два, способны предложить разве что процессоры AMD EPYC Rome.

Контроллер памяти будущих процессоров Ampere будет поддерживать до восьми каналов и сможет работать с модулями DDR4 с частотой выше 2666 МГц. Также будет поддерживаться работа в двухпроцессорных конфигурациях с использованием CCIX поверх PCIe 4.0. Отмечается общее увеличение производительности (повышение IPC и частоты), улучшение эффективности и уменьшение энергопотребления.

Аналитики Digitimes Research прогнозируют, что глобальный рынок серверов в 2020-м вернётся к росту после незначительного спада в уходящем году.

По оценкам, отгрузки серверов на мировом рынке в 2019 году сократятся приблизительно на 2,5 %. При этом говорится об увеличении поставок систем хранения данных и сетевого оборудования корпоративного класса.

Изображения Reuters

В результате, по итогам 2019-го тайваньские поставщики серверных продуктов, таких как системные платы, серверные стойки, устройства хранения и сетевые компоненты, смогут увеличить общую выручку на 2,3 % в годовом исчислении — до $29,41 млрд.

В 2020 году, прогнозируют специалисты Digitimes Research, поставки серверов на мировом рынке поднимутся на 5–6 %. При этом тайваньские поставщики серверных продуктов смогут увеличить совокупную выручку на 6–7 %.

Отмечается также, что в 2020-м росту мирового серверного рынка будут способствовать закупки оборудования крупными американскими центрами обработки данных.

Добавим, что в России сейчас наблюдается схожая картина: серверный рынок падает в штуках, но растёт в деньгах. Так, в третьем квартале поставки серверов сократились на 16,9 % (до 33 334), а выручка от их реализации поднялась на 6,5 % (до $266,74 млн). 

Компания IDC обнародовала статистические данные по российскому рынку серверов в третьем квартале уходящего года: отрасль показала смешанные результаты.

С июля по сентябрь включительно в нашей стране было поставлено 33 334 сервера всех типов. Это на 16,9 % меньше по сравнению с результатом за третью четверть 2018-го.

В то же время в денежном выражении зафиксирован 6,5-процентный рост: за три месяца в России было реализовано серверов на общую сумму 266,74 млн долларов США.

На серверы с архитектурой х86 в третьем квартале пришлось 99,3 % в количественном исчислении и 88,7 % в денежном выражении. При этом поставки таких систем сократились в количественном выражении на 17,1 % по отношению к третьему кварталу прошлого года.

В сегменте RISC-систем наблюдался рост отгрузок. В количественном выражении поставки поднялись на 61,6 % по сравнению с прошлогодним результатом.

По итогам квартала лидирующую позицию в сегменте серверов х86 заняла компания Hewlett Packard Enterprise. Несмотря на общее уменьшение объёма поставок в штучном выражении, некоторые производители показали положительные темпы роста. Среди них — Dell Technologies, Lenovo и Fujitsu.

Совокупная доля пяти крупнейших поставщиков в сегменте х86 по итогам квартала составила 72,5 %. 

Современное закрытое аппаратное обеспечение часто настораживает своими потенциальными возможностями тех, кто ставит информационную безопасность превыше всего.

Компания Purism, разработчик программных и аппаратных решений, сконцентрированных на информационной безопасности, представила  защищённую серверную платформу Librem Server.

Современные вычислительные платформы довольно часто критикуются за наличие закрытых (или скрытых от пользователя) механизмов, которые теоретически можно использовать против владельца таких решений. Достаточно вспомнить недоверие к Intel Management Engine. И это далеко не единственный пример современных технологий, безоговорочно доверять которым не стоит, особенно тем, кому важна приватность и защищённость хранимой информации.

Новая платформа Librem Server построена на базе открытых компонентов и лишена подобных «тёмных мест».

SuperMicro X10SDV-16C-TLN4F ‒ основа самого мощного варианта Librem Server: 16 ядер и четыре порта 10GBase-T

Хотя в её основе и лежит уже существующее аппаратное обеспечение, разработчики из Librem существенно его доработали. Вместо стандартного загрузчика используется Pureboot, BIOS заменён на открытый аналог coreboot, реализованы механизмы определения попыток вмешательства в BIOS, ядро ОС или опции загрузки.

Для этого системы Librem Server снабжены специально разработанным для этих целей USB-ключом безопасности. Он позволяет отслеживать состояние системы как локально, так и удалённо. Данный ключ можно также приобрести отдельно, у него есть и другие полезные функции.

Purism также предлагает защищённые ноутбуки

Пока в серии Librem Server имеется три модели, все на базе Intel Xeon D с количеством процессорных ядер от 8 до 16. Все они имеют в своей основе шасси SuperMicro с доработанными системными платами серии X10SDV. В зависимости от комплектации и конфигурации, стоимость составляет от $2700 до $6000. Доступны модели как с внутренним расположением накопителей, так и с корзинами «горячей замены». Стоит отметить, что на сайте coreboot платы на базе Xeon D в списке совместимого оборудования пока не представлены.

Помимо продажи самих серверов, компания предлагает широкий спектр услуг по поддержке Librem Server и обеспечивает выполнение гарантийных условий. Данная платформа уже используется Boeing, General Electric и Toyota, нашла она применение и в NASA.

Производители аппаратного обеспечения готовятся к наступлению эры беспроводных сетей пятого поколения. Компания Fujitsu Limited анонсировала новые серверы PRIMERGY, которые могут похвастаться наличием высокоскоростного виртуального коммутатора класса 5G.

Термин «виртуальный» в данном случае не означает «чисто программный». Основной новой модели PRIMERGY RX2530 M4p служит процессор Intel Xeon Gold 6138P. Доступны одно- и двухпроцессорные конфигурации.

Помимо традиционных 20 ядер с архитектурой x86, этот чип имеет в корпусе FPGA Arria 10 GX 1150 с 1,15 млн. логических элементов и пиковой производительностью почти 1,37 Тфлопс. Именно ПЛИС и отвечает за функции коммутатора, поскольку несёт на себе все задачи по обработке сетевых пакетов.

ПЛИС занимает 16 линий PCIe 3.0 и один линк UPI

Компания-разработчик заявляет о 4,5-кратном превосходстве подобного программно-аппаратного решения над полностью программными аналогами. Архитектура ПЛИС-коммутатора разработана силами самой Fujitsu и обеспечивает обработку до 100 миллионов 64-байтовых пакетов в секунду с временем задержки не более 10 микросекунд. Комплектное программное обеспечение может быть использовано также для ускорения уже работающей у заказчиков программно-определяемых и виртуальных сетей.

Пока новая модель Fujitsu PRIMERGY анонсирована только для рынка Японии, где компания является поставщиком серверного оборудования номер один. Вероятнее всего, серверы PRIMERGY RX2530 M4p вскоре будет доступны и в других странах и регионах.

Не секрет, что многие заказчики всё ещё предпочитают арендовать выделенный сервер, а не пользоваться виртуальными машинами в облачных сервисах.

Но работа с такими серверами включает серьёзные объёмы ручного труда обслуживающих ИТ-специалистов. Компании Selectel удалось автоматизировать этот процесс.

Если заказать облачный инстанс легко и просто, то с выделенным физическим сервером всё не так — процедура ввода его в строй достаточно длительная. Неудивительно, поскольку она включает в себя сборку, подключение питания и сети, установку программного обеспечения и ряд других операций, которые обычно выполняются вручную силами инженеров компании-провайдера. 

В выделенных серверах Selectel можно использовать накопители Optane

В новой схеме Selectel ручной труд исключён. Существует пул заранее собранных машин, готовых к заказу. Пользователь выбирает сервер с ОС из списка доступных, либо заказывает сервер без ОС. В последнем случае до момента получения доступа к машине проходит не более 2 минут: за это время выделяется сервер из пула свободных, включается электропитание и назначается свободный IP-адрес. Если же выбран сервер с ОС, то автоматически запускается её установка, которая может занять до 20 ‒ 30 минут.

Пример достаточно экзотической кастомной конфигурации

Если у заказчика уже нет нужды в выбранном сервере, и он отказывается от услуги, вся информация на дисках уничтожается с максимально возможной гарантией от восстановления. Доступен также и онлайн-конфигуратор, если требуется особая конфигурация. Здесь участия человека исключить пока нельзя, и ввод в строй такой системы занимает 1 ‒ 2 рабочих дня. Забавный факт: всем новым серверам в обновлённой системе Selectel присваиваются имена известных учёных ‒ Эйнштейн, Гаусс и другие; по желанию имя можно изменить.

ASRock Rack ‒ имя столь же говорящее, что и SuperMicro. Этот производитель оборудования известен всем, кто хоть в какой-то мере интересуется новинками рынка серверов и рабочих станций. На выставке, которая сопутствовала завершившейся недавно конференции SC19, ASRock Rack продемонстрировала богатую экспозицию новых решений.

Очень серьёзное внимание компания уделила разработке и выпуску решений на базе процессоров AMD EPYC 7002 Rome.

Передняя панель  4U8G-F/ROME: версия с 12 отсеками формата 3,5 ″

Открывает экспозицию новая платформа HPC под названием 4U8G-F/ROME. Это универсальный сервер супервычислений высотой 4U, поддерживающий новые процессоры AMD EPYC. Пожалуй, это одно из самых богатых на слоты PCI Express решений на рынке ‒ их в системе целых 20, причём поддерживается протокол версии 4.0 с удвоенной относительно PCIe 3.0 производительностью.

Вид на материнскую плату. Видны съёмные модули дисковой корзины

Все слоты имеют форм-фактор x16, что теоретически допускает установку 20 ускорителей с однослотосой системой охлаждения, но для этого потребовалось бы 320 линий PCIe; столько не может обеспечить даже машина с двумя процессорами AMD EPYC. Система явно умеет распределять линии PCIe в зависимости от конфигурации.

Ускорительный модуль хорошо продувается. 32 малых разъёма ‒ PCI Express x4 4.0 для соединения с материнской платой

Основной и главный вариант предполагает наличие в системе 4U8G-F/ROME восьми любых полноразмерных ускорителей с двухслотовой системой охлаждения. Это могут быть NVIDIA Tesla V100, Quadro, или, к примеру, набирающие популярность решения на базе оригинальных процессоров вроде Intel Nervana или Graphcore C2.

Данный модуль допускает установку до 20 плат расширения

Платформа очень удобна в обслуживании: для установки или замены плат ускорителей предусмотрена откидная крышка, на которой расположен также распределитель питания для таких плат (8-контактные разъёмы). Модули принудительного охлаждения съёмные и легко заменяемые на лету.

Откидная крышка позволяет легко заменять ускорители

На снимках хорошо видно 32 малых разъёма. Это коннекторы PCIe x4, обеспечивающие соединение подсистемы ускорителей с основной процессорной платой. Сама же плата при необходимости может быть заменена на другую, с меньшим числом слотов или вообще с разъёмами нового типа, например, PCIe OAM (Open Accelerator Module).

Все блоки системы охлаждения являются съёмными

Уже из вышесказанного понятно, что степень модульности у 4U8G-F/ROME очень высока. Легкозаменяемыми являются буквально все компоненты. Так, дисковая часть, представленная в выставочном экземпляре 12 отсеками «горячей замены» формата 3,5″ может быть заменена на другую, с большим числом менее габаритных накопителей формата 2,5″, а то и на модуль с поддержкой «линеечных» накопителей EDSFF.

Задняя панель  4U8G-F/ROME: четыре блока питания и пять съёмных модулей охлаждения ускорителей

Модуль питания содержит четыре компактных блока с горячим резервированием, он также легко модернизируется: все элементы являются съемными и снабжены удобными ручками для облегчения замены. Таким образом, платформа ASRock Rack 4U8G-F/ROME может быть не только легко сконфигурирована для нужной задачи изначально, но и переконфигурирована потом, когда, к примеру, возникнет необходимость использования ускорителей с другой архитектурой.

1U2G-EPYC/2T бьёт рекорды компактности

Другой экспонат, платформа 1U2G-EPYC/2T, является прекрасным примером того, как можно увеличить плотность размещения вычислительных мощностей за счёт появления на рынке 64-ядерных процессоров EPYC 7002. Такое пока может предложить только AMD, и ASRock Rack прекрасно воспользовалась этой возможностью. Новое решение соответствует спецификациям NVIDIA NGC-Ready for Edge.

1U2G-EPYC/2T крупным планом

Сервер получился очень компактным, высотой всего 1U, но при этом он может быть оснащён 64-ядерным центральным процессором, дополненным двумя ускорителями тензорных вычислений NVIDIA T4. Эти платы имеют теплопакет всего 70 ватт каждая, так что проблем с охлаждением не возникает. В передней части системы имеется ещё два слота PCI Express ‒ их можно использовать для установки высокоскоростных сетевых адаптеров.

1U4G-ROME

Есть в арсенале ASRock Rack и более мощный сервер подобного типа, 1U4G-ROME. Он также использует системную плату с единственным разъёмом AMD SP3 (LGA4094). Но как нетрудно понять из модельного номера, количество ускорителей здесь увеличено с двух до четырёх.

2U4N-F. Выдвинут узел на базе Xeon Scalable

Также компания демонстрировала весьма любопытную модульную платформу 2U4N-F. В корпусе высотой 2U устанавливается два вычислительных узла, причём, предлагаются варианты как оснащенные одним AMD EPYC 7002 (2U4N-F/ROME-M3), так и двумя Intel Xeon Scalable (2U4N-F/C621-M3). В первом случае количество слотов DIMM на систему равно 16 (2×8), во втором ‒ 32 (4×8). Поддерживаются объёмы DDR4-2933 до 4 Тбайт.

Узлы 2U4N-F. AMD EPYC 7002 (сверху) и Xeon Scalable

В версии Intel каждый узел предоставляет в распоряжение заказчика два слота PCIe 3.0 x16, а вариант с процессором AMD оснащён разъёмами x16 и x24; к сожалению, в анонсе говорится только о версии 3.0, хотя другие системы ASRock Rack активно используют и новый стандарт PCIe 4.0. Каждый узел в обоих вариантах имеет собственную дисковую корзину на четыре накопителя формата 2,5″ с возможностью горячей замены.

EPC621D4I-2M: шедевр миниатюризации

ASRock Rack, как известно, активно экспериментирует с компактными форм-факторами. Ей удалось даже практически невозможное ‒ разместить процессорный разъём LGA3647 на плате формата mini-ITX. Плата EPC621D4I-2M может претендовать на звание «шедевра инженерного искусства».

К сожалению, огромные размеры разъёма вынудили разработчиков ограничить подсистему памяти четырьмя разъёмами DDR4 SO-DIMM, так что шестиканальный режим на этой плате задействовать нельзя. Решится ли компания на подобный подвиг для AMD SP3?

WC621D8A-2T (слева) и WC422D8A-2T: для рабочих станций

Привезла на выставку ASRock Rack и другие системные платы, например, WC621D8A-2T и WC422D8A-2T. Они выполнены в формате CEB и ATX и предназначены для построения рабочих станций на базе процессоров Intel Xeon W-3200 (до 205 ватт) и Skylake-W LGA2066, соответственно. О принадлежности к миру рабочих станций говорит наличие интегрированной звуковой подсистемы.

ROMED8-2T: «Рим» для рабочей станции. Поддерживается PCIe 4.0 

Разумеется, не был забыт и разъём SP3 ‒ плата ROMED8-2T выполнена в наиболее распространённом сегодня форм-факторе ATX, поддерживает установку процессоров AMD EPYC 7002 и поддерживает стандарт PCI Express 4.0. Интегрированного звука здесь нет, но имеется сетевой адаптер класса 10GbE Intel X550-AT2 с двумя портами RJ-45.

К плате можно подключить 8 накопителей SATA и 2 накопителя U.2; последние ‒ посредством портов OCuLink.

Ещё «Римляне»: EPYCD8-2T (слева) и ROMED8QM-2T

Эта модель ‒ не единственная ATX-плата с поддержкой процессоров AMD. На выставке демонстрировались и модели EPYCD8-2T и ROMED8QM-2T. Обе платы поддерживают EPYC 7002 «Rome», но первая модель ограничена в конфигурации PCI Express версией 3.0. Вторая плата поддерживает PCIe 4.0, но она предназначена для низкопрофильных систем, собираемых в стандартных корпусах.

Компактные сетевые адаптеры ASRock Rack

Всё чаще в компактных серверных системах применяются сетевые и дисковые адаптеры в формате мезонина, поскольку они существенно компактнее классических PCIe-плат. Из новинок ASRock Rack на эту тему можно отметить сетевые карты M710DA4 (Intel XL710-AM2, 40 Гбит/с, два четыре порта SFP+) и M550R-2E (Intel X550, 2 порта 10Gbase-T).

Фрагмент каталога продукции. Платы такого типа очень популярны в России

Этим экспозиция ASRock Rack не ограничивается: на выставке присутствовали и другие решения компании, такие, как двухпроцессорные платы для Xeon Scalable, высокоинтегрированные решения с процессорами Xeon-D и другие. Но охватить все продукты компании вниманием в одной краткой заметке было бы невозможно.