Компания Amazon предупредили персонал центров обработки данных о необходимости «проявлять бдительность» в отношении угроз для объектов и инфраструктуры после решения AWS прекратить оказывать услуги хостинга социальной сети Parler. В письме, направленном сотрудникам ЦОД вице-президентом AWS по управлению инфраструктурой Крисом Вондерхаром (Chris Vonderhaar), с которым ознакомился ресурс Business Insider, компания просит сотрудников сообщать о любой подозрительной деятельности.

«Мы все должны [быть] бдительными в течение этого времени, чтобы обеспечить безопасность друг друга и наших объектов, — говорится в электронном письме. — Если вы что-то заметили, сообщайте — любая такая ситуация или проблема не является слишком маленькой или незначительной». Вондерхаар отметил, что Amazon «внимательно следит за гражданскими беспорядками в Соединённых Штатах», и её облачное подразделение внесло ряд изменений, чтобы «обеспечить безопасность местных команд и объектов, включая центры обработки данных».

В целях безопасности компания также сделала понедельник и вторник «заблокированными днями» в некоторых регионах США. Это означает, что сотрудники не смогут в эти дни вносить важные обновления или изменения в продукты без одобрения высшего руководства. Этот шаг был предпринят после того, как в воскресенье Amazon сообщила платформе социальной сети Parler, что больше не будет предоставлять ей услуги хостинга. Впрочем, ещё до этого события стали появляться угрозы взрыва ЦОД AWS.

Недавно вышедший в массы процессор AMD Ryzen Threadripper PRO 3995WX не остался без внимания производителей материнских плат. И Supermicro не исключение, однако кроме материнской платы M12SWA-TF для процессора AMD, она выпустила и готовый продукт — рабочую станцию AS-5014A-TT.

Материнская плата Supermicro M12SWA-TF — это уже 12 поколение материнских плат компании, она включает в себя новый модуль для удаленного управления ASPEED ASR2600 BMC, с расширенными функциями безопасности и поддержкой IPMI 2.0.

Плата выпускается в форм-факторе E-ATX, поддерживает установку одного процессора AMD Ryzen Threadripper PRO серии 3000WX (до 64 ядер) с тепловыделением до 280 Вт. Максимальный объем поддерживаемой памяти составляет внушительные 2 Тбайт (до 8 модулей по 256 Гбайт).

Комплект слотов расширения стандартный для подобных решений: 6 x PCIe 4.0 x16, 4 x M.2 (2280 или 22110), 2 x U.2 и всего 4 SATA3 порта (что неудивительно при набирающих популярность и стремительно дешевеющих PCIe-накопителях).

Рабочая станция Supermicro AS05014A-TT представляет выпускается в форм-факторе Tower (5U) с возможностью монтажа в стандартную серверную стойку. Вариантов охлаждения будет два: стандартное воздушное и жидкостное с большим 360-мм радиатором. Для дисковой подсистемы в корпусе имеются 4 внутренних отсека 3.5”/2.5” и два отсека на лицевой панели для двух накопителей 2.5”.

Набор портов стандартный — на передней панели два USB 3.2 (Type A), два USB 2.0 и один USB 3.2 (Type C), на задней панели еще 5 USB портов. Линейка блоков питания включат в себя модели мощностью от 1200 до 2000 Вт (без дублирования и горячей замены).

В будущем Supermicro будет расширять серию рабочих станций на базе AMD Ryzen Threadripper PRO, будем ждать новых интересных моделей.

Компания «АМДтехнологии», поставщик инженерных решений и технологий для высокотехнологичных объектов, объявила о планах по строительству ключевого дата-центра для Федеральной таможенной службы (ФТС России).

Ранее компания выиграла открытый конкурс на строительство ЦОД для ФТС России, в котором обошла «Ланит-Интеграцию» и получила контракт на проведение работ. По условиям контракта «АМДтехнологии» должна завершить развёртывание центра обработки данных за два года. Сумма контракта составила 790 млн рублей.

Сообщается, что дата-центр будет рассчитан на общую мощность IT-оборудования до 1 МВт и размещение до 110 стоек. Вычислительный комплекс будет полностью соответствовать требованиям надёжности уровня Tier III по классификации Uptime Institute и обеспечит функционирование информационных систем таможенной службы. Главный ЦОД ФТС России будет расположен в Твери на территории административно-производственного комплекса местной таможни.

«АМДтехнологии» не в первый раз принимает участие в строительстве высокотехнологичных объектов для государственных органов. Ранее компания реализовала проект и досрочно завершила строительство второй очереди ЦОД для Федеральной налоговой службы.

Вторжение архитектуры ARM в мир современных высокоплотных центров обработки и хранения данных оказалось успешным: в настоящее время AWS активно использует процессоры Graviton2, а Ampere начала поставки чипов Altra, показавших себя не хуже AMD EPYC второго поколения. Обе реализации серверных ARM-процессоров показывают в среднем лучшую в сравнении с x86-64 энергоэффективность, но как они проявят себя в прямом столкновении между собой?

Вкратце напомним: платформа Ampere Altra является открытой: процессоры имеют свой разъём LGA 4926, тогда как AWS Graviton2 хотя и базируются на той же архитектуре ARM Neoverse N1, но сторонним заказчикам не поставляются — воспользоваться можно лишь облачными инстансами, запускаемыми на системах с этими ЦП.

Ядер больше у Altra (80 против 64), но оба процессора не имеют поддержки SMT. В тактовых частотах преимущество также у Altra: 64-ядерный инстанс AWS m6g.metal имеет фиксированную частоту 2,5 ГГц, а у процессоров Altra Quicksilver Q80-33 она может достигать 3,3 ГГц. Кроме того, доступны конфигурации с двумя процессорными разъёмами, обеспечивающими суммарно 160 ядер. Тем не менее, результаты тестов представляют существенный интерес: столь серьёзные реализации архитектуры ARM столкнулись друг с другом впервые.

Полностью с обзором можно ознакомиться на сайте Phoronix, мы же рискнём выделить отдельные, на наш взгляд, наиболее интересные результаты. Так, в тесте HPCG победу одержала реализация Ampere, но при равном активном количестве ядер превосходство над Graviton2 составило лишь около 5%, и это с учётом возможности ядер Quicksilver разгоняться до 3,3 ГГц. Зато эта же возможность очень помогла процессорам Ampere одержать убедительную победу в тестах на сжатие данных.

Тест Stream показал чуть более высокий результат на платформе Graviton2, но разница столь незначительна, что её можно не принимать во внимание. А вот в Coremark 1.0, наборе тестов, созданном специально для оценки вычислительных способностей процессоров, Altra Quicksilver одерживает безоговорочную победу. Даже при равном с Graviton2 количестве активных ядер разница довольно серьёзна, а в 80-ядерном режиме Altra Q80-33 не оставляет процессору AWS ни шанса. И это же можно сказать про тесты с трассировкой лучей.

Ampere Altra Quicksilver: лучшая серверная платформа с архитектурой ARM

В остальных тестах картина схожая, либо не столь зависящая от количества активных ядер у Altra. Но Graviton2 не удалось выиграть нигде. Впрочем, это не значит, что решение AWS хуже: оба процессора базируются на дизайне ядер ARM Neoverse N1, но Graviton2 работает на существенно более низкой частоте и, по всей видимости, его проигрыш на 9/10 объясняется этой причиной. В целом же, ARM-платформа Ampere выглядит интереснее: она доступна и в виде классических серверов, а не только как облачная услуга, кроме того, в двухпроцессорной конфигурации со 160 ядрами платформа Mount Jade обеспечивает великолепную производительность.

Компания QNAP Systems анонсировала высокопроизводительное сетевое хранилище данных (NAS) корпоративного класса TS-h3088XU-RP, рассчитанное на монтаж в стойку. Новинка относится к классу All-Flash, то есть предусматривает использование твердотельных накопителей на основе флеш-памяти.

Устройство выполнено в формате 2U с габаритами 88,3 × 481,07 × 515,02 мм. Имеются отсеки для 30 накопителей типоразмера 2,5 дюйма с интерфейсом SATA 3.0: спереди расположены 24 посадочных места, сзади — ещё шесть. Допускается «горячая» замена.

В зависимости от модификации применяется шестиядерный процессор Intel Xeon W-1250 (3,3–4,7 ГГц) или восьмиядерный чип Xeon W-1270 (3,4–5,0 ГГц). В первом случае объём оперативной памяти DDR4 составляет 32 Гбайт, во втором — 64 Гбайт.

Хранилище располагает четырьмя портами 2.5 Gigabit Ethernet. Доступны три слота расширения PCIe 3.0, в один из которых изначально установлен сетевой адаптер с двумя портами 25 Gigabit Ethernet.

Предусмотрены по два порта USB 3.2 Gen2 Type-C и USB 3.2 Gen2 Type-А. Кроме того, имеется интерфейс HDMI 1.4b. В оснащение входят два блока питания мощностью 550 Вт.

Хранилище работает под управлением операционной системы QuTS hero и использует ZFS в качестве основной ФС. Более подробная информация о новинке доступна здесь.

Потребность в более скоростных интерфейсах существовала в мире ИТ всегда, но за последние годы она обострилась: третья версия PCI Express пробыла с нами почти десятилетие, и лишь сейчас, проводив 2020 год, можно сказать о сколько-нибудь заметном распространении PCI Express 4.0.

Урок усвоен и с PCIe 5.0 аналогичной истории не повторится: практически все разработчики процессоров и прочих компонентов изначально закладывают поддержку пятой версии в свои новые решения. Среди лидеров в этой области — компания PLDA, продемонстрировавшая работоспособность своих компонентов PCI Express 5.0 и CXL.

Говоря о CXL, мы неизбежно подразумеваем PCIe 5.0 — именно PCI Express пятой версии является физической основой нового протокола скоростных межсоединений Compute Express Link. CXL дополняет PCIe 5.0 рядом интересных и востребованных в мире HPC возможностей, но речь сейчас не об этом, а о том, что родственность стандартов упрощает разработку IP-блоков с их поддержкой.

Компания PLDA является активным разработчиком IP-модулей, причём, специализируется она именно на высокоскоростных интерфейсах, участвуя в разработке стандарта PCI Express c 2001 года.  Стандарты, сколь угодно совершенные в теории, мертвы без реального работоспособного «кремния», и здесь PLDA оказалась в числе лидеров, успешно продемонстрировав работу своего контроллера PCI Express 5.0 и доказав работоспособность CXL в системах на базе инженерных образцов Intel Sapphire Rapids.

Один из демонстрационных стендов CXL 2.0

Следует отметить, что контроллер PLDA XpressRICH не монолитен, за физическую часть (PHY) в демонстрационной системе отвечал блок, разработанный Broadcom. Несмотря на это, IP-модули продемонстрировали слаженную работу и целостность сигнала в различных тестовых сценариях. PLDA утверждает, что данную связку разработчики новых SoC могут использовать смело — качество работы гарантируется.

Две тестовые платы успешно устанавливали стабильную связь на скорости 32 ГТ/с, для тестирования были использованы компоненты Xilinx Vivado ILA и анализатор PCIe Viavi. Также контроллер PLDA без проблем работал в режиме совместимости с предыдущими версиями PCIe на скоростях 16, 8, 5 и 2,5 ГТ/с.

Архитектура контроллера CXL 2.0, созданного PLDA

Демонстрация CXL использовала другой набор компонентов. В этом сценарии разработка PLDA под названием XpressLINK была воплощена в ПЛИС на PCIe-платах. Новый контроллер поддерживает все основные суб-протоколы CXL, описанные в версии 2.0: CXL.io, CXL.cache и CXL.mem. Платформой здесь послужили системы, оснащённые прототипами процессоров Intel Xeon Sapphire Rapids.

Демонстрация, проведённая в рамках давнего сотрудничества PLDA и подразделения Intel Industry Enabling Labs, показала полную работоспособность новинок, а также доказала, что контроллер CXL обеспечивает самую низкую латентность в своём классе. Последнее крайне важно, поскольку CXL пророчат в качестве основы для суперкомпьютеров и кластерных систем нового поколения.

Контроллер PLDA XpressLINK может быть реализован в качестве строительного блока для SoC, как отдельный ASIC-чип, а также в виде ПЛИС. Он доступен для лицензирования, чем уже воспользовались некоторые крупные разработчики микроэлектроники.

Компания Synology, по информации ресурса NAS Compares, в скором времени анонсирует новые сетевые хранилища данных корпоративного класса. Речь идёт о моделях RS3621xs+, RS362RP1xs и RS4021xs+ на аппаратной платформе Intel, рассчитанных на монтаж в стойку.

Полностью технические характеристики решений пока не раскрываются. Известно, что модели RS3621xs+ и RS3621RPxs допускают установку 12 накопителей типоразмера 3,5 дюйма. Эти хранилища выполнены в формате 2U, а их габариты составляют 88 × 482 × 724 мм.

Что касается версии RS4021xs+, то она поддерживает использование 16 накопителей стандарта 3,5 дюйма. Эта модель соответствует формату 3U и имеет габариты 132,3 × 482 × 656,5 мм.

Ожидается, что все новинки получат процессор Xeon с количеством ядер не менее шести. Говорится о наличии 8 Гбайт оперативной памяти DDR4 (с возможностью расширения до 64 Гбайт), двух слотов расширения PCIe 3.0 x8 и двух блоков питания.

Все новинки будут наделены четырьмя сетевыми портами 1Gbe LAN. Модели XS+ дополнительно получат два порта 10Gbe. Наконец, говорится о возможности формирования массивов RAID 0, 1, 5, 6, 10. 

Как сообщает ресурс NAS Compares, на сайтах ряда онлайновых ретейлеров появилась информация о жёстких дисках семейства HAT5300, которые, судя по всему, готовит к выпуску компания Synology. Эти накопители будут ориентированы на применение в сетевых хранилищах данных (NAS) производства Synology.

В ассортименте Synology уже есть собственные твердотельные накопители. Это, к примеру, изделия серии SAT5200, выполненные в 2,5-дюймовом форм-факторе и оснащённые интерфейсом SATA 3.0. Их вместимость достигает 1,92 Тбайт.

О жёстких дисках Synology HAT5300 пока известно немного. Сообщается лишь, что к выпуску готовятся как минимум две модели — вместимостью 8 и 12 Тбайт. Они будут выполнены в формате 3,5 дюйма. Интерфейс подключения — SATA 3.0. 

Пока не совсем ясно, собирается ли Synology вывести на рынок совершенно новый продукт или же это будут жёсткие диски одной из существующих серий (скажем, от WD или Seagate), сертифицированные для использования в хранилищах Synology.

Так или иначе, но появившаяся информация говорит о том, что Synology планирует развивать направление брендированных накопителей. Возможно, в этом году будут также представлены новые твердотельные изделия. 

Компания Northern Data AG, образовавшаяся в результате слияния Northern Bitcoin и Whinstone US и специализирующаяся на поставке решений для высокопроизводительных вычислений (HPC), сообщила о расширении контракта с имеющимся заказчиком, который занимается майнингом биткоинов, на размещение ASIC общей стоимостью порядка $100 млн.

Такой объём ASIC соответствует дополнительной мощности в размере более 200 МВт, которая будет выделена ЦОД компании в Скандинавии и Канаде. Помимо выручки от дополнительного заказа, Northern Data также получит вознаграждение от клиента, основанное на результатах его деятельности. Потребность в инфраструктуре майнинга биткоинов стала быстро расти в последнее время, особенно на фоне увеличения стоимости этой криптовалют.

Вчера компания также сообщила о покупке ещё одной площадки, которая на текущий момент включает шесть дата-центров, расположенных на площади 2,5 га. Она расположена в шведском городе Буден, недалеко от полярного круга. Это практически идеальное место для ЦОД: среднегодовая темпарутара равна всего 1,6 °C, что облегчает фрикулинг и позволяет получить PUE на уровне 1,07, а по соседству находятся ГЭС мощностью 4,5 ГВт, которые дают возобновляемую и очень дешёвую электроэнергию. Northern Data планирует построить в этом месте дополнительные дата-центры.

Генеральный директор Northern Data Аруш Тиллайнатан (Aroosh Thillainathan) отметил, что майнинг биткоинов является лишь одним из многих факторов роста бизнеса компании, которая также получает выгоду от быстрорастущего потребительского спроса в других областях применения высокопроизводительных вычислений. «Буквально в начале декабря мы начали ввод в эксплуатацию GPU-кластера, который позволит нам воспользоваться растущим спросом на услуги высокопроизводительных вычислений для искусственного интеллекта, глубокого обучения, исследований и рендеринга», — сообщил Тиллайнатан.

Northern Data имеет около восьми лет опыта в области инфраструктуры для HPC. Её решения основаны на многих проприетарных технологиях, к которым относится инновационная система воздушного охлаждения собственной разработки, а также ИИ-система для управления и оптимизации работы оборудования HPC.

Традиционно серверные помещения в ЦОД используют воздушную схему охлаждения: в серверах имеются свои вентиляторы, а между стойками организуются «горячие» и «холодные» коридоры. Но мощности растут, вместе с ними растёт тепловыделение процессоров и ускорителей. Именно поэтому, в свете появления новых серверных процессоров Intel и AMD, а также ускорителей NVIDIA A100 и AMD MI100, владельцы крупных ЦОД стали активнее присматриваться к более прогрессивным методам охлаждения — жидкостным.

Теплоноситель кипит, но совершенно безопасен

Проблема не является надуманной: воздушные системы охлаждения в ЦОД с традиционной компоновкой уже работают на пределе своих возможностей, а новые поколения чипов обещают дальнейший рост тепловыделения. Так, процессоры Intel Ice Lake, которые сменят поколение Cooper Lake, будут иметь теплопакет в районе 250-300 ватт против прежних 150-250 ватт.

Третье поколение серверных процессоров AMD EPYC под кодовым названием Milan обещает прирост производительности около 15-20%, но следует ожидать и роста тепловыделения. Уже сейчас EPYC 7763 может выделять до 280 ватт. А ускоритель NVIDIA A100 легко выдаст и все 400 ватт. И именно поэтому крупные ЦОД смотрят в сторону альтернативных способов охлаждения.

Жидкостное охлаждение серверов может быть реализовано по-разному, но один из самых простых и эффективных способов — использование погружных ванн, наполненных высокомолекулярным электрически нейтральным теплоносителем. Такие жидкости, к примеру, выпускает компания 3M под марками Novec и Fluorinert. По заверениям производителя, эти жидкости не токсичны, не пожароопасны и нейтральны к любым материалам, но при этом обладают нужными для реализации высокопроизводительных СЖО тепловыми характеристиками.

Гигантский китайский концерн Alibaba уже использует погружные системы охлаждения для своих серверов, хотя и не во всех ЦОД. Google планирует ускорить работы по этой технологии, а Microsoft и Facebook пока находятся на тестовой стадии (proof of concept), но также планируют начать внедрение погружных систем охлаждения в своих ЦОД в этом году — сообщает Digitimes. Впрочем, это далеко не первые эксперименты. Та же Facebook занималась ими ещё в 2012 году.

Погружная двухфазная СЖО GIGABYTE, вид спереди

Такие системы отличаются простотой: по сути, серверы в открытом виде просто помещаются в ванну с жидкостью (не считая систем второй фазы, передающих тепло основным кондиционерам ЦОД); при этом в первичном контуре не требуется никаких водоблоков, дополнительных помп, шлангов и разветвителей, а значит, процесс обслуживания упрощается. Погружная система является самой дешёвой в реализации среди серверных СЖО, что для крупных ЦОД выливается в экономию существенных сумм. Этим и объясняется интерес крупных ИТ-компаний к такого рода системам охлаждения. 2021 год обещает стать годом «купания» серверов.