Материалы по тегу: hpcg benchmark

17.03.2018 [11:25], Алексей Степин

TOP500: бенчмарк HPCG набирает популярность, вытесняя HPL

На протяжении многих лет основным тестовым инструментом для измерения производительности суперкомпьютеров и кластерных систем был пакет High Performance Linpack (HPL), причём, таковым он считался де-факто. Продержался этот пакет в таком статусе четверть века, что в мире информационных технологий означает не одну эпоху: в 1993 году самым мощным процессором с архитектурой x86 был Intel Pentium (P5), но процветали также архитектуры MIPS (R4400), SPARC V8/V9, DEC Alpha и POWER2. Но у HPL есть одна проблема: тест хорошо подходит для «прогрева» только что смонтированной системы, и в лучшем случае предоставляет собой не самый точный индикатор того, насколько хорошо она будет выполнять научные и инженерные задачи.

1992 год: одно из воплощений процветавших тогда архитектур, процессор  DEC Alpha 21064 (EV4)

1992 год: одно из воплощений процветавших тогда архитектур, процессор DEC Alpha 21064 (EV4)

Команда разработчиков альтернативного тестового пакета HPCG (High Performance Gradients) продвигает своё детище уже довольно давно, при этом статистика производительности собирается с 2014 года, что, конечно, не идёт в сравнение со сроками HPL, но всё же популярность новинки постоянно растёт. Создатель HPCG считает, что Linpack на сегодня свою задачу выполнил и более не отвечает требованиям времени. В этом есть смысл: HPL использует богатые на вычисления алгоритмы с небольшими, «плотными» структурами данных, но современные приложения могут задействовать (и часто задействуют) огромные распределенные массивы при менее интенсивных вычислениях. Примером могут послужить задачи класса Big Data, но создатели HPCG используют и другие актуальные примеры, например, моделирование распределения давлений в потоке жидкости, где также сильна нагрузка на подсистему памяти.

Одно из многочисленных сердец комплекса K: чип SPARC64 VIIIfx. 128 гигафлопс, 45 нм

Одно из многочисленных сердец комплекса K: чип SPARC64 VIIIfx. 128 гигафлопс, 45 нм

В число типичных для сегодняшнего дня проектов входят задачи машинного обучения, финансовая аналитика, системы защиты от электронного мошенничества — и все они серьёзно зависят от производительности системы при случайном обращении к памяти. И в этом плане HPCG гораздо лучше отвечает веяниям нового времени, нежели HPL, поскольку последний тест не нагружает подсистему памяти — во всяком случае, сколько-нибудь серьёзно по нынешним меркам. Сама ситуация в сфере высокопроизводительных вычислений действительно такова, что узкими местами уже давно являются не процессоры, а подсистемы памяти и межузловой коммуникации. Количество процессоров увеличить легко, но гораздо сложнее «прокормить» их так, чтобы вычислительные ядра не простаивали попусту, и именно поэтому подсистемы памяти также нуждаются в тщательном тестировании, что может предложить HPCG. Итог любопытный и похож он более всего на ведро ледяной воды на голову энтузиастов супервычислений: результаты HPCG нередко оказываются гораздо скромнее показателей, достигнутых в HPL.

Десятка лучших систем по данным тестового комплекса HPCG. Обратите внимание на КПД

Десятка лучших систем по данным тестового комплекса HPCG. Обратите внимание на КПД

Из 181 протестированной системы мощностью от 1 петафлопса в HPCG подобного показателя не смогла показать ни одна. Это должно серьёзно охладить пыл энтузиастов, вещающих об «эре петафлопсов», вполне закономерно возвращая их в предыдущую «эру терафлопсов». В настоящее время лидером в HPCG является комплекс с простейшим названием K, запущенный в 2011 году в Институте физико-химических исследований в городе Кобе, Япония. Он показывает 602,7 терафплоса, что составляет лишь 5,3 % от теоретической пиковой производительности. По всей видимости, стать победителем этой системе помогла фирменная шестимерная система межузловых соединений под названием Tofu (Torus Fusion). Основой K являются процессоры SPARC64 VIIIfx, хотя и x86 нашлось место в десятке лидеров: второе место занимает машина NUDT, построенная на базе связки Xeon и Xeon Phi. Скромные показатели эффективности неоспоримо свидетельствуют о том, что разработчикам суперкомпьютеров следует сконцентрировать свои усилия на улучшении характеристик подсистем памяти, хранения данных, а также межузловых соединений. Процессорных же мощностей в 2018 году более чем достаточно.

Постоянный URL: http://servernews.ru/967110
21.06.2017 [10:00], Сергей Карасёв

Опубликована седьмая редакция рейтинга суперкомпьютеров HPCG

Представлена седьмая редакция нового мирового рейтинга HPCG, созданного для более точной оценки реальной производительности самых мощных в мире суперкомпьютеров.

О бенчмарке HPCG мы уже подробно рассказывали. Коротко напомним предысторию его появления. Созданный в 1993 году мировой рейтинг производительности самых мощных суперкомпьютеров Top500 был основан на разработанном в то же время тесте LINPACK (High Performance LINPACK, HPL). Однако в последние годы этот рейтинг и тест HPL стали подвергаться всё большей критике. Эксперты говорят, что тест LINPACK не соответствует профилю реальной загрузки вычислительных систем.

В 2013 году составителями рейтинга Top500 был предложен новый тест для ранжирования суперкомпьютеров — High Performance Conjugate Gradient (HPCG), который, как предполагается, позволяет точнее оценить производительность вычислительных систем на более широком спектре реальных приложений. Первый список HPCG был представлен в июне 2014 года — он содержал 15 позиций. С тех пор рейтинг публикуется дважды в год. Нынешняя редакция включает уже 111 позиций.

Первую строку в списке занимает система K computer — японский суперкомпьютер производства компании Fujitsu, запущенный в 2011 году в Институте физико-химических исследований в городе Кобе. В рейтинге Top500 этот комплекс находится на восьмом месте.

На второй строке списка HPCG располагается китайская система Tianhe-2 (MilkyWay-2) — такой же результат она демонстрирует в рейтинге Top500. «Бронза» по версии HPCG досталась нынешнему лидеру Top500 — суперкомпьютеру Sunway TaihuLight. С полным списком HPCG можно ознакомиться здесь

Постоянный URL: http://servernews.ru/954279
08.05.2017 [20:30], Алексей Степин

В студенческом состязании кластеров ISC 2017 примут участие 12 команд

Стало известно, какие команды примут участие в студенческом состязании кластеров ISC 2017. Напомним, что по итогам соревнований ASC17, о которых мы рассказывали нашим читателям не столь давно, право участия в ISC 2017 без предварительного отбора получили команды-победители — их список приведён в соответствующей заметке. Всего в ISC 2017 будут участвовать 12 команд от различных университетов. Их окончательный список таков:

К сожалению, ни одна из российских команд в список ISC 2017 не попала, хотя в числе награждённых участников ASC17 присутствуют команды Уральского федерального университета и СпбГУ. 

Соревнования ISC 2017 должны начаться 19-го и завершиться 21 июня. Они пройдут в рамках 32 ежегодной конференции ISC High Performance, проводимой в городе Франкфурт (Германия). Основным ограничением станет энергобюджет: создаваемый под выполнение задачи кластер не должен потреблять более 3 киловатт от одного подключения к электросети, и это будет тщательно отслеживаться специальными средствами контроля в распределительном энергоузле. Каждая команда получит доступ к двум подключениям, одно из которых будет питать основной кластер, а другое — любое дополнительное оборудование, которое может понадобиться команде. Ограничения на формат собираемого кластера нет: он может быть оформлен как в стоечном формате, так и в обычных настольных корпусах, на полу или в любом подходящем для команды варианте. Допустимо использование нестандартных средств охлаждения при условии соблюдения мер безопасности. Других ограничений правила соревнований не предусматривают.

Логотипы всех 12 команд-участников состязаний

Логотипы всех 12 команд-участников состязаний

Задания, содержащие вводные данные и все необходимые файлы, будут раздаваться командам в начале каждого дня соревнований на подходящих для этого носителях: если у какой-то команды не предусмотрено в системе наличия привода DVD, то она получит данные на USB-носителе. Всё оборудование, участвующее в тестировании, должно быть включено всё время, не допускаются перезагрузки и использование гибернации или других подобных технологий энергосбережения. Изменение настроек BIOS и EFI также разрешено лишь до начала состязаний. После запуска тестовых программ физический доступ к оборудованию запрещён, при необходимости разрешение может быть получено у официального наблюдателя, исключением являются случаи нарушения электробезопасности. Набирать очки команды будут в следующих дисциплинах:

Награждение предусматривает наличие пяти наград за наивысший показатель в тесте LINPACK, один приз зрительских симпатий, а первое, второе и третье места распределятся согласно следующим правилам: 10 % очков за производительность в HPC Challenge, 80 % за успешное выполнение тестовых приложений и 10 % за интервью, даваемое командой представителям жюри.

ISC 2016: команда Университета Циньхуа со своим кластером за работой

ISC 2016: команда университета Циньхуа со своим кластером за работой

Цель мероприятия ISC 2017 та же, которая преследовалась и организаторами  ASC17  — поиск и поддержка новых талантов в сфере науки, технологии, инженерии и математики (STEM); в данном случае речь идёт о будущих специалистах в области высокопроизводительных вычислений и кластерных вычислительных систем, которые сегодня играют огромную роль во всех отраслях научно-технического прогресса. Участие в состязаниях даст студентам множество полезных уроков, как организационного, так и технического плана — в частности, они научатся искусству проектирования вычислительных платформ и решения задач при наличии ряда ограничений.

Постоянный URL: http://servernews.ru/951879
15.11.2016 [13:19], Владимир Мироненко

В ноябрьском рейтинге HPCG лидирует суперкомпьютер K Computer

Опубликован ноябрьский рейтинг High Performance Conjugate Gradients (HPCG) Benchmark. Проект HPCG представляет собой попытку создать новую метрику для ранжирования систем высокопроизводительных вычислений. Он задуман в качестве дополнения к бенчмарку High Performance LINPACK (HPL), используемому в настоящее время для составления рейтинга суперкомпьютеров TOP500.

Первые результаты HPCG были опубликованы на конференции International Supercomputing Conference (ISC) 2014, включая оптимизированные результаты для систем, построенных на технологиях Fujitsu, Intel, NVIDIA. Список объявлялся на мероприятиях SC14, IS'14, SC15 и ISC16, количество позиций в нём постоянно росло — с 15 до 25, 40, 64 и 82 соответственно. Нынешний рейтинг включает 101 позицию.

Подробные результаты ноябрьского рейтинга HPCG будут обнародованы 16 ноября на конференции SC16, проходящей сейчас в Солт-Лейк-Сити. После этого будет опубликован детальный анализ рейтинга.

Первое место в рейтинге HPCG занял K Computer (Институт физико-химических исследований, Кобе), находящийся в рейтинге  TOP500 на 7 месте. А лидер Топ 500 Sunway TaihuLight, разработанный центром NRCPC (National Research Center of Parallel Computer Engineering & Technology), находится в перечне HPCG лишь на четвёртом месте.

Как и в предыдущий раз, в рейтинг HPCG вошло семь российских суперкомпьютеров производства компаний РСК и «Т-Платформы». Однако их позиции в рейтинге заметно ухудшились.

Занимавший в прошлом году 29 место «Ломоносов-2», построенный компанией «Т-Платформы» для МГУ им. М.В. Ломоносова, переместился на 43 место.

Находившийся на 39 месте «Политехник РСК Торнадо» (Санкт-Петербургский политехнический университет имени Петра Великого) на основе кластерной архитектуры «РСК Торнадо» с результатом 10,8 Тфлопс сейчас находится на 60-й позиции.

МВС-10П (Межведомственный суперкомпьютерный центр Российской Академии Наук) на основе кластерной архитектуры «РСК Торнадо» с результатом 4,9 Тфлопс опустился с 47 места на 76-е.

«РСК Торнадо ЮУрГУ» (Южно-Уральский государственный университет) на основе кластерной архитектуры «РСК Торнадо» с результатом 3,6 Тфлопс — переместился с 54 на 80 место.

«Политехник RSC PetaStream» (Санкт-Петербургский политехнический университет имени Петра Великого) на основе массивно-параллельной архитектуры RSC PetaStream с результатом 3,1  Тфлопс — сменил 57 место на 86, суперкомпьютер «Ломоносов» (МГУ им. М.В. Ломоносова) с результатом 1,7 Тфлопс — переместился с 61 на 91 место и МВС-10П МП (Межведомственный суперкомпьютерный центр Российской академии наук) на основе массивно-параллельной архитектуры RSC PetaStream с результатом 1,2 Тфлопс — с 63 на 94 позицию.

Постоянный URL: http://servernews.ru/942719
Система Orphus