МСЦ РАН завершил модернизацию вычислительных ресурсов

2017

Завершена модернизация СК

26 апреля 2017 года компания «РСК технологии» сообщила о завершении проекте модернизации вычислительных ресурсов Межведомственного суперкомпьютерного центра Россиийской академии наук (МСЦ РАН).

Мероприятие с участием МСЦ РАН, (2017)

В МСЦ РАН установлены универсальные вычислительные шкафы «РСК Торнадо» высокой энергетической плотности и системы прецизионного жидкостного охлаждения. В соответствии с условиями размещения оборудования для МСЦ РАН выбран оптимальный режим работы вычислительного шкафа при постоянной температуре хладагента +45 °С на входе в вычислительные узлы (с пиковым значением до +57 °С). Работа в режиме «горячая вода» в этом проекте позволила применить круглогодичный режим free cooling (24x7x365), используя только сухие градирни, работающие при температуре окружающего воздуха до +50 °С, а также избавиться от фреонового контура и чиллеров. В результате среднегодовой показатель PUE системы, отражающий уровень эффективности использования электроэнергии, составляет менее 1,06 - на охлаждение расходуется менее 6% потребляемого электричества^[1].

В основе вычислительных узлов мощные 72-ядерные серверные процессоры Intel Xeon Phi 7290, 16-ядерные серверные процессоры Intel Xeon E5-2697А v4, серверные платы семейств Intel Server Board S7200AP и Intel Server Board S2600KP, твердотельные накопители семейства Intel SSD DC S3500 с подключением по шине SATA в форм-факторе M.2.

Для высокоскоростной передачи данных между вычислительными узлами в составе суперкомпьютерного комплекса МСЦ РАН использована технология высокоскоростной коммутации Intel Omni-Path, обеспечивающая скорость неблокируемой коммутации до 100 Гбит/c, на основе 48-портовых коммутаторов Intel Omni-Path Edge Switch 100 Series. Это позволит специалистам МСЦ РАН удовлетворить потребности ресурсоемких приложений пользователей, обеспечить необходимый запас пропускной способности сети в перспективе.

Технология Intel Omni-Path Architecture (Intel OPA) представляет собой комплексное решение для высокоскоростной коммутации и передачи данных, призванное помочь с минимальными затратами повысить производительность работы приложений в HPC-кластерах начального уровня и масштабных суперкомпьютерных проектах. 48-портовый коммутатор Intel OPA позволяет при одинаковом бюджете подключать на 26% больше серверов по сравнению с конкурирующими решениями, а также снизить энергопотребление до 60%, обеспечивая, таким образом, более энергоэффективную коммутирующую и системную инфраструктуру.Метавселенная ВДНХ 3.4 т

Доступность, отказоустойчивость и простота использования вычислительных систем, созданных на основе технологий РСК для высокопроизводительных вычислений обеспечиваются посредством системы управления и мониторинга на платформе ПО «РСК БазИС». Она позволяет управлять отдельными узлами и всем комплексом, включая инфраструктурные компоненты.

Все элементы комплекса (вычислительные узлы, блоки питания, модули гидрорегулирования и др.) имеют встроенный модуль управления, что обеспечивает широкие возможности для детальной телеметрии и гибкого управления. Конструктив шкафа позволяет заменять вычислительные узлы, блоки питания и гидрорегулирования (при условии применения резервирования) в режиме горячей замены без прерывания работоспособности комплекса. Большинство компонентов системы (таких, как вычислительные узлы, блоки питания, сетевые и инфраструктурные компоненты и т.д.) представляет из себя программно-определяемые компоненты, позволяющие упростить и ускорить установку и обслуживание, последующую модернизацию системы. Жидкостное охлаждение всех компонентов обеспечивает длительный срок службы.

Апгрейд СК

31 января 2017 стало известно о предстоящем проекте апгрейда мощности главного вычислителя в МСЦ РАН.

Наращивание вычислительной мощности проводится в рамках выполнения контракта по результатам тендера от декабря 2016 года на поставку соответствующего оборудования. Работы в проекте выполняет компания «РСК технологии». Договор заключен без снижения стартовой цены — 114,48 млн руб.

МВС-10П МП – Расширение комплекса МСЦ РАН на основе массивно-параллельного решения RSC PetaStream, (2015)

До 31 марта 2017 года РСК предстоит поставить в МСЦ не менее 88 вычислительных узлов суммарной пиковой производительности не менее 102 Тфлопс^[2].

Одновременно в декабре 2016 года «РСК технологии» стала единственным участником аукциона на ведение капитального ремонта МВС-10П. В рамках контракта, полученного по итогам тендера на 30 млн руб., компании предстоит до 31 марта 2017 года заменить 27 вычислительных узлов, ненадлежащая работа которых (как следует из техзадания), негативно влияет на фактическую производительность действующей (не модернизированной) системы.

2015: Расширение СК

15 апреля 2015 года стало известно о проекте расширения суперкомпьютерного комплекса в МСЦ РАН решением МВС-10П МП от РСК^[3].

Здание МСЦ РАН, 2014

Итог проекта

Группа компаний РСК, ведущая разработку и интеграцию решений для центров обработки данных (ЦОД), сообщила об установке мощной вычислительной системы МВС-10П МП в Межведомственном суперкомпьютерном центре Российской академии наук (МСЦ РАН).

МВС-10П МП - суперкомпьютер с пиковой производительностью 77,33 терафлопс занял 20 место в новой редакции рейтинга Top50 самых мощных вычислительных систем в России и СНГ. Система МВС-10П МП стала расширением суперкомпьютерного комплекса (основа которого суперкомпьютер МВС-10П на платформе кластерной архитектуры «РСК Торнадо»), созданного РСК в 2012 (занимает 4 место в рейтинге). После завершения проекта установки и запуска, суммарная производительность суперкомпьютеров РСК с жидкостным охлаждением, установленных в МСЦ РАН - более 600 терафлопс.

Суперкомпьютер МВС-10П МП, 2014

Архитектура RSC PetaStream, на основе которой создан МВС-10П МП, полностью российская разработка. Особенность RSC PetaStream - реализация концепции массивной параллельности, обеспечивающей выполнение до 250 тысяч параллельных исполняемых потоков на 1024 вычислительных узлах архитектуры x86 в одном вычислительном шкафу на площади 1 м². RSC PetaStream принадлежат мировые рекорды по вычислительной – 1,2 петафлопс на шкаф – и энергетической – более 400 кВт на шкаф – плотности, по производительности на занимаемый объем – более 560 терафлопс/м³ и компактности.

Серверные продукты Intel, используемые при создании МВС-10П МП: 61-ядерные сопроцессоры Intel Xeon Phi 7120D, процессоры семейства Intel Xeon E5-2600, серверные платы Intel S1600JP, твердотельные накопители Intel SSD DC S3500 для корпоративных ЦОД. Общий объем памяти (GDDR5) на узлах - 1 ТБ, межузловое соединение - 56 Гбит/c.

Примечания