В УГАТУ запущен самый мощный в России суперкомпьютер IBM
Уфимский государственный авиационный технический университет (УГАТУ), IBM, "АйТи" и корпорация Intel объявили о запуске самого мощного суперкомпьютера в России, построенного на основе blade-серверов IBM. Суперкомпьютер будет использоваться в инновационной программе обучения "Компьютерное моделирование с применением суперкомпьютерных технологий", а также в преподавании других дисциплин, связанных с информационными технологиями, параллельным программированием и компьютерным моделированием.
Средства на создание суперкомпьютера, необходимой инфраструктуры и приспособление помещения — порядка 130 млн российских рублей — УГАТУ получил из федерального бюджета как один из победителей Всероссийского конкурса инновационных образовательных программ в рамках национального проекта "Образование" в 2007 году. Основным исполнителем проекта стала компания АйТи с предложением на базе технологий IBM, победившая в конкурсе в августе 2007 года. В создании суперкомпьютера принимала участие команда специалистов УГАТУ, IBM, Cisco и Rittal. Консультационную поддержку специалистам АйТи также оказали эксперты компаний Intel и "Т-Платформы".
Основу суперкомпьютера УГАТУ составляют 266 blade-серверов IBM на базе 532 четырехъядерных процессоров Intel Xeon серии 5345. Расчетная пиковая производительность суперкомпьютера составляет 20 Тфлопс (триллионов операций с плавающей запятой в секунду). Запущенный суперкомпьютер является на сегодня самым производительным вычислительным кластером IBM на территории России и СНГ. Четыре из семи российских суперкомпьютеров, представленных в последнем мировом списке Top500 высокопроизводительных систем, построены на основе технологий IBM. IBM доминирует в списке Top500 с 232 системами.
Уникальными особенностями суперкомпьютера УГАТУ являются его компактность (всего 6 монтажных шкафов, в которых размещены шасси с блейд-серверами, управляющие узлы кластера и сеть хранения данных), меньший по сравнению с аналогами вес всей системы, низкое энергопотребление (потребляемая мощность оборудования кластера — порядка 85 кВт), а главное, впечатляющая для России на сегодняшний день производительность. Небольшие размеры суперкомпьютера позволили установить его рядом с дисплейными классами, из которых студенты получат доступ к вычислительным ресурсам системы.
Суперкомпьютер УГАТУ имеет классическую для подобных систем массивно-параллельную архитектуру, но на стадии проработки технических решений было решено использовать самые современные технологии. Применение blade-серверов IBM позволило снизить потребляемую мощность, уменьшить занимаемую площадь и упростить управление серверами. Объединение blade-серверов в единую систему выполнено с помощью высокоскоростной технологии Infiniband на базе 288-портового коммутатора Cisco с неблокируемой коммутационной матрицей, что гарантирует минимальные задержки в межпроцессорном взаимодействии. Для отвода тепла от оборудования в закрытом пространстве серверных стоек используется модульная система воздушно-водяных теплообменников Rittal LCP.
При создании вычислительного кластера особое внимание уделялось как надежности оборудования, что обусловило выбор серверов IBM, так и отказоустойчивости системы в целом. Это потребовало применения ИТ-решений, чаще использующихся в корпоративном секторе, чем в образовании. Так, например, управляющие узлы кластера, сеть хранения данных, все узлы системы охлаждения и система электропитания полностью резервированы, т.е. имеют дублирующие элементы. Модульное строение вычислительной системы позволяет использовать внутреннее резервирование и горячую замену компонентов в процессе работы.
Для обеспечения безотказной работы кластера контролируются параметры окружающей среды (температура и влажность воздуха в серверных шкафах и на теплообменниках), утечки жидкости из системы охлаждения, открытие и закрытие дверок серверных шкафов, задымление внутри шкафов. О критических изменениях всех параметров администраторы вычислительной системы моментально получают уведомление по электронной почте и в виде SMS на свой сотовый телефон от системы мониторинга Rittal CMC-TC. Универсальность, гибкость и возможности развития массивно-параллельных систем в значительной степени зависят от операционной системы для узлов кластера, программного обеспечения управления компонентами кластера, диспетчеризации и управления заданиями, быстрого и надежного доступа к данным.
В суперкомпьютере УГАТУ использованы операционные системы Red Hat Enterprise Linux 4 AS/WS и специализированное ПО управления кластерными системами IBM Cluster Systems Management, IBM Tivoli Workload Scheduler, General Parallel File System (GPFS), а также ПО для обеспечения информационной безопасности Tivoli Access Manager for Enterprise Single Sign-On (TAM SSO) с дополнительными модулями Provisioning Adapter, Desktop Password Reset Adapter и Authentication Adapter. Серверное оборудование и кластерное программное обеспечение IBM обладает идеальной совместимостью, это позволило с помощью ПО IBM Director организовать централизованное управление всеми элементами суперкомпьютера. Программное обеспечение IBM УГАТУ получил бесплатно как участник программы по поддержке образовательных учреждений IBM Academic Initiative.
Средства на создание суперкомпьютера, необходимой инфраструктуры и приспособление помещения — порядка 130 млн российских рублей — УГАТУ получил из федерального бюджета как один из победителей Всероссийского конкурса инновационных образовательных программ в рамках национального проекта "Образование" в 2007 году. Основным исполнителем проекта стала компания АйТи с предложением на базе технологий IBM, победившая в конкурсе в августе 2007 года. В создании суперкомпьютера принимала участие команда специалистов УГАТУ, IBM, Cisco и Rittal. Консультационную поддержку специалистам АйТи также оказали эксперты компаний Intel и "Т-Платформы".
Основу суперкомпьютера УГАТУ составляют 266 blade-серверов IBM на базе 532 четырехъядерных процессоров Intel Xeon серии 5345. Расчетная пиковая производительность суперкомпьютера составляет 20 Тфлопс (триллионов операций с плавающей запятой в секунду). Запущенный суперкомпьютер является на сегодня самым производительным вычислительным кластером IBM на территории России и СНГ. Четыре из семи российских суперкомпьютеров, представленных в последнем мировом списке Top500 высокопроизводительных систем, построены на основе технологий IBM. IBM доминирует в списке Top500 с 232 системами.
Уникальными особенностями суперкомпьютера УГАТУ являются его компактность (всего 6 монтажных шкафов, в которых размещены шасси с блейд-серверами, управляющие узлы кластера и сеть хранения данных), меньший по сравнению с аналогами вес всей системы, низкое энергопотребление (потребляемая мощность оборудования кластера — порядка 85 кВт), а главное, впечатляющая для России на сегодняшний день производительность. Небольшие размеры суперкомпьютера позволили установить его рядом с дисплейными классами, из которых студенты получат доступ к вычислительным ресурсам системы.
Суперкомпьютер УГАТУ имеет классическую для подобных систем массивно-параллельную архитектуру, но на стадии проработки технических решений было решено использовать самые современные технологии. Применение blade-серверов IBM позволило снизить потребляемую мощность, уменьшить занимаемую площадь и упростить управление серверами. Объединение blade-серверов в единую систему выполнено с помощью высокоскоростной технологии Infiniband на базе 288-портового коммутатора Cisco с неблокируемой коммутационной матрицей, что гарантирует минимальные задержки в межпроцессорном взаимодействии. Для отвода тепла от оборудования в закрытом пространстве серверных стоек используется модульная система воздушно-водяных теплообменников Rittal LCP.
При создании вычислительного кластера особое внимание уделялось как надежности оборудования, что обусловило выбор серверов IBM, так и отказоустойчивости системы в целом. Это потребовало применения ИТ-решений, чаще использующихся в корпоративном секторе, чем в образовании. Так, например, управляющие узлы кластера, сеть хранения данных, все узлы системы охлаждения и система электропитания полностью резервированы, т.е. имеют дублирующие элементы. Модульное строение вычислительной системы позволяет использовать внутреннее резервирование и горячую замену компонентов в процессе работы.
Для обеспечения безотказной работы кластера контролируются параметры окружающей среды (температура и влажность воздуха в серверных шкафах и на теплообменниках), утечки жидкости из системы охлаждения, открытие и закрытие дверок серверных шкафов, задымление внутри шкафов. О критических изменениях всех параметров администраторы вычислительной системы моментально получают уведомление по электронной почте и в виде SMS на свой сотовый телефон от системы мониторинга Rittal CMC-TC. Универсальность, гибкость и возможности развития массивно-параллельных систем в значительной степени зависят от операционной системы для узлов кластера, программного обеспечения управления компонентами кластера, диспетчеризации и управления заданиями, быстрого и надежного доступа к данным.
В суперкомпьютере УГАТУ использованы операционные системы Red Hat Enterprise Linux 4 AS/WS и специализированное ПО управления кластерными системами IBM Cluster Systems Management, IBM Tivoli Workload Scheduler, General Parallel File System (GPFS), а также ПО для обеспечения информационной безопасности Tivoli Access Manager for Enterprise Single Sign-On (TAM SSO) с дополнительными модулями Provisioning Adapter, Desktop Password Reset Adapter и Authentication Adapter. Серверное оборудование и кластерное программное обеспечение IBM обладает идеальной совместимостью, это позволило с помощью ПО IBM Director организовать централизованное управление всеми элементами суперкомпьютера. Программное обеспечение IBM УГАТУ получил бесплатно как участник программы по поддержке образовательных учреждений IBM Academic Initiative.
