Вычислительные ресурсы

Институт использует вычислительные ресурсы бизнес-партнера  - компании «Антел-нефть». Специализированный геофизический вычислительный комплекс разработан компанией на базе покупного оборудования фирмы DELL  и носит название  СВК-128.  Основные параметры СВК-128: производительность- 12 Терафлопс, оперативная память — 4 терабайта.

 Структура специального вычислительного комплекса приведена на рисунке  1.

 

Рисунок  1  – Структура СВК-128

 

Структурно СВК-128 состоит из следующих основных функциональных блоков:

 

а) Вычислительного поля;

б) Управляющего сервера;

в) Сетевой подсистемы;

г) Система хранения данных;

д) Общесистемного программного обеспечения;

е) Автоматизированных рабочих мест.

Структура комплекса технических средств СВК-128 строится на базе индустриальных стандартов, что позволяет достичь совместимости с широким спектром  управляющего и прикладного программного обеспечения.

СВК-128 выполнен из 128 вычислительных узлов, входящих в единое вычислительное поле, объединённое высокопроизводительной сетью. В качестве  вычислительных узлов используются блэйд-сервера Dell PowerEdqe M600 корпорации Dell.

Управляющий сервер предназначен для обеспечения управления кластером в целом, его мониторинг и распределение заданий. Сервер управления выполнен на Dell PowerEdge 1950 III корпорации Dell.

Система хранения данных строится на базе индустриального  стандарта NFS и состоит из дискового массива NetApp. Объём полезного дискового пространства составляет до 100 ТБ.

Подключение дискового массива сети передачи данных осуществляется 4 портами 10Gb Ethernet.

В качестве основы системы хранения данных применена система компании Network Appliance FAS3040 GX в варианте многоходового кластера хранения данных.

Для организации взаимодействия вычислительных модулей СВК-128  в его составе используются различные сетевые (аппаратные и программные) средства, в совокупности образующую сетевую подсистему.

Сетевая подсистема состоит из 3-х физически выделенных сетей следующего назначения:

а) Вычислительная сеть (или кластерный интерконнект);

б) Управляющая сеть;

в) Сеть передачи данных.

 

Вычислительная сеть (или кластерный интерконнект) – это системная сеть на базе стандарта Infiniband, представляющая собой высокоскоростную коммуникационную среду, обеспечивающая выполнение задачи эффективности вычислений. Сеть на базе стандарта Infiniband обеспечивает скоростной обмен данными между узлами кластера при работе параллельных приложений.

Управляющая сеть строится на базе стандарта Gigabit Ethernet и предназначена для обеспечения управления, мониторинга и распределения заданий между узлами кластера. Она используется для файлового обмена, сетевой загрузки ОС узлов и управления узлами на уровне ОС.

Управляющая сеть применяется для управления электропитанием, мониторинга температурного режима и других параметров работы вычислительных узлов кластера.

Сеть передачи данных построена на базе стандарта Gigabit Ethernet, обеспечивает подключение узлов кластера к системе хранения данных. Каждый узел кластера подключается к данной сети с помощью адаптера Gigabit Ethernet.

Общесистемное программное обеспечение СВК-128 включает в себя операционную систему, систему управления пакетными заданиями и программное обеспечение поддержки обмена данными между вычислительными узлами во время счёта Cluster Interconnect. Система Rocks Clusters — это дистрибутив кластерного ПО с развитыми средствами поддержки установки ПО на кластер и эксплуатации вычислительного кластера.

СВК-128 работает под операционной системой  Linux, являющейся стандартом для высокопроизводительных вычислительных кластеров.