Платформа DIRAC ОИЯИ троекратно ускоряет выполнение научных задач

С 2016 года в Объединенном институте создан и развивается сервис для единого доступа к гетерогенным распределенным вычислительным ресурсам на основе открытой платформы DIRAC Interware, куда входят все основные вычислительные ресурсы ОИЯИ.

Созданная платформа уже позволила ускорить обработку крупных пакетов задач примерно в три раза. Скорость вычислений обеспечивает в том числе интеграция облачных инфраструктур научных организаций стран-участниц ОИЯИ, кластера Национального автономного университета в Мексике и ресурсов Национальной исследовательской компьютерной сети России – НИКС, которая обеспечивает доступ к инфраструктуре сети более 200 организациям высшего образования и науки.

На данный момент сервис на базе DIRAC используется для решения задач коллабораций всех трех экспериментов на ускорительном комплексе мегасайенс проекта NICA: MPD, BM@N и SPD, а также нейтринного телескопа Baikal-GVD.

По состоянию на январь 2023 года, благодаря интеграции ресурсов с помощью DIRAC, на мощностях распределенной платформы было выполнено 1,9 миллионов задач. Количество проведенных вычислений оценивается в 13 миллионов HEPSPEC2006-дней, что является эквивалентом 1900 лет расчетов на одном ядре современного центрального процессора.

Сам ОИЯИ обладает большим количеством разных вычислительных ресурсов: кластеры Tier1/Tier2, суперкомпьютер «Говорун», облако, NICA кластер. Ресурсы каждого из них можно использовать для достижения целей компьютинга экспериментов на коллайдере NICA. Основной трудностью в данном случае является то, что эти ресурсы - разные с точки зрения архитектуры, процедур доступа и авторизации, способов использования. Для того, чтобы обеспечить их эффективное использование, необходимо было, с одной стороны, интегрировать ресурсы в единую систему, а с другой стороны, не помешать их текущей эксплуатации и выполнению других задач.

Отдельного упоминания заслуживает интеграция облачных инфраструктур стран-участниц ОИЯИ. Для ее реализации потребовалось разработать специальный программный модуль, который позволил интегрировать в систему DIRAC облачные ресурсы, работающие на базе программного обеспечения OpenNebula.

«Фактически, интеграция позволила объединить все большие вычислительные ресурсы ОИЯИ между собой. Если бы объединения не было, пользователям, скорее всего, пришлось бы выбрать один из ресурсов и настраивать все рабочие процессы на работу с ним. Использование объединенной инфраструктуры позволяет не привязываться к конкретному ресурсу, а использовать все те ресурсы, которые свободны. Для больших пакетов задач это ускоряет выполнение примерно в три раза», — рассказал Игорь Пелеванюк, научный сотрудник сектора распределенных систем ЛИТ.

 
Читайте также
Изображение носит ознакомительный характер
05.02.2025 | 18:18    494
Программа была разработана по заказу дубненской строительной компании «Кентавр». Цель курса – наладить общение слушателей для решения задач в профессиональной сфере. Этот уникальный образовательный проект нацелен на изучение языков и культуры Узбекистана...
07.02.2025 | 12:43    128
В рамках реализации офсетного контракта с правительством Московской области, фармацевтическая компания «ПСК Фарма», производство которой работает в особой экономической зоне «Дубна», в 2024 году осуществила поставку более 53 тысяч упаковок лекарственных...
06.02.2025 | 13:53    171
Определены финалисты и победители VII Всероссийского конкурса лучших практик в сфере национальных отношений. В ходе его проведения экспертная комиссия рассмотрела 573 заявки из 68 регионов Российской Федерации. Победителями VII Всероссийского конкурса...