Подготовку кадров и инструментария для обработки и хранения данных NICA обсудили в МИФИ
12 декабря в Национальном исследовательском ядерном университете МИФИ прошло рабочее совещание МИФИ–ОИЯИ по компьютингу для мегасайенс-проекта NICA, посвященное организации процесса обработки и анализа данных экспериментов. Особое внимание было уделено вопросу создания систем для географически распределенной обработки и хранения данных. В повестку мероприятия вошла подготовка кадров для решения задач мегапроекта NICA.
С приветственным словом к участникам обратилась проректор НИЯУ МИФИ Наталья Барбашина, особо подчеркнув важность сотрудничества между МИФИ и ОИЯИ. Доцент НИЯУ МИФИ Аркадий Тараненко в своем докладе рассказал об активном участии сотрудников, аспирантов и студентов МИФИ в экспериментах на NICA. Директор Лаборатории информационных технологий ОИЯИ Сергей Шматов представил информацию о создаваемых на основе ресурсов Многофункционального информационно-вычислительного комплекса ЛИТ ОИЯИ IT-решений для мегапроекта NICA. Главной его темой стала организация обработки, анализа, хранения, передачи и управления данными, которые будут получены в ходе реализации программы физических исследований экспериментов.
Существуют три аспекта этого вопроса: где физически хранить эти данные и как обеспечить их безопасность? Как будет организован доступ к данным, и какими программными средствами будет вестись обработка? Наконец, разработка инструментария, который будет использован для извлечения физической информации (программы реконструкции и идентификации элементарных частиц, физического анализа и т.д.).
Лейтмотивом мероприятия проходил вопрос распределенной обработки и анализа данных. «Объем данных настолько большой, что, по аналогии с экспериментами на Большом адронном коллайдере, хранить их в пределах одного локального компьютерного центра, а также организовать вычисления и хранение этих данных, обработку и анализ просто физически невозможно», – прокомментировал Сергей Шматов. По его словам, Лаборатория информационных технологий сможет покрыть 25 % потребности экспериментов. Остальное придется на долю партнерских организаций – они будут создавать и поддерживать у себя вычислительные комплексы, которые будут объединены в глобальную систему обработки и анализа данных.
В докладе научного руководителя ЛИТ Владимира Коренькова об истории создания, развитии и современном состоянии распределенных вычислений в физике высоких энергий было отмечено, что опыт, накопленный в ЛИТ в этой области, обязательно будет востребован при создании компьютинга для экспериментов на NICA. Олег Рогачевский, Константин Герценбергер и Алексей Жемчугов представили обзор программных систем и комплексов для моделирования, получения и обработки данных экспериментов на комплексе NICA, а также представили задачи, в решении которых могли бы принять участие сотрудники, аспиранты и студенты МИФИ.
Большой интерес вызвал доклад научного сотрудника ЛИТ Игоря Пелеванюка, посвященный обработке и генерации данных в гетерогенной распределенной вычислительной среде под управлением платформы DIRAC, объединяющий вычислительные ресурсы и ресурсы хранения данных ЛИТ, ЛФВЭ, МИФИ и ряда других институтов, входящих в коллаборации NICA. В настоящий момент все три эксперимента на NICA используют DIRAC для решения своих задач.
Кроме того, важной частью дискуссии стали вопросы подготовки высококвалифицированных специалистов для экспериментов на мегапроекте NICA, организации такой системы подготовки кадров, которая будет работать в уникальной области на стыке физики и IT. Профильные кафедры НИЯУ МИФИ предлагают магистерскую программу, которая позволит готовить специалистов одновременно по двум специальностям: физике элементарных частиц и информационным технологиям. Научный сотрудник ЛИТ Оксана Стрельцова ознакомила участников совещания с опытом подготовки специалистов в области параллельного программирования, создания алгоритмов машинного и глубокого обучения, а также разработки IT-сервисов с использованием экосистемы ML/DL/HPC платформы HybriLIT. В докладе доцента МИФИ Евгения Солдатова была представлена новая магистерская образовательная программа НИЯУ МИФИ «Программная инженерия и анализ данных для физики высоких энергий».
По итогам совещания состоялась общая дискуссия, в результате которой было решено создать постоянный Совет МИФИ-ОИЯИ для консолидации усилий обеих организаций по решению проблем, стоящих перед участниками коллабораций экспериментов на комплексе NICA, в том числе для решения вопросов подготовки кадров.
Фото: пресс-служба МИФИ