SPD Online filter

From JINR WIKI
Revision as of 13:54, 12 December 2023 by Dmitrytv (talk | contribs)
Jump to navigation Jump to search

SPD Online Filter is a high performance computing system for high throughput  processing

  • High speed (parallel) storage system for input data written by DAQ.
  • Compute cluster with two types of units: multi-CPU and hybrid multi CPU + Neural network accelerators (GPU, FPGA etc.) because we are going to use AI…
  • A set of dedicated servers for middleware which will manage processing workflow, monitoring and other service needs.
  • Buffer for intermediate output and for data prepared for transfer to long-term storage and future processing.

Программный комплекс

  • Высокоскоростное хранилище входных данных, записанных DAQ;
  • Буфер для промежуточных данных и данных, подготовленных к передаче в долгосрочное хранилище и будущей обработке;
  • Комплекс промежуточного программного обеспечения для автоматизации рабочего процесса. В него будет входить следующие компоненты:
    • Система управления данными (регистрация новых данных, каталогизация/структуризация, контроль целостности);
    • Система управления процессами обработки (формирование и контроль исполнения этапов обработки данных);
    • Система управления нагрузкой (реализация этапов обработки,посредством формирования и выполнения необходимого количества задач для обработки набора данных);
      • Pilot (агентское приложение, работающее на вычислительном узле и исполняющее задачи, поставляемые от системыуправления нагрузкой).
Error creating thumbnail: File with dimensions greater than 12.5 MP

back to the SPD main page