Иерархическая модель потока данных с автоматическим управлением файлами для инженерных и научных приложений
Скачать insert_drive_file Ссылка language
Авторы:
Назаренко А. М., Прохоров А. А.
Издание:
Национальный Суперкомпьютерный Форум 2015
Абстракт:
Решение актуальных научных и инженерных задач обычно предполагает использование целого набора специфического программного обеспечения, собранного в сложную вычислительную схему. Распространненый подход для достижения необходимого уровня автоматизации — использование одной из множества доступных научных и инженерных систем управления потоками работ, которые основанны на различных моделях потока работ. В докладе рассматривается модель потока работ на основе модели потока данных разработанная для обеспечения естественной автоматизации и распределенного выполнения сложных итеративных вычислительных процессов. Отдельное внимание уделено вопросу обмена файлами между различными программными пакетами в вычислительной цепочке. Предложенная модель потока работ предназначена для широкого круга прикладных задач, с акцентом на сложные сценарии, когда одна итерация внешнего процесса может содержать несколько вложенных циклов выполнения. Кроме того, учтены и типичные требования к автоматизации вычислительных процессов: изоляция выполнения, повторное использование данных и кэширование, параллельное выполнение, отслеживание происхождения данных.
