Untitled

Описание

Блок предназначен для создания ветвления в процессе оркестратора. Данный блок должен располагаться внутри блока:

Создать процесс (Dag)

Требуется указать название/id ветвления, которое должно быть уникальным для данного процесса. Требуется указать наименование функции в результате выполнения которой будет определена ветвь, которая будет выполнятся в текущем процессе.


Пример использования

В данном примере создается процесс для оркестратора с аргументом по умолчанию trigger_rule:

Процесс включает в себя:

  1. Ветвление - test_branch;
  2. Робот-триггер my_process_trigger, который запускает процесс my_process;
  3. Робот-триггер puzzle_trigger_web, который запускает процесс web_search;
  4. Робота Robot_1;
  5. Функцию do_something (для определения выполняемой ветви).

Запускаемые Роботами-триггерами процессы должны существовать в оркестраторе. Запускаемый Robot_1 алгоритм должен располагаться на сервере оркестратора в папке /home/user/airflow/scripts/. Путь к Роботу локальный - временное расположение робота (во время выполнения алгоритма). ****Внутри функции do_something извлекается значение глобальной переменной my_variable. Создание глобальной переменной

Если переменная соответствует указанному значению, то выполняться будет ветвь my_process_trigger, иначе puzzle_trigger_web. Порядок выполнения роботов задан выражением**: test_branch >> [my_process_trigger, puzzle_trigger_web] >> Robot_1() -** в квадратных скобка располагаются роботы, которые образуют ветви, будет выполнена одна из указанных ветвей.

****Требуется сохранить процесс с уникальным наименованием, в виде python-скрипта (puzzle_trigger.py) и отправить на сервер оркестратора в папку с процессами (dags).

Untitled