AirFlow

Что такое AirFlow

Airflow — это инструмент, который позволяет разрабатывать, планировать и осуществлять мониторинг сложных рабочих процессов. Главной особенностью является то, что для описания процессов используется язык программирования Python. Apache Airflow используется как планировщик ETL/ELT-процессов.

Основные сущности рабочего процесса на Airflow:

  • Направленные ациклические графы (DAG)
  • Планировщик (Scheduler)
  • Операторы (Operators)
  • Задачи (Tasks)

DAG узнать на курсах по Apache AirFlow в Школе Больших Данных г. Москва

Related Entries