TFX İşlem Hatlarının Düzenlenmesi

Apache Hava Akışı

Apache Airflow, iş akışlarını programlı olarak yazmak, planlamak ve izlemek için kullanılan bir platformdur. TFX, iş akışlarını görevlerin yönlendirilmiş döngüsel grafikleri (DAG'ler) olarak yazmak için Airflow'u kullanır. Airflow zamanlayıcı, belirtilen bağımlılıkları takip ederken bir dizi çalışan üzerinde görevleri yürütür. Zengin komut satırı yardımcı programları, DAG'lerde karmaşık ameliyatların kolaylıkla gerçekleştirilmesini sağlar. Zengin kullanıcı arayüzü, üretimde çalışan işlem hatlarını görselleştirmeyi, ilerlemeyi izlemeyi ve gerektiğinde sorunları gidermeyi kolaylaştırır. İş akışları kod olarak tanımlandığında daha sürdürülebilir, sürümlendirilebilir, test edilebilir ve işbirliğine dayalı hale gelirler.

Apache Airflow'u yükleme ve kullanmayla ilgili ayrıntılar için Apache Airflow'a bakın.