Se usó la API de Cloud Translation para traducir esta página.
Switch to English

Orquestación de canalizaciones TFX

Apache Beam

Varios componentes TFX confían en Beam para el procesamiento de datos distribuidos. Además, TFX puede usar Apache Beam para orquestar y ejecutar el DAG de canalización. Beam orchestrator usa un BeamRunner diferente al que se usa para el procesamiento de datos de componentes. Con la configuración predeterminada de DirectRunner , el orquestador de Beam se puede utilizar para la depuración local sin incurrir en dependencias adicionales de Airflow o Kubeflow, lo que simplifica la configuración del sistema.

Consulte el ejemplo de TFX en Beam para obtener detalles.