Join us at DevFest for Ukraine June 14-15 Online Register now

Orquestación de canalizaciones TFX

Apache Beam

Varios componentes TFX se basan en la viga para el procesamiento de datos distribuidos. Además, TFX puede utilizar Apache Beam para organizar y ejecutar el DAG de canalización. Beam Orchestrator utiliza una diferente BeamRunner que la que se utiliza para el procesamiento de datos de componente. Con el valor por defecto DirectRunner configuración del haz orquestador puede ser utilizado para la depuración local sin incurrir en el flujo de aire o Kubeflow dependencias extra, lo que simplifica la configuración del sistema.

Ver el ejemplo TFX en la viga para más detalles.