Orquestrando pipelines TFX

Pipelines Kubeflow

Kubeflow é uma plataforma de ML de código aberto dedicada a tornar as implantações de fluxos de trabalho de aprendizado de máquina (ML) no Kubernetes simples, portáteis e escalonáveis. Kubeflow Pipelines faz parte da plataforma Kubeflow que permite a composição e execução de fluxos de trabalho reproduzíveis no Kubeflow, integrados com experimentação e experiências baseadas em notebook. Os serviços Kubeflow Pipelines no Kubernetes incluem o armazenamento de metadados hospedado, mecanismo de orquestração baseado em contêiner, servidor de notebook e UI para ajudar os usuários a desenvolver, executar e gerenciar pipelines de ML complexos em escala. O SDK do Kubeflow Pipelines permite a criação e o compartilhamento de componentes, composição e pipelines de forma programática.

Consulte o exemplo do TFX no Kubeflow Pipelines para obter detalhes sobre como executar o TFX em escala na nuvem do Google.