Управление конвейерами TFX

Трубопроводы Kubeflow

Kubeflow является открытым исходным кодом платформы ML усилия , чтобы сделать развертывание машинного обучения (ML) рабочих процессов на Kubernetes простой, портативный и масштабируемой. Kubeflow Трубопроводы является частью платформы Kubeflow , что позволяет композиции и выполнение воспроизводимых рабочих процессов на Kubeflow, интегрированных с экспериментирования и ноутбуков опытом на основе. Сервисы Kubeflow Pipelines в Kubernetes включают размещенное хранилище метаданных, механизм оркестрации на основе контейнеров, сервер записной книжки и пользовательский интерфейс, чтобы помочь пользователям разрабатывать, запускать и управлять сложными конвейерами машинного обучения в любом масштабе. Пакет SDK Kubeflow Pipelines позволяет программно создавать и совместно использовать компоненты, состав и конвейеры.

Смотрите пример TFX на Kubeflow Трубопроводы для деталей работы TFX в масштабе на Google облаке.