TensorFlow Extended (TFX) es una plataforma de extremo a extremo para implementar canalizaciones de producción de AA

TensorFlow Data Validation (TFDV) ayuda a que los desarrolladores comprendan, validen y supervisen sus datos de AA a gran escala. La TFDV se usa para analizar y validar los petabytes de datos en Google todos los días, y tiene una trayectoria comprobada en ayudar a que los usuarios de TFX mantengan el estado de sus canalizaciones de AA.

Cuando se aplica el aprendizaje automático a conjuntos de datos reales, se requiere un gran esfuerzo para procesar previamente los datos a fin de darles un formato adecuado. Esto incluye la conversión entre formatos, la asignación de tokens, la lematización de texto, la formación de vocabularios y la realización de una variedad de operaciones numéricas, tales como la normalización. Puedes hacer todo eso con tf.Transform.

TensorFlow Model Analysis (TFMA) permite que los desarrolladores calculen y visualicen métricas de evaluación para sus modelos. Antes de implementar cualquier modelo de aprendizaje automático (AA), los desarrolladores de AA deben evaluar el rendimiento de los modelos para asegurarse de que cumplen con los umbrales de calidad específicos y se comportan como se espera con todos los segmentos relevantes de datos. Por ejemplo, es posible que un modelo tenga un AUC aceptable en todo el conjunto de datos evaluado, pero que no funcione como es debido en segmentos específicos. El TFMA les brinda a los desarrolladores las herramientas para lograr una comprensión profunda del rendimiento de sus modelos.

Los sistemas de entrega de aprendizaje automático (AA) deben ser compatibles con el control de versiones de modelos (para las actualizaciones de modelos con una opción de reversión) y con múltiples modelos (para la experimentación mediante pruebas A/B), y al mismo tiempo asegurar que los modelos simultáneos alcancen una capacidad de procesamiento alta en los aceleradores de hardware (GPU y TPU) con baja latencia. TensorFlow Serving demostró su rendimiento al controlar cientos de millones de inferencias por segundo en Google.