ExampleValidator TFX Ardışık Düzen Bileşeni

ExampleValidator ardışık düzen bileşeni, eğitim ve sunum verilerindeki anormallikleri tanımlar. Verilerdeki farklı anomali sınıflarını tespit edebilir. Örneğin şunları yapabilir:

  1. Veri istatistiklerini kullanıcının beklentilerini kodlayan bir şemayla karşılaştırarak geçerlilik kontrolleri yapın
  2. eğitim ve sunum verilerini karşılaştırarak eğitim-hizmet eğriliğini tespit edin.
  3. bir dizi veriye bakarak veri kaymasını tespit edin.

ExampleValidator ardışık düzen bileşeni, StatisticsGen ardışık düzen bileşeni tarafından hesaplanan veri istatistiklerini bir şemayla karşılaştırarak örnek verilerdeki anormallikleri tanımlar. Çıkarsanan şema, girdi verilerinin karşılaması beklenen özellikleri kodlar ve geliştirici tarafından değiştirilebilir.

  • Tüketimler: Bir SchemaGen bileşeninden bir şema ve bir StatisticsGen bileşeninden istatistikler.
  • Yayılanlar: Doğrulama sonuçları

ExampleValidator ve TensorFlow Veri Doğrulaması

ExampleValidator geniş kullanımı yapar TensorFlow Veri Doğrulama sizin giriş verileri doğrulamak için.

ExampleValidator Bileşenini Kullanma

Bir ExampleValidator ardışık düzen bileşeninin dağıtımı genellikle çok kolaydır ve çok az özelleştirme gerektirir. Tipik kod şöyle görünür:

validate_stats = ExampleValidator(
      statistics=statistics_gen.outputs['statistics'],
      schema=schema_gen.outputs['schema']
      )

Daha fazla detay mevcuttur ExampleValidator API başvurusu .