AutoShardDataset

AutoShardDataset kelas akhir publik

Membuat himpunan data yang memecah himpunan data masukan.

Membuat himpunan data yang memecah himpunan data masukan sebanyak num_workers, mengembalikan himpunan data yang dipecah untuk pekerja ke-indeks. Ini mencoba untuk secara otomatis membagi kumpulan data dengan memeriksa grafik Kumpulan Data dan memasukkan operasi pecahan sebelum memasukkan ke Kumpulan Data pembaca (misalnya CSVDataset, TFRecordDataset).

Kumpulan data ini akan memunculkan kesalahan NotFound jika kami tidak dapat membagi kumpulan data secara otomatis.

Kelas Bersarang

kelas AutoShardDataset.Opsi Atribut opsional untuk AutoShardDataset

Konstanta

Rangkaian OP_NAME Nama operasi ini dikenal dengan mesin inti TensorFlow

Metode Publik

Keluaran < Tipe T >
sebagai Keluaran ()
Mengembalikan pegangan simbolis tensor.
AutoShardDataset.Options statis
autoShardPolicy (Kebijakan autoShard panjang)
AutoShardDataset statis
buat ( Lingkup cakupan, Operan <?> inputDataset, Operan < TInt64 > numWorkers, Operan < TInt64 > indeks, Daftar<Kelas<? extends TType >> tipe keluaran, Daftar< Bentuk > bentuk keluaran, Opsi... opsi)
Metode pabrik untuk membuat kelas yang membungkus operasi AutoShardDataset baru.
Keluaran <?>
AutoShardDataset.Options statis
numReplika (JumlahReplika panjang)

Metode Warisan

Konstanta

String akhir statis publik OP_NAME

Nama operasi ini dikenal dengan mesin inti TensorFlow

Nilai Konstan: "AutoShardDataset"

Metode Publik

Keluaran publik < TType > asOutput ()

Mengembalikan pegangan simbolis tensor.

Masukan ke operasi TensorFlow adalah keluaran dari operasi TensorFlow lainnya. Metode ini digunakan untuk mendapatkan pegangan simbolis yang mewakili perhitungan input.

AutoShardDataset statis publik.Options autoShardPolicy (AutoShardPolicy panjang)

pembuatan AutoShardDataset statis publik ( Lingkup cakupan, Operan <?> inputDataset, Operan < TInt64 > numWorkers, Operan < TInt64 > indeks, Daftar<Kelas<? extends TType >> tipe keluaran, Daftar< Bentuk > bentuk keluaran, Opsi... opsi)

Metode pabrik untuk membuat kelas yang membungkus operasi AutoShardDataset baru.

Parameter
cakupan ruang lingkup saat ini
masukanDataset Varian tensor yang mewakili kumpulan data masukan.
jumlah Pekerja Skalar yang mewakili jumlah pekerja yang mendistribusikan kumpulan data ini.
indeks Skalar yang mewakili indeks pekerja saat ini dari num_workers.
pilihan membawa nilai atribut opsional
Kembali
  • contoh baru AutoShardDataset

Keluaran publik <?> pegangan ()

AutoShardDataset statis publik.Options numReplicas (NumReplica panjang)