AutoShardDataset

clase final pública AutoShardDataset

Crea un conjunto de datos que fragmenta el conjunto de datos de entrada.

Crea un conjunto de datos que fragmenta el conjunto de datos de entrada por num_workers y devuelve un conjunto de datos fragmentado para el índice-ésimo trabajador. Esto intenta fragmentar automáticamente un conjunto de datos examinando el gráfico del conjunto de datos e insertando una operación de fragmento antes de las entradas a un conjunto de datos del lector (por ejemplo, CSVDataset, TFRecordDataset).

Este conjunto de datos arrojará un error NotFound si no podemos fragmentar el conjunto de datos automáticamente.

Clases anidadas

clase AutoShardDataset.Opciones Atributos opcionales para AutoShardDataset

Métodos públicos

Salida <Objeto>
como salida ()
Devuelve el identificador simbólico de un tensor.
AutoShardDataset estático.Opciones
autoShardPolicy (AutoShardPolicy largo)
AutoShardDataset estático
create ( Ámbito ámbito, Operando <?> inputDataset, Operando <Long> numWorkers, Operando <Long> index, List<Class<?>> outputTypes, List< Shape > outputShapes, Opciones... opciones)
Método de fábrica para crear una clase que envuelve una nueva operación de AutoShardDataset.
Salida <?>
AutoShardDataset estático.Opciones
numReplicas (número largo de réplicas)

Métodos Heredados

Métodos públicos

Salida pública <Objeto> asOutput ()

Devuelve el identificador simbólico de un tensor.

Las entradas de las operaciones de TensorFlow son salidas de otra operación de TensorFlow. Este método se utiliza para obtener un identificador simbólico que representa el cálculo de la entrada.

público estático AutoShardDataset.Options autoShardPolicy (AutoShardPolicy largo)

Public static AutoShardDataset create ( Scope scope, Operand <?> inputDataset, Operand <Long> numWorkers, Operand <Long> index, List<Class<?>> outputTypes, List< Shape > outputShapes, Options... options)

Método de fábrica para crear una clase que envuelve una nueva operación de AutoShardDataset.

Parámetros
alcance alcance actual
conjunto de datos de entrada Un tensor variante que representa el conjunto de datos de entrada.
numTrabajadores Un escalar que representa la cantidad de trabajadores para distribuir este conjunto de datos.
índice Un escalar que representa el índice del trabajador actual de num_workers.
opciones lleva valores de atributos opcionales
Devoluciones
  • una nueva instancia de AutoShardDataset

manejador de salida pública <?> ()

public static AutoShardDataset.Options numReplicas (Long numReplicas)