AutoShardDataset

classe final pública AutoShardDataset

Cria um conjunto de dados que fragmenta o conjunto de dados de entrada.

Cria um conjunto de dados que fragmenta o conjunto de dados de entrada por num_workers, retornando um conjunto de dados fragmentado para o índice-ésimo trabalhador. Isso tenta fragmentar automaticamente um conjunto de dados examinando o gráfico do conjunto de dados e inserindo uma operação de fragmento antes das entradas para um conjunto de dados leitor (por exemplo, CSVDataset, TFRecordDataset).

Este conjunto de dados gerará um erro NotFound se não pudermos fragmentar o conjunto de dados automaticamente.

Classes aninhadas

aula AutoShardDataset.Options Atributos opcionais para AutoShardDataset

Métodos Públicos

Saída <Objeto>
asOutput ()
Retorna o identificador simbólico de um tensor.
AutoShardDataset.Options estático
autoShardPolicy (autoShardPolicy longo)
AutoShardDataset estático
create ( Escopo do escopo , Operando <?> inputDataset, Operando <Long> numWorkers, Operando <Long> index, List<Class<?>> outputTypes, List< Shape > outputShapes, Options... options)
Método de fábrica para criar uma classe que agrupa uma nova operação AutoShardDataset.
Saída <?>
lidar ()
AutoShardDataset.Options estático
numReplicas (numReplicas longas)

Métodos herdados

Métodos Públicos

Saída pública <Objeto> asOutput ()

Retorna o identificador simbólico de um tensor.

As entradas para operações do TensorFlow são saídas de outra operação do TensorFlow. Este método é usado para obter um identificador simbólico que representa o cálculo da entrada.

público estático AutoShardDataset.Options autoShardPolicy (autoShardPolicy longo)

public static AutoShardDataset create ( Escopo escopo , Operando <?> inputDataset, Operando <Long> numWorkers, Operando <Long> index, List<Class<?>> outputTypes, List< Shape > outputShapes, Options... options)

Método de fábrica para criar uma classe que agrupa uma nova operação AutoShardDataset.

Parâmetros
escopo escopo atual
conjunto de dados de entrada Um tensor variante que representa o conjunto de dados de entrada.
numWorkers Um escalar que representa o número de trabalhadores para distribuir este conjunto de dados.
índice Um escalar que representa o índice do trabalhador atual de num_workers.
opções carrega valores de atributos opcionais
Devoluções
  • uma nova instância do AutoShardDataset

Saída pública <?> identificador ()

público estático AutoShardDataset.Options numReplicas (Long numReplicas)