AutoShardDataset

classe final pública AutoShardDataset

Cria um conjunto de dados que fragmenta o conjunto de dados de entrada.

Cria um conjunto de dados que fragmenta o conjunto de dados de entrada por num_workers, retornando um conjunto de dados fragmentado para o trabalhador index-th. Isso tenta fragmentar automaticamente um conjunto de dados examinando o gráfico do conjunto de dados e inserindo um shard op antes das entradas para um conjunto de dados do leitor (por exemplo, CSVDataset, TFRecordDataset).

Este conjunto de dados lançará um erro NotFound se não pudermos fragmentar o conjunto de dados automaticamente.

Classes aninhadas

aula AutoShardDataset.Options Atributos opcionais para AutoShardDataset

Métodos públicos

Saída <Objeto>
comoSaída ()
Retorna o identificador simbólico de um tensor.
estático AutoShardDataset.Options
autoShardPolicy (autoShardPolicy longo)
AutoShardDataset estático
create ( Escopo do escopo, Operando <?> inputDataset, Operando <Long> numWorkers, Operando <Long> index, List<Class<?>> outputTypes, List< Shape > outputShapes, Options... options)
Método de fábrica para criar uma classe que envolve uma nova operação AutoShardDataset.
Saída <?>
lidar ()
estático AutoShardDataset.Options
numReplicas (Número longoReplicas)

Métodos Herdados

Métodos públicos

Public Output <Object> asOutput ()

Retorna o identificador simbólico de um tensor.

As entradas para operações do TensorFlow são saídas de outra operação do TensorFlow. Este método é usado para obter um identificador simbólico que representa o cálculo da entrada.

public static AutoShardDataset.Options autoShardPolicy (longo autoShardPolicy)

public static AutoShardDataset create ( Escopo do escopo, Operando <?> inputDataset, Operando <Long> numWorkers, Operando <Long> index, List<Class<?>> outputTypes, List< Shape > outputShapes, Options... options)

Método de fábrica para criar uma classe que envolve uma nova operação AutoShardDataset.

Parâmetros
alcance escopo atual
conjunto de dados de entrada Um tensor variante que representa o conjunto de dados de entrada.
numWorkers Um escalar que representa o número de trabalhadores para distribuir esse conjunto de dados.
índice Um escalar que representa o índice do trabalhador atual de num_workers.
opções carrega valores de atributos opcionais
Devoluções
  • uma nova instância de AutoShardDataset

Public Output <?> handle ()

public static AutoShardDataset.Options numReplicas (Long numReplicas)