ExperimentalAutoShardDataset

classe final pública ExperimentalAutoShardDataset

Cria um conjunto de dados que fragmenta o conjunto de dados de entrada.

Cria um conjunto de dados que fragmenta o conjunto de dados de entrada por num_workers, retornando um conjunto de dados fragmentado para o trabalhador index-th. Isso tenta fragmentar automaticamente um conjunto de dados examinando o gráfico do conjunto de dados e inserindo um shard op antes das entradas para um conjunto de dados do leitor (por exemplo, CSVDataset, TFRecordDataset).

Este conjunto de dados lançará um erro NotFound se não pudermos fragmentar o conjunto de dados automaticamente.

Classes aninhadas

classe ExperimentalAutoShardDataset.Options Atributos opcionais para ExperimentalAutoShardDataset

Métodos públicos

Saída <Objeto>
comoSaída ()
Retorna o identificador simbólico de um tensor.
static ExperimentalAutoShardDataset.Options
autoShardPolicy (autoShardPolicy longo)
static ExperimentalAutoShardDataset
create ( Escopo do escopo, Operando <?> inputDataset, Operando <Long> numWorkers, Operando <Long> index, List<Class<?>> outputTypes, List< Shape > outputShapes, Options... options)
Método de fábrica para criar uma classe que envolve uma nova operação ExperimentalAutoShardDataset.
Saída <?>
lidar ()

Métodos Herdados

Métodos públicos

Public Output <Object> asOutput ()

Retorna o identificador simbólico de um tensor.

As entradas para operações do TensorFlow são saídas de outra operação do TensorFlow. Este método é usado para obter um identificador simbólico que representa o cálculo da entrada.

public static ExperimentalAutoShardDataset.Options autoShardPolicy (autoShardPolicy longo)

public static ExperimentalAutoShardDataset create ( Escopo do escopo, Operando <?> inputDataset, Operando <Long> numWorkers, Operando <Long> index, List<Class<?>> outputTypes, List< Shape > outputShapes, Options... options)

Método de fábrica para criar uma classe que envolve uma nova operação ExperimentalAutoShardDataset.

Parâmetros
alcance escopo atual
conjunto de dados de entrada Um tensor variante que representa o conjunto de dados de entrada.
numWorkers Um escalar que representa o número de trabalhadores para distribuir esse conjunto de dados.
índice Um escalar que representa o índice do trabalhador atual de num_workers.
opções carrega valores de atributos opcionais
Devoluções
  • uma nova instância de ExperimentalAutoShardDataset

Public Output <?> handle ()