Эта страница переведена с помощью Cloud Translation API.

tensorflow::ops::FixedUnigramCandidateSampler::Attrs

#include <candidate_sampling_ops.h>

Дополнительные параметры установки атрибутов для FixedUnigramCandidateSampler .

Краткое содержание

Общедоступные атрибуты
`distortion_ = 1.0f`	`float`
`num_reserved_ids_ = 0`	`int64`
`num_shards_ = 1`	`int64`
`seed2_ = 0`	`int64`
`seed_ = 0`	`int64`
`shard_ = 0`	`int64`
`unigrams_ = {}`	`gtl::ArraySlice< float >`
`vocab_file_ = ""`	`StringPiece`

Общественные функции
`Distortion (float x)`	`TF_MUST_USE_RESULT Attrs` Искажение используется для того, чтобы исказить распределение вероятностей униграмм.
`NumReservedIds (int64 x)`	`TF_MUST_USE_RESULT Attrs` При желании пользователи могут добавить несколько зарезервированных идентификаторов в диапазоне [0, ..., num_reserved_ids).
`NumShards (int64 x)`	`TF_MUST_USE_RESULT Attrs` Для ускорения всех вычислений за счет параллелизма можно использовать семплер, который выбирает значения из подмножества исходного диапазона.
`Seed (int64 x)`	`TF_MUST_USE_RESULT Attrs` Если значение seed или seed2 задано ненулевым, генератор случайных чисел инициализируется заданным значением seed.
`Seed2 (int64 x)`	`TF_MUST_USE_RESULT Attrs` Второе семя используется для предотвращения столкновения с другими семенями.
`Shard (int64 x)`	`TF_MUST_USE_RESULT Attrs` Для ускорения всех вычислений за счет параллелизма можно использовать семплер, который выбирает значения из подмножества исходного диапазона.
`Unigrams (const gtl::ArraySlice< float > & x)`	`TF_MUST_USE_RESULT Attrs` Список значений количества или вероятностей униграмм, по одному на каждый идентификатор в последовательном порядке.
`VocabFile (StringPiece x)`	`TF_MUST_USE_RESULT Attrs` Каждая корректная строка в этом файле (который должен иметь формат, похожий на CSV) соответствует корректному идентификатору слова.

Общедоступные атрибуты

искажение_

float tensorflow::ops::FixedUnigramCandidateSampler::Attrs::distortion_ = 1.0f

num_reserved_ids_

int64 tensorflow::ops::FixedUnigramCandidateSampler::Attrs::num_reserved_ids_ = 0

num_shards_

int64 tensorflow::ops::FixedUnigramCandidateSampler::Attrs::num_shards_ = 1

seed2_

int64 tensorflow::ops::FixedUnigramCandidateSampler::Attrs::seed2_ = 0

семя_

int64 tensorflow::ops::FixedUnigramCandidateSampler::Attrs::seed_ = 0

осколок_

int64 tensorflow::ops::FixedUnigramCandidateSampler::Attrs::shard_ = 0

униграммы_

gtl::ArraySlice< float > tensorflow::ops::FixedUnigramCandidateSampler::Attrs::unigrams_ = {}

vocab_file_

StringPiece tensorflow::ops::FixedUnigramCandidateSampler::Attrs::vocab_file_ = ""

Общественные функции

Искажение

TF_MUST_USE_RESULT Attrs tensorflow::ops::FixedUnigramCandidateSampler::Attrs::Distortion(
  float x
)

Искажение используется для того, чтобы исказить распределение вероятностей униграмм.

Каждый вес сначала возводится в степень искажения, а затем добавляется к внутреннему распределению униграмм. В результате, искажение = 1,0 дает регулярную выборку униграмм (как определено в файле словаря), а искажение = 0,0 дает равномерное распределение.

По умолчанию — 1

NumReservedIds

TF_MUST_USE_RESULT Attrs tensorflow::ops::FixedUnigramCandidateSampler::Attrs::NumReservedIds(
  int64 x
)

При желании пользователи могут добавить несколько зарезервированных идентификаторов в диапазоне [0, ..., num_reserved_ids).

Один из вариантов использования — это когда специальный неизвестный словесный токен используется в качестве идентификатора 0. Вероятность выборки таких идентификаторов будет равна 0.

Значение по умолчанию — 0.

NumShards

TF_MUST_USE_RESULT Attrs tensorflow::ops::FixedUnigramCandidateSampler::Attrs::NumShards(
  int64 x
)

Для ускорения всех вычислений за счет параллелизма можно использовать семплер, который выбирает значения из подмножества исходного диапазона.

Этот параметр (вместе с параметром 'shard') указывает количество разделов, используемых в общих вычислениях.

По умолчанию — 1

Семя

TF_MUST_USE_RESULT Attrs tensorflow::ops::FixedUnigramCandidateSampler::Attrs::Seed(
  int64 x
)

Если значение seed или seed2 задано ненулевым, генератор случайных чисел инициализируется заданным значением seed.

В противном случае, инициализация происходит с помощью случайного начального значения.

Значение по умолчанию — 0.

Seed2

TF_MUST_USE_RESULT Attrs tensorflow::ops::FixedUnigramCandidateSampler::Attrs::Seed2(
  int64 x
)

Второе семя используется для предотвращения столкновения с другими семенями.

Значение по умолчанию — 0.

Шард

TF_MUST_USE_RESULT Attrs tensorflow::ops::FixedUnigramCandidateSampler::Attrs::Shard(
  int64 x
)

Этот параметр (вместе с 'num_shards') указывает конкретный номер раздела операции сэмплера при использовании разбиения на разделы.

Значение по умолчанию — 0.

Униграммы

TF_MUST_USE_RESULT Attrs tensorflow::ops::FixedUnigramCandidateSampler::Attrs::Unigrams(
  const gtl::ArraySlice< float > & x
)

Список значений количества или вероятностей униграмм, по одному на каждый идентификатор в последовательном порядке.

В эту операцию следует передать ровно один из параметров: vocab_file или unigrams.

По умолчанию используется []

VocabFile

TF_MUST_USE_RESULT Attrs tensorflow::ops::FixedUnigramCandidateSampler::Attrs::VocabFile(
  StringPiece x
)

Каждая корректная строка в этом файле (который должен иметь формат, похожий на CSV) соответствует корректному идентификатору слова.

Идентификаторы расположены в последовательном порядке, начиная с num_reserved_ids. Ожидается, что последняя запись в каждой строке будет значением, соответствующим количеству или относительной вероятности. Для выполнения этой операции необходимо передать ровно один из параметров vocab_file или unigrams.

По умолчанию используется ""