パブリック最終クラスExperimentalAutoShardDataset
入力データセットをシャーディングするデータセットを作成します。
入力データセットを num_workers でシャードするデータセットを作成し、インデックス番目のワーカーのシャード データセットを返します。これは、データセット グラフを調べ、リーダー データセット (CSVDataset、TFRecordDataset など) への入力の前にシャード オペレーションを挿入することによって、データセットを自動的にシャード化しようとします。
データセットを自動的にシャーディングできない場合、このデータセットは NotFound エラーをスローします。
ネストされたクラス
| クラス | ExperimentalAutoShardDataset.Options | ExperimentalAutoShardDatasetのオプションの属性 | |
パブリックメソッド
| 出力<オブジェクト> | asOutput () テンソルのシンボリック ハンドルを返します。 |
| 静的ExperimentalAutoShardDataset.Options | autoShardPolicy (長い autoShardPolicy) |
| 静的実験的AutoShardDataset | |
| 出力<?> | ハンドル（） |
継承されたメソッド
パブリックメソッド
public Output <オブジェクト> asOutput ()
テンソルのシンボリック ハンドルを返します。
TensorFlow オペレーションへの入力は、別の TensorFlow オペレーションの出力です。このメソッドは、入力の計算を表すシンボリック ハンドルを取得するために使用されます。
public static ExperimentalAutoShardDataset create (スコープスコープ、オペランド<?> inputDataset、オペランド<Long> numWorkers、オペランド<Long> インデックス、List<Class<?>> OutputTypes、List< Shape > OutputShapes、 Options...オプション)
新しい ExperimentalAutoShardDataset オペレーションをラップするクラスを作成するファクトリ メソッド。
パラメーター
| 範囲 | 現在のスコープ |
|---|---|
| 入力データセット | 入力データセットを表すバリアント テンソル。 |
| 労働者の数 | このデータセットを分散するワーカーの数を表すスカラー。 |
| 索引 | num_workers のうちの現在のワーカーのインデックスを表すスカラー。 |
| オプション | オプションの属性値を持ちます |
戻り値
- ExperimentalAutoShardDataset の新しいインスタンス