警告:このAPIは非推奨であり、置き換えが安定した後 TensorFlowの将来のバージョンで削除される予定です。

AutoShardDataset

公共finalクラスAutoShardDataset

入力データセットをシャーディングするデータセットを作成します。

入力データセットをnum_workersでシャーディングするデータセットを作成し、インデックス番目のワーカーのシャーディングされたデータセットを返します。これは、データセットグラフを調べ、リーダーデータセット(CSVDataset、TFRecordDatasetなど)への入力の前にシャード操作を挿入することにより、データセットを自動的にシャーディングしようとします。

データセットを自動的にシャーディングできない場合、このデータセットはNotFoundエラーをスローします。

ネストされたクラス

クラスAutoShardDataset.Options以下のためのオプションの属性AutoShardDataset

パブリックメソッド

出力<オブジェクト>
asOutput ()
テンソルのシンボリックハンドルを返します。
静的AutoShardDataset.Options
autoShardPolicy (ロングautoShardPolicy)
静的AutoShardDataset
作成スコープスコープ、オペランド<?> inputDataset、オペランド<ロング> numWorkers、オペランド<ロング>インデックス、リスト<クラス<?>> outputTypes、リスト<形状> outputShapes、オプション...オプション)
新しいAutoShardDataset操作をラップするクラスを作成するファクトリメソッド。
出力<?>
静的AutoShardDataset.Options
numReplicas (ロングnumReplicas)

継承されたメソッド

パブリックメソッド

公共の出力の<Object> asOutput()

テンソルのシンボリックハンドルを返します。

TensorFlow操作への入力は、別のTensorFlow操作の出力です。このメソッドは、入力の計算を表すシンボリックハンドルを取得するために使用されます。

パブリック静的AutoShardDataset.Options autoShardPolicy(ロングautoShardPolicy)

パブリック静的AutoShardDataset 作成スコープスコープ、オペランド<?> inputDataset、オペランド<ロング> numWorkers、オペランド<ロング>インデックス、リスト<クラス<?>> outputTypes、リスト<形状> outputShapes、オプション...オプション)

新しいAutoShardDataset操作をラップするクラスを作成するファクトリメソッド。

パラメーター
範囲現在のスコープ
inputDataset入力データセットを表すバリアントテンソル。
numWorkersこのデータセットを分散するワーカーの数を表すスカラー。
索引num_workersのうちの現在のワーカーのインデックスを表すスカラー。
オプションオプションの属性値を運ぶ
戻り値
  • AutoShardDatasetの新しいインスタンス

公共の出力<?>ハンドル()

パブリック静的AutoShardDataset.Options numReplicas(ロングnumReplicas)