AutoShardDataset

genel son sınıf AutoShardDataset

Giriş veri kümesini parçalayan bir veri kümesi oluşturur.

Giriş veri kümesini num_workers'a göre parçalayan ve dizin inci çalışan için parçalanmış bir veri kümesi döndüren bir veri kümesi oluşturur. Bu, Veri Kümesi grafiğini inceleyerek ve bir okuyucu Veri Kümesine (örn. CSVDataset, TFRecordDataset) girişlerden önce bir parçalama işlemi ekleyerek bir veri kümesini otomatik olarak parçalamaya çalışır.

Veri kümesini otomatik olarak parçalayamazsak, bu veri kümesi NotFound hatası verecektir.

İç İçe Sınıflar

sınıf AutoShardDataset.Options AutoShardDataset için isteğe bağlı özellikler

Genel Yöntemler

Çıkış <Nesne>
Çıkış olarak ()
Bir tensörün sembolik tutamacını döndürür.
statik AutoShardDataset.Options
autoShardPolicy (Uzun autoShardPolicy)
statik AutoShardVeri Kümesi
create ( Kapsam kapsamı, İşlenen <?> inputDataset, İşlenen <Uzun> numWorkers, İşlenen <Uzun> dizini, Liste<Sınıf<?>> çıktı Türleri, Liste< Şekil > çıktı Şekilleri, Seçenekler... seçenekler)
Yeni bir AutoShardDataset işlemini saran bir sınıf oluşturmaya yönelik fabrika yöntemi.
Çıkış <?>
statik AutoShardDataset.Options
numReplicas (Uzun numReplicas)

Kalıtsal Yöntemler

Genel Yöntemler

public Output <Object> asOutput ()

Bir tensörün sembolik tutamacını döndürür.

TensorFlow işlemlerinin girdileri, başka bir TensorFlow işleminin çıktılarıdır. Bu yöntem, girişin hesaplanmasını temsil eden sembolik bir tanıtıcı elde etmek için kullanılır.

genel statik AutoShardDataset.Options autoShardPolicy (Uzun autoShardPolicy)

public static AutoShardDataset create ( Kapsam kapsamı, İşlenen <?> inputDataset, İşlenen <Uzun> numWorkers, İşlenen <Uzun> dizini, Liste<Sınıf<?>> çıktı Türleri, Liste< Şekil > çıktı Şekilleri, Seçenekler... seçenekler)

Yeni bir AutoShardDataset işlemini saran bir sınıf oluşturmaya yönelik fabrika yöntemi.

Parametreler
kapsam mevcut kapsam
girişVeri Kümesi Giriş veri kümesini temsil eden değişken bir tensör.
Sayıİşçi Bu veri kümesinin dağıtılacağı çalışan sayısını temsil eden bir skaler.
dizin Çalışan_sayısı arasından mevcut çalışanın endeksini temsil eden bir skaler.
seçenekler isteğe bağlı nitelik değerlerini taşır
İadeler
  • AutoShardDataset'in yeni bir örneği

genel Çıkış <?> tanıtıcı ()

public static AutoShardDataset.Options numReplicas (Uzun numReplicas)