AutoShardDataset

الفئة النهائية العامة AutoShardDataset

ينشئ مجموعة بيانات تقسم مجموعة بيانات الإدخال.

ينشئ مجموعة بيانات تقوم بتجزئة مجموعة بيانات الإدخال بواسطة num_workers، مما يؤدي إلى إرجاع مجموعة بيانات مجزأة للعامل ذو الفهرس. يحاول هذا تقسيم مجموعة بيانات تلقائيًا عن طريق فحص الرسم البياني لمجموعة البيانات وإدراج عملية تقسيم قبل المدخلات إلى مجموعة بيانات القارئ (على سبيل المثال CSVDataset، TFRecordDataset).

ستؤدي مجموعة البيانات هذه إلى ظهور خطأ NotFound إذا لم نتمكن من تقسيم مجموعة البيانات تلقائيًا.

فئات متداخلة

فصل AutoShardDataset.Options السمات الاختيارية لـ AutoShardDataset

الثوابت

خيط OP_NAME اسم هذه العملية كما هو معروف بواسطة محرك TensorFlow الأساسي

الأساليب العامة

الإخراج < نوع >
كإخراج ()
إرجاع المقبض الرمزي للموتر.
ثابت AutoShardDataset.Options
autoShardPolicy (سياسة autoShard الطويلة)
مجموعة البيانات التلقائية الثابتة
إنشاء ( نطاق النطاق ، المعامل <؟> مجموعة بيانات الإدخال، المعامل < TInt64 > numWorkers، المعامل < TInt64 > الفهرس، القائمة < الفئة <؟ تمتد TType >> أنواع الإخراج، القائمة < الشكل > أشكال الإخراج، الخيارات... الخيارات)
طريقة المصنع لإنشاء فئة تلتف حول عملية AutoShardDataset جديدة.
الإخراج <؟>

الطرق الموروثة

الثوابت

السلسلة النهائية الثابتة العامة OP_NAME

اسم هذه العملية كما هو معروف بواسطة محرك TensorFlow الأساسي

القيمة الثابتة: "ExperimentalAutoShardDataset"

الأساليب العامة

الإخراج العام <TType> asOutput ()

إرجاع المقبض الرمزي للموتر.

المدخلات إلى عمليات TensorFlow هي مخرجات عملية TensorFlow أخرى. يتم استخدام هذه الطريقة للحصول على مقبض رمزي يمثل حساب الإدخال.

AutoShardDataset.Options العام الثابت autoShardPolicy (autoShardPolicy الطويل)

إنشاء مجموعة AutoShardDataset العامة الثابتة (نطاق النطاق ، المعامل <؟> مجموعة بيانات الإدخال، المعامل < TInt64 > numWorkers، المعامل < TInt64 > الفهرس، القائمة <الفئة <؟ تمتد TType >> أنواع الإخراج، القائمة < الشكل > أشكال الإخراج، الخيارات... الخيارات)

طريقة المصنع لإنشاء فئة تلتف حول عملية AutoShardDataset جديدة.

حدود
نِطَاق النطاق الحالي
inputDataset موتر متغير يمثل مجموعة بيانات الإدخال.
numWorkers رقم قياسي يمثل عدد العمال الذين سيتم توزيع مجموعة البيانات هذه عليهم.
فِهرِس مقياس يمثل مؤشر العامل الحالي من بين num_workers.
خيارات يحمل قيم السمات الاختيارية
عائدات
  • مثيل جديد لـ AutoShardDataset

مقبض الإخراج العام <?> ()