tensorflow :: ops :: StringNGrams

#include <string_ops.h>

Membuat ngram dari data string compang-camping.

Ringkasan

Operasi ini menerima tensor ragged dengan 1 dimensi ragged yang hanya berisi string dan mengeluarkan tensor ragged dengan 1 dimensi ragged yang berisi ngram string itu, bergabung di sepanjang sumbu terdalam.

Argumen:

  • scope: Objek Scope
  • data: Nilai tensor dari tensor string compang-camping untuk membuat ngram dari. Harus berupa tensor string 1D.
  • data_splits: Tensor split dari tensor string compang-camping untuk membuat ngram dari.
  • separator: String yang akan ditambahkan di antara elemen token. Gunakan "" tanpa pemisah.
  • ngram_widths: Ukuran ngram yang akan dibuat.
  • left_pad: String yang digunakan untuk mengisi sisi kiri urutan ngram. Hanya digunakan jika pad_width! = 0.
  • right_pad: String yang digunakan untuk mengisi sisi kanan urutan ngram. Hanya digunakan jika pad_width! = 0.
  • pad_width: Jumlah elemen padding yang akan ditambahkan ke setiap sisi setiap urutan. Perhatikan bahwa padding tidak akan pernah lebih besar dari 'ngram_widths'-1 terlepas dari nilainya. Jika pad_width=-1 , tambahkan max(ngram_widths)-1 elemen.

Pengembalian:

  • Output ngrams: Nilai tensor dari ngram keluaran tensor compang-camping.
  • Output ngrams_splits: Tensor splits dari output ngrams tensor compang-camping.

Pembuat dan Penghancur

StringNGrams (const :: tensorflow::Scope & scope, :: tensorflow::Input data, :: tensorflow::Input data_splits, StringPiece separator, const gtl::ArraySlice< int > & ngram_widths, StringPiece left_pad, StringPiece right_pad, int64 pad_width, bool preserve_short_sequences)

Atribut publik

ngrams
ngrams_splits
operation

Atribut publik

ngrams

::tensorflow::Output ngrams

ngrams_splits

::tensorflow::Output ngrams_splits

operasi

Operation operation

Fungsi publik

StringNGrams

 StringNGrams(
  const ::tensorflow::Scope & scope,
  ::tensorflow::Input data,
  ::tensorflow::Input data_splits,
  StringPiece separator,
  const gtl::ArraySlice< int > & ngram_widths,
  StringPiece left_pad,
  StringPiece right_pad,
  int64 pad_width,
  bool preserve_short_sequences
)