KerasNLP
TensorFlow'da metin işlemeye başlamanın en kolay yolu, son teknoloji önceden ayarlanmış ağırlıklar ve mimariler ile modüler bileşenler sağlayan doğal bir dil işleme kitaplığı olan KerasNLP'yi kullanmaktır. KerasNLP bileşenlerini kullanıma hazır olarak kullanabilir veya gerektiği gibi özelleştirebilirsiniz. KerasNLP, tüm iş akışları için grafik içi hesaplamayı vurgular, böylece TensorFlow ekosistemini kullanarak kolay üretim bekleyebilirsiniz.
KerasNLP'yi yüklemek için bkz . Kurulum .
TensorFlow Metni
tensorflow_text paketi, TensorFlow ile kullanıma hazır, metinle ilgili sınıflar ve işlemlerden oluşan bir koleksiyon sağlar. Kitaplık, metin tabanlı modellerin gerektirdiği ön işlemeyi düzenli olarak gerçekleştirebilir ve çekirdek TensorFlow tarafından sağlanmayan dizi modelleme için yararlı diğer özellikleri içerir.
Kurulum detayları için kılavuza bakın.
TensorFlow Modelleri - NLP
TensorFlow Modelleri deposu, son teknoloji (SOTA) modellerin uygulamalarını sağlar. tensorflow-models-official pip paketi, nlp.layers , nlp.losses , nlp.models ve nlp.tasks dahil olmak üzere SOTA NLP modelleri oluşturmak için birçok üst düzey işlev ve sınıf içerir.
Paketi pip ile kurabilirsiniz:
$ pip install tensorflow-models-official # For the latest release
$ #or
$ pip install tf-models-nightly # For the nightly build
NLP işlevi, tfm.nlp alt modülünde mevcuttur.
import tensorflow_models as tfm
tfm.nlp