KerasNLP
TensorFlow'da metin işlemeye başlamanın en kolay yolu, son teknoloji ürünü önceden ayarlanmış ağırlıklara ve mimarilere sahip modüler bileşenler sağlayan bir doğal dil işleme kütüphanesi olan KerasNLP'yi kullanmaktır. KerasNLP bileşenlerini kullanıma hazır olarak kullanabilir veya gerektiği gibi özelleştirebilirsiniz. KerasNLP, tüm iş akışları için grafik içi hesaplamayı vurgular, böylece TensorFlow ekosistemini kullanarak üretimin kolay olmasını bekleyebilirsiniz.
KerasNLP'yi yüklemek için bkz. Kurulum .
TensorFlow Metni
tensorflow_text paketi, TensorFlow ile kullanıma hazır, metinle ilgili sınıflar ve işlemlerden oluşan bir koleksiyon sağlar. Kitaplık, metin tabanlı modellerin düzenli olarak gerektirdiği ön işlemeyi gerçekleştirebilir ve çekirdek TensorFlow tarafından sağlanmayan, dizi modelleme için yararlı olan diğer özellikleri içerir.
Kurulum ayrıntıları için kılavuza bakın
TensorFlow Modelleri - NLP
TensorFlow Modelleri deposu, son teknoloji ürünü (SOTA) modellerin uygulamalarını sağlar. tensorflow-models-official pip paketi, SOTA NLP modellerini oluşturmaya yönelik nlp.layers , nlp.losses , nlp.models ve nlp.tasks dahil olmak üzere birçok üst düzey işlevi ve sınıfı içerir.
Paketi pip ile kurabilirsiniz:
$ pip install tensorflow-models-official # For the latest release
$ #or
$ pip install tf-models-nightly # For the nightly build
NLP işlevi tfm.nlp alt modülünde mevcuttur.
import tensorflow_models as tfm
tfm.nlp