Texte TensorFlow
Le package tensorflow_text fournit une collection de classes et d'opérations liées au texte prêtes à être utilisées avec TensorFlow. La bibliothèque peut effectuer le prétraitement régulièrement requis par les modèles textuels et inclut d'autres fonctionnalités utiles pour la modélisation de séquences non fournies par le noyau TensorFlow.
Pour plus de détails sur l'installation, reportez-vous au guide
Modèles TensorFlow - PNL
Le référentiel TensorFlow Models fournit des implémentations de modèles de pointe (SOTA). Le package pip tensorflow-models-official comprend de nombreuses fonctions et classes de haut niveau pour la création de modèles SOTA NLP, notamment nlp.layers , nlp.losses , nlp.models et nlp.tasks .
Vous pouvez installer le package avec pip :
$ pip install tensorflow-models-official # For the latest release
$ #or
$ pip install tf-models-nightly # For the nightly build
La fonctionnalité NLP est disponible dans le sous-module tfm.nlp .
import tensorflow_models as tfm
tfm.nlp