TensorFlowテキスト
tensorflow_text
パッケージは、TensorFlowですぐに使用できるテキスト関連のクラスとオペレーションのコレクションを提供します。ライブラリは、テキストベースのモデルで定期的に必要とされる前処理を実行でき、コアTensorFlowでは提供されないシーケンスモデリングに役立つ他の機能が含まれています。
インストールの詳細については、ガイドを参照してください
TensorFlowモデル-NLP
TensorFlowモデルリポジトリは、最先端の(SOTA)モデルの実装を提供します。 tensorflow-models-official
pipパッケージには、nlp.layers、nlp.losses、 nlp.losses
、 nlp.models
などのnlp.layers
モデルを構築するための多くの高レベルの関数とクラスが含まれていnlp.tasks
。
パッケージはpip
でインストールできます:
$ pip install tensorflow-models-official # For the latest release
$ #or
$ pip install tf-models-nightly # For the nightly build
NLP機能は、 tfm.nlp
サブモジュールで使用できます。
import tensorflow_models as tfm
tfm.nlp