KerasNLP
أسهل طريقة لبدء معالجة النص في TensorFlow هي استخدام KerasNLP ، وهي مكتبة معالجة لغة طبيعية توفر مكونات معيارية بأوزان وبنيات معدة مسبقًا على أحدث طراز. يمكنك استخدام مكونات KerasNLP الجاهزة أو تخصيصها حسب الحاجة. تؤكد KerasNLP على الحساب في الرسم البياني لجميع مهام سير العمل ، لذلك يمكنك توقع إنتاج سهل باستخدام نظام TensorFlow البيئي.
لتثبيت KerasNLP ، انظر التثبيت .
نص TensorFlow
توفر حزمة tensorflow_text مجموعة من الفئات والعمليات المتعلقة بالنص جاهزة للاستخدام مع TensorFlow. يمكن للمكتبة إجراء المعالجة المسبقة التي تتطلبها النماذج النصية بانتظام ، وتتضمن ميزات أخرى مفيدة لنمذجة التسلسل التي لا يوفرها Core TensorFlow.
للحصول على تفاصيل التثبيت ، راجع الدليل
نماذج TensorFlow - البرمجة اللغوية العصبية
يوفر مستودع نماذج TensorFlow تطبيقات لأحدث النماذج (SOTA). تتضمن حزمة النقاط tensorflow-models-official العديد من الوظائف والفئات عالية المستوى لبناء نماذج SOTA NLP بما في ذلك nlp.layers و nlp.losses و nlp.models و nlp.tasks .
يمكنك تثبيت الحزمة pip :
$ pip install tensorflow-models-official # For the latest release
$ #or
$ pip install tf-models-nightly # For the nightly build
تتوفر وظيفة البرمجة اللغوية العصبية في الوحدة الفرعية tfm.nlp .
import tensorflow_models as tfm
tfm.nlp