KerasNLP
วิธีที่ง่ายที่สุดในการเริ่มประมวลผลข้อความใน TensorFlow คือการใช้ KerasNLP ซึ่งเป็นไลบรารีการประมวลผลภาษาธรรมชาติที่ให้ส่วนประกอบแบบโมดูลาร์พร้อมน้ำหนักและสถาปัตยกรรมที่ตั้งไว้ล่วงหน้าอันล้ำสมัย คุณสามารถใช้ส่วนประกอบ KerasNLP ได้ทันทีหรือปรับแต่งได้ตามต้องการ KerasNLP เน้นการคำนวณในกราฟสำหรับเวิร์กโฟลว์ทั้งหมด คุณจึงคาดหวังการผลิตที่ง่ายดายโดยใช้ระบบนิเวศ TensorFlow
หากต้องการติดตั้ง KerasNLP โปรดดูที่ การติดตั้ง
ข้อความ TensorFlow
แพ็คเกจ tensorflow_text
จัดเตรียมชุดข้อความที่เกี่ยวข้องกับคลาสและ ops ที่พร้อมใช้งานกับ TensorFlow ไลบรารีสามารถทำการประมวลผลล่วงหน้าที่จำเป็นสำหรับโมเดลแบบข้อความเป็นประจำ และรวมถึงฟีเจอร์อื่นๆ ที่มีประโยชน์สำหรับการสร้างโมเดลแบบลำดับที่ไม่ได้จัดเตรียมไว้ให้โดยคอร์ TensorFlow
สำหรับรายละเอียดการติดตั้ง โปรดดู คู่มือ
แบบจำลอง TensorFlow - NLP
ที่เก็บ TensorFlow Models มีการใช้งานโมเดลที่ล้ำสมัย (SOTA) แพ็คเกจ pip tensorflow-models-official
ประกอบด้วยฟังก์ชันและคลาสระดับสูงมากมายสำหรับการสร้างโมเดล SOTA NLP รวมถึง nlp.layers
, nlp.losses
, nlp.models
และ nlp.tasks
คุณสามารถติดตั้งแพ็คเกจด้วย pip
:
$ pip install tensorflow-models-official # For the latest release
$ #or
$ pip install tf-models-nightly # For the nightly build
ฟังก์ชัน NLP มีอยู่ในโมดูลย่อย tfm.nlp
import tensorflow_models as tfm
tfm.nlp