เคราสNLP
วิธีที่ง่ายที่สุดในการเริ่มต้นประมวลผลข้อความใน TensorFlow คือการใช้ KerasNLP ซึ่งเป็นไลบรารีการประมวลผลภาษาธรรมชาติที่มีส่วนประกอบแบบโมดูลาร์พร้อมน้ำหนักและสถาปัตยกรรมที่ตั้งไว้ล่วงหน้าที่ล้ำสมัย คุณสามารถใช้ส่วนประกอบ KerasNLP ได้ทันทีหรือปรับแต่งได้ตามต้องการ KerasNLP เน้นการคำนวณในกราฟสำหรับเวิร์กโฟลว์ทั้งหมด ดังนั้นคุณจึงสามารถคาดหวังการผลิตที่ง่ายดายโดยใช้ระบบนิเวศ TensorFlow
หากต้องการติดตั้ง KerasNLP โปรดดู การติดตั้ง
ข้อความเทนเซอร์โฟลว์
แพ็คเกจ tensorflow_text มีคอลเลกชันของคลาสที่เกี่ยวข้องกับข้อความและการดำเนินการที่พร้อมใช้งานกับ TensorFlow ไลบรารีสามารถทำการประมวลผลล่วงหน้าซึ่งจำเป็นสำหรับโมเดลแบบข้อความเป็นประจำ และมีคุณสมบัติอื่นๆ ที่เป็นประโยชน์สำหรับการสร้างแบบจำลองลำดับที่ไม่ได้มาจาก Core TensorFlow
สำหรับรายละเอียดการติดตั้ง โปรดดู คำแนะนำ
โมเดล TensorFlow - NLP
พื้นที่เก็บข้อมูล TensorFlow Models นำเสนอการใช้งานโมเดลที่ล้ำสมัย (SOTA) แพ็คเกจ pip tensorflow-models-official ประกอบด้วยฟังก์ชันและคลาสระดับสูงมากมายสำหรับการสร้างแบบจำลอง SOTA NLP รวมถึง nlp.layers , nlp.losses , nlp.models และ nlp.tasks
คุณสามารถติดตั้งแพ็คเกจด้วย pip :
$ pip install tensorflow-models-official # For the latest release
$ #or
$ pip install tf-models-nightly # For the nightly build
ฟังก์ชันการทำงานของ NLP มีอยู่ในโมดูลย่อย tfm.nlp
import tensorflow_models as tfm
tfm.nlp