การอ้างอิง API สำหรับไลบรารีข้อความและ NLP

KerasNLP

การอ้างอิง API

วิธีที่ง่ายที่สุดในการเริ่มประมวลผลข้อความใน TensorFlow คือการใช้ KerasNLP ซึ่งเป็นไลบรารีการประมวลผลภาษาธรรมชาติที่ให้ส่วนประกอบแบบโมดูลาร์พร้อมน้ำหนักและสถาปัตยกรรมที่ตั้งไว้ล่วงหน้าอันล้ำสมัย คุณสามารถใช้ส่วนประกอบ KerasNLP ได้ทันทีหรือปรับแต่งได้ตามต้องการ KerasNLP เน้นการคำนวณในกราฟสำหรับเวิร์กโฟลว์ทั้งหมด คุณจึงคาดหวังการผลิตที่ง่ายดายโดยใช้ระบบนิเวศ TensorFlow

หากต้องการติดตั้ง KerasNLP โปรดดูที่ การติดตั้ง

ข้อความ TensorFlow

การอ้างอิง API

แพ็คเกจ tensorflow_text จัดเตรียมชุดข้อความที่เกี่ยวข้องกับคลาสและ ops ที่พร้อมใช้งานกับ TensorFlow ไลบรารีสามารถทำการประมวลผลล่วงหน้าที่จำเป็นสำหรับโมเดลแบบข้อความเป็นประจำ และรวมถึงฟีเจอร์อื่นๆ ที่มีประโยชน์สำหรับการสร้างโมเดลแบบลำดับที่ไม่ได้จัดเตรียมไว้ให้โดยคอร์ TensorFlow

สำหรับรายละเอียดการติดตั้ง โปรดดู คู่มือ

แบบจำลอง TensorFlow - NLP

การอ้างอิง API

ที่เก็บ TensorFlow Models มีการใช้งานโมเดลที่ล้ำสมัย (SOTA) แพ็คเกจ pip tensorflow-models-official ประกอบด้วยฟังก์ชันและคลาสระดับสูงมากมายสำหรับการสร้างโมเดล SOTA NLP รวมถึง nlp.layers , nlp.losses , nlp.models และ nlp.tasks

คุณสามารถติดตั้งแพ็คเกจด้วย pip :

$ pip install tensorflow-models-official  # For the latest release
$ #or
$ pip install tf-models-nightly # For the nightly build

ฟังก์ชัน NLP มีอยู่ในโมดูลย่อย tfm.nlp

import tensorflow_models as tfm
tfm.nlp