หน้าแรก>การเขียนโปรแกรมที่เกี่ยวข้อง>ซอร์สโค้ดอื่น ๆ
ดาวน์โหลด

gluonnlp: การเลือกเรียนรู้อย่างลึกซึ้งสำหรับ NLP

Gluonnlp เป็นชุดเครื่องมือที่ช่วยให้คุณแก้ปัญหา NLP ได้ มันมีเครื่องมือที่ใช้งานง่ายที่ช่วยให้คุณโหลดข้อมูลข้อความประมวลผลข้อมูลข้อความและรุ่นฝึกอบรม

ดูเอกสารของเราที่ https://nlp.gluon.ai/master/index.html

คุณสมบัติ

  • เครื่องมือประมวลผลข้อความที่ใช้งานง่ายและ API แบบแยกส่วน
  • สวนสัตว์รุ่นก่อน
  • เขียนโมเดลด้วย API ที่มีลักษณะคล้าย numpy
  • การอนุมานอย่างรวดเร็วผ่าน Apache TVM (บ่ม) (ทดลอง)
  • การรวม AWS ผ่าน Sagemaker

การติดตั้ง

ก่อนอื่นให้ติดตั้ง MXNET 2 รีลีสเช่น MXNET 2 Alpha คุณสามารถใช้คำสั่งต่อไปนี้: 

 # Install the version with CUDA 10.2
python3 -m pip install -U --pre " mxnet-cu102>=2.0.0a "

# Install the version with CUDA 11
python3 -m pip install -U --pre " mxnet-cu110>=2.0.0a "

# Install the cpu-only version
python3 -m pip install -U --pre " mxnet>=2.0.0a "

ในการติดตั้ง gluonnlp ให้ใช้ 

python3 -m pip install -U -e .

# Also, you may install all the extra requirements via
python3 -m pip install -U -e . " [extras] "

หากคุณพบว่าคุณไม่มีสิทธิ์คุณสามารถติดตั้งไปยังโฟลเดอร์ผู้ใช้: 

python3 -m pip install -U -e . --user

สำหรับผู้ใช้ Windows เราขอแนะนำให้ใช้ระบบย่อย Windows สำหรับ Linux

เข้าถึงชุดเครื่องมือบรรทัดคำสั่ง

เพื่ออำนวยความสะดวกทั้งวิศวกรและนักวิจัยเรามีคำสั่งบรรทัดบรรทัดสำหรับการดาวน์โหลดและประมวลผลชุดข้อมูล NLP สำหรับรายละเอียดเพิ่มเติมคุณอาจอ้างถึงชุดข้อมูล GluonNLP และเครื่องมือประมวลผลข้อมูล GluonNLP 

 # CLI for downloading / preparing the dataset
nlp_data help

# CLI for accessing some common data processing scripts
nlp_process help

# Also, you can use `python -m` to access the toolkits
python3 -m gluonnlp.cli.data help
python3 -m gluonnlp.cli.process help

เรียกใช้ unittests

คุณสามารถไปทดสอบเพื่อดูวิธีเรียกใช้ Unittests

ใช้นักเทียบท่า

คุณสามารถใช้ Docker เพื่อเปิดตัวสภาพแวดล้อมการพัฒนา JupyterLab ด้วยการติดตั้ง Gluonnlp 

 # GPU Instance
docker pull gluonai/gluon-nlp:gpu-latest
docker run --gpus all --rm -it -p 8888:8888 -p 8787:8787 -p 8786:8786 --shm-size=2g gluonai/gluon-nlp:gpu-latest

# CPU Instance
docker pull gluonai/gluon-nlp:cpu-latest
docker run --rm -it -p 8888:8888 -p 8787:8787 -p 8786:8786 --shm-size=2g gluonai/gluon-nlp:cpu-latest

สำหรับรายละเอียดเพิ่มเติมคุณสามารถอ้างถึงคำแนะนำในเครื่องมือ/นักเทียบท่า

ขยาย
ข้อมูลเพิ่มเติม
แอปที่เกี่ยวข้อง
แนะนำสำหรับคุณ
ข้อมูลที่เกี่ยวข้อง ทั้งหมด