Gluonnlp هي مجموعة أدوات تساعدك على حل مشاكل NLP. يوفر أدوات سهلة الاستخدام تساعدك على تحميل البيانات النصية ومعالجة البيانات النصية ونماذج التدريب.
انظر مستنداتنا على https://nlp.gluon.ai/master/index.html.
بادئ ذي بدء ، قم بتثبيت إصدار MXNET 2 مثل MXNET 2 Alpha. يمكنك استخدام الأوامر التالية:
# Install the version with CUDA 10.2
python3 -m pip install -U --pre " mxnet-cu102>=2.0.0a "
# Install the version with CUDA 11
python3 -m pip install -U --pre " mxnet-cu110>=2.0.0a "
# Install the cpu-only version
python3 -m pip install -U --pre " mxnet>=2.0.0a "لتثبيت gluonnlp ، استخدم
python3 -m pip install -U -e .
# Also, you may install all the extra requirements via
python3 -m pip install -U -e . " [extras] "إذا وجدت أنه ليس لديك إذن ، فيمكنك أيضًا التثبيت على مجلد المستخدم:
python3 -m pip install -U -e . --userبالنسبة لمستخدمي Windows ، نوصي باستخدام نظام Windows الفرعي لـ Linux.
لتسهيل كل من المهندسين والباحثين ، نقدم تداول خط الأوامر لتنزيل ومعالجة مجموعات بيانات NLP. لمزيد من التفاصيل ، يمكنك الرجوع إلى مجموعات بيانات GluonnLP وأدوات معالجة بيانات GluonnLP.
# CLI for downloading / preparing the dataset
nlp_data help
# CLI for accessing some common data processing scripts
nlp_process help
# Also, you can use `python -m` to access the toolkits
python3 -m gluonnlp.cli.data help
python3 -m gluonnlp.cli.process help
يمكنك الذهاب إلى الاختبارات لمعرفة كيفية تشغيل غيرها.
يمكنك استخدام Docker لإطلاق بيئة تطوير JupyterLab مع تثبيت GluonnLP.
# GPU Instance
docker pull gluonai/gluon-nlp:gpu-latest
docker run --gpus all --rm -it -p 8888:8888 -p 8787:8787 -p 8786:8786 --shm-size=2g gluonai/gluon-nlp:gpu-latest
# CPU Instance
docker pull gluonai/gluon-nlp:cpu-latest
docker run --rm -it -p 8888:8888 -p 8787:8787 -p 8786:8786 --shm-size=2g gluonai/gluon-nlp:cpu-latest
لمزيد من التفاصيل ، يمكنك الرجوع إلى التوجيه في الأدوات/Docker.