language model playground

สนามเด็กเล่นรุ่นภาษา

รูปแบบภาษาที่ใช้เครือข่ายประสาทใช้กับ Pytorch ดูเอกสารสำหรับรายละเอียดเพิ่มเติม

สิ่งแวดล้อมก่อน

1. เราใช้ Python กับเวอร์ชัน 3.8+ คุณสามารถติดตั้ง Python ด้วย

   apt install python3.8 python3.8-dev

   บันทึก

   ปัจจุบัน Python รุ่นล่าสุดที่สนับสนุนโดย Pytorch คือ 3.8 นั่นเป็นเหตุผลที่เราติดตั้ง python3.8 แทน python3.10 คุณอาจต้องใช้ sudo เพื่อทำการติดตั้ง

2. เราใช้ pytorch กับเวอร์ชัน 1.10+ และ cuda กับเวอร์ชัน 11.2+ จะใช้ได้เฉพาะในกรณีที่คุณมี Nvidia GPU คุณสามารถติดตั้งไลบรารี CUDA ด้วย

   apt install nvidia-driver-460

   บันทึก

   คุณอาจต้องใช้ sudo เพื่อทำการติดตั้ง

3. เราใช้ PipenV เพื่อติดตั้งการพึ่งพา Python คุณสามารถติดตั้ง pipenv ด้วย

   pip install pipenv

   คำเตือน

   อย่าใช้ apt เพื่อ intall pipenv

   บันทึก

   คุณอาจต้องการตั้งค่าตัวแปรสภาพแวดล้อม PIPENV_VENV_IN_PROJECT=1 เพื่อให้โฟลเดอร์สภาพแวดล้อมเสมือนอยู่ในโครงการ Python ของคุณเสมอ ดูเอกสาร Pipenv สำหรับรายละเอียด

การติดตั้ง

1. โคลนโครงการจาก GitHub

   git clone https://github.com/ProFatXuanAll/language-model-playground.git

2. เปลี่ยนไดเรกทอรีปัจจุบันเป็น language-model-playground

    cd language-model-playground

3. ใช้ PIPENV เพื่อสร้างสภาพแวดล้อมเสมือนจริงของ Python และติดตั้งการพึ่งพาในสภาพแวดล้อมเสมือนจริงของ Python

   pipenv install

4. เปิดตัว Python Virtual Environment ที่สร้างโดย Pipenv

   pipenv shell

5. ตอนนี้คุณสามารถเรียกใช้สคริปต์ใด ๆ ที่จัดทำโดยโครงการนี้! ตัวอย่างเช่นคุณสามารถดูชุดข้อมูลบทกวีภาษาจีนได้โดยรัน : py: mod: `lmp.script.sample_dset`

   python -m lmp.script.sample_dset chinese-poem

ใบอนุญาต

ใบขับขี่เบียร์ ใครก็ตามที่ใช้โครงการนี้จะต้องซื้อเบียร์ profatxuanall ถ้าคุณพบเขา