language model playground

Patio de recreo del modelo de idiomas

Modelo de lenguaje basado en redes neuronales implementado con Pytorch. Vea la documentación para más detalles.

Prerrequeta del medio ambiente

1. Usamos Python con la versión 3.8+ . Puedes instalar python con

   apt install python3.8 python3.8-dev

   Nota

   Actualmente, la última versión de Python compatible con Pytorch es 3.8 . Es por eso que instalamos python3.8 en lugar de python3.10 . Es posible que deba usar sudo para realizar la instalación.

2. Usamos Pytorch con la versión 1.10+ y CUDA con la versión 11.2+ . Esto solo funciona si tiene GPU NVIDIA . Puede instalar la biblioteca CUDA con

   apt install nvidia-driver-460

   Nota

   Es posible que deba usar sudo para realizar la instalación.

3. Usamos Pipenv para instalar dependencias de Python. Puede instalar pipenv con

   pip install pipenv

   Advertencia

   No use apt to Intall Pipenv.

   Nota

   Es posible que desee establecer la variable de entorno PIPENV_VENV_IN_PROJECT=1 para que las carpetas de entorno virtual siempre se encuentren en sus proyectos de Python. Consulte el documento Pipenv para más detalles.

Instalación

1. Clon el proyecto de Github.

   git clone https://github.com/ProFatXuanAll/language-model-playground.git

2. Cambie el directorio actual a language-model-playground .

    cd language-model-playground

3. Use Pipenv para crear un entorno virtual de Python e instalar dependencias en el entorno virtual de Python.

   pipenv install

4. Iniciar el entorno virtual de Python creado por Pipenv.

   pipenv shell

5. ¡Ahora puede ejecutar cualquier guión proporcionado por este proyecto! Por ejemplo, puede echar un vistazo al conjunto de datos de poemas chino ejecutando : Py: Mod: `lmp.script.sample_dset`

   python -m lmp.script.sample_dset chinese-poem

LICENCIA

Licencia de cerveza. Cualquiera que use este proyecto debe comprar una cerveza Profatxuanall si lo conociste.