tiny_multimodal
1.0.0

تطبيق بسيط و "صغير" للعديد من النماذج متعددة الوسائط. وهو يدعم التدريب/Finetuning/نشر هذه النماذج الصغيرة الحجم. على عكس النماذج "الكبيرة" الشهيرة ، سيتم تقييد جميع النماذج في هذا الريبو للتدريب على RTX 3080 Ti بحيث لن يكون التنفيذ هو نفسه تمامًا للأوراق الأصلية.
conda create -n tinym python=3.10
conda activate tinym
git clone [email protected]:RobinDong/tiny_multimodal.git
cd tiny_multimodal
python -m pip install -r requirements.txt
قم بتنزيل مفاهيمي 12m من Huggingface إلى Directory cc12m-wds .
استخدم utils/extract_tars.py لتحويل CC12M إلى تنسيق جاهز للاستخدام:
python utils/extract_tars.py --input_path=<YOUR_DIR>/cc12m-wds/ --output_path=<YOUR_OUTPUT_PATH> --jobs=<YOUR_CPU_CORES>
python train.py --provider CLIP
هذا الريبو لا يزال في النمو. يرجى التحلي بالصبر لمزيد من النماذج متعددة الوسائط.
أي مشكلة أو طلب سحب مرحب به.