ملحوظة: إنه إطار باني نموذج LLM بسيط للعب حول نماذج LLM وفهم مبادئ عمله
إنه ليس طراز LLM ولكن يمكنك وضع بياناتك وتدريبها على إنشاء نماذج LLM
تنفيذ تجريبي لنموذج اللغة (LLM) بنية البحث وتطوير بنية تكنولوجيا المعلومات ، وعملية التصميم لبناء وتدريب وضبط نماذج المحولات المسببة للتأثير (GPT)
لمزيد من الأدوات المرتبطة بـ AI وإطار العمل في OX-AA AI مشروع AI مفتوح المصدر
سيكون Github Pull نظيفًا إذا واجهته الأخطاء ، يرجى الإبلاغ عن المشكلات
pip install git+https://github.com/Lokeshwaran-M/jam-gpt.gitقد لا يكون لدى Jam-GPT == 0.0.4 ضبطًا جيدًا لأنه لا يزال قيد التطوير وقد يحتوي على خطأ ، يرجى الإبلاغ عن المشكلات إن وجدت
pip install jam-gptحكيم مستندات واختبار gptlm.ipynb لأمثلة رمز
from jam_gpt . tokenizer import Tokenizer
from jam_gpt import config
from jam_gpt import lm
from jam_gpt . model import Model
md_name = "md-name"
tok = Tokenizer ()
tok . get_encoding ( md_name )
# model initilization
model = Model ()
# load pretrined model
model . load_model ( md_name )
# Generate data using Model
pmt = tok . encode ( "user prompt" )
res = tok . decode ( model . generate ( pmt ))
print ( res )سوف تمنحك مستندات JAM-GPT الاستخدام الكامل وشرح مكتبة JAM-GPT
1 إعداد
2 جمع البيانات
3 الرمز المميز
4 التكوين
5 نموذج لغة (LM ، نموذج)
6 موديل ضبط دقيق
للحصول على إرشادات المساهمة وشروطها وشرطها للمساهمة في تحكيم المربى عن طريق صياغة العلاقات العامة ، فإنك تقبل الشروط والشرط
يتم قبول أي شكل من أشكال المساهمة هنا
Submitting :
Issues
pull requests
feature requests
bug reports
documentation