نموذج اللغة الكبير (LLM) يديه
الكتاب المرجعي: إتقان نماذج اللغة الكبيرة [معاينة كتب Google] [GitHub Link]
رمز التفسير: الرابط
محتويات
النماذج القائمة على القواعد
- استخراج رقم الهاتف باستخدام التعبيرات العادية
- مطابقة النمط باستخدام أجزاء من علامات الكلام
- مطابقة الرموز المحددة بسمات محددة
نماذج اللغة الإحصائية
- التنفيذ البسيط لنموذج لغة bigram
- ngrams من الجملة
البيانات المسبقة للبيانات
- تنظيف البيانات الأساسية
- اكتشاف الكيان
- مجهول
- مثال على معالجة ما قبل المعالجة
- علامات أجزاء من الكلام (POS)
- التبعية التحليل
الشبكات العصبية
- الشبكة العصبية Feedforward لحل مشكلة Xnor
- LSTM لتصنيف معنويات مراجعة فيلم IMDB
- GRU لتصنيف معنويات مراجعة فيلم IMDB
- RNN ثنائية الاتجاه لتصنيف مشاعر مراجعة فيلم IMDB
- بنية نموذج اللغة القائمة على شبكة سي إن إن
النماذج القائمة على المحولات
- تصور الاهتمام الذاتي
- الترميز الموضعي
تدريب نماذج اللغة الكبيرة
- تصميم LLM صغير لتوليد النص
- تصميم نموذج توليد النص على مستوى الأحرف
- تصميم نموذج توليد النص على مستوى الكلمات
- تصميم نموذج لتوليد النص على مستوى الكلمات مع مجموعة بيانات كبيرة
- نموذج توليد النص باستخدام T5
صقل نماذج لغة كبيرة
- صقل Gemma 2 2B-IT نموذج من الوجه المعانقة
مقدمة إلى Ollama
- استنتاج نموذج Llama 3.2 باستخدام مكتبة Ollama Python
- استنتاج نموذج Gemma 2 باستخدام مكتبة Ollama Python
- استدلال نموذج LLAVA باستخدام مكتبة Ollama Python
مقدمة إلى Langchain
- استنتاج نموذج Llama 3.2 باستخدام Langchain و Ollama
- استدلال نموذج LLAVA باستخدام Langchain و Ollama
الجيل المسبق للاسترجاع (خرقة)
- تصميم خط أنابيب جيل (RAG) الذي تم تجهيزه بالاسترجاع باستخدام Llamaindex و Ollama
- تصميم خط أنابيب جيل (RAG) للتراجع (RAG) لنموذج GEMMA 2
الهندسة الفورية
