الصفحة الرئيسية>المتعلقة بالبرمجة>كود الذكاء الاصطناعي
تنزيل

التفكير مع نماذج اللغة (الكبيرة)

العروض التقديمية

  • BHI 2023 البرنامج التعليمي (أكتوبر 2023)

  • ACL 2023 البرنامج التعليمي (يوليو 2023)

TLDR

  • الموضوع المركزي لكلا هذين البرامج التعليمية هو مجموعة من التقنيات الرئيسية لدعم نماذج اللغة الكبيرة. يجمع بين هذه التقنيات يلتقط العديد من الأعمال الحديثة على المطالبة بـ LLMs.

دفاتر

  • نماذج اللغة: نظرة عامة على نماذج اللغة ، مع التركيز على بنية GPT-2 وتشغيلها. يحتوي على مظاهرات تفاعلية لكيفية تقدير هذه النماذج من احتمالات تسلسل الكلمات ، والتنبؤ بالرموز التالية ، وإنشاء نص متماسك.

  • الأساسيات المطالبة: يوضح القليل من اللقطات والصفر. باستخدام API Openai ، يتيح اللعب مع المعلمات مثل درجة الحرارة ، ومواد التوقف ، والرموز القصوى ، ومراقبة تأثيرها على مخرجات نموذج اللغة.

  • دفع التقنيات الرئيسية: يوضح سير عمل نموذجي لطرح نماذج اللغة ، بما في ذلك الاختيار بين المطالبات (المطالبات المباشرة وسلسلة الفكرة) ومخرجات التحليل للتقييم. ويتضمن أيضًا عرضًا لتطبيق memory بمساعدة الذاكرة ، حيث يتم تحديث المطالبة بالنص الذي تم إنشاؤه في كل خطوة.

موارد أخرى

  • مدونتي حول المطالبة بنماذج لغة كبيرة ، تستخدم في برنامج تعليمي في ندوة CMU LTI حول نماذج اللغة الكبيرة (أبريل 2023). في المدونة ، أرسم تشبيهًا بين LLMs كمترجمين عشوائيين وأستحوذ على لغة عالية لتحديد المهام.
يوسع
معلومات إضافية
تطبيقات ذات صلة
نوصي لك
أخبار ذات صلة الكل