gpt2 text generation

GPT2-Text-Generation

التوليف الدقيق والتوليد النصية باستخدام مجموعة بيانات Openai على مجموعة بيانات المدونات من https://trustmeyourealive.wordpress.com/.

content-extraction : استخراج بيانات المدونة باستخدام واجهة برمجة تطبيقات WordPress

dataset : قطار ، التحقق من الصحة ، مجموعات بيانات الاختبار من المحتوى المستخرج

prepare_data.ipynb : قم بإعداد البيانات في القطار ، صالح ، ملفات اختبار

text_generation.ipyb : GPT-2 صقل على مجموعة القطار المحضرة وتوليد النصوص

تفاصيل مجموعة البيانات:

إجمالي الرموز: 246446 (76 مقالة)
المفردات: 50260
مجموعة التدريب (عن طريق الخط): 2752

ملفات التعليمات البرمجية في transformers التي يجب استبدالها بعد الاستنساخ: run_generation.py و run_language_modeling.py (تعليمات في text_generation.ipynb)

تسلسلات ولدت

بصراحة ، أنا في حالة من الرهبة/الصدمة - هذه التسلسلات تبدو مثلي حقًا ، وأنا أشعر بالارتياح تمامًا لم يتم فتح GPT -3 (حتى الآن):

1. إنها اللحظة التي تتركك أكثر القلق.
2. لا يزال هناك أيام متبقية حتى نهاية الفصل الدراسي - إنه يوم السبت.
3. لكن أخي وأنا نعرف بعضنا البعض ، نعلم أيضًا أنه يرتدي دائمًا قميصًا أخضر وبنطلون جينز رمادي مع جوارب أخضر العش تغطي نصف بوصة تحت فخذه الأيسر.
4. لطالما أردت أن أكون جزءًا من المجتمع ، أو جزءًا من الناس.
5. يستغرق أقل من 5 دقائق لمدة ساعة (وأحيانًا أطول إذا غادرت المنزل).