CharLM
1.0.0
هذا هو تنفيذ Pytorch لنموذج اللغة العصبية المدركة للشخصية المقترحة في هذه الورقة من قبل يون كيم.
يتم تشغيل الكود واختباره مع Python 3.5.2 و Pytorch 0.3.1 .
| فرط | قيمة |
|---|---|
| حجم دفعة LSTM | 20 |
| طول تسلسل LSTM | 35 |
| وحدات LSTM المخفية | 300 |
| الحقبة | 35 |
| معدل التعلم الأولي | 1.0 |
| شخصية تضمين البعد | 15 |
قم بتدريب النموذج مع بيانات القطار/الصالحة/الاختبار.
python train.py
سيتم حفظ النموذج المدرب في cache/net.pkl . اختبار النموذج.
python test.py
أفضل نتيجة في مجموعة الاختبار: PPL = 127.2163 Cross Entropy فقدان = 4.8459
استعار هذا التنفيذ الأفكار من
https://github.com/jarfo/kchar
https://github.com/cronos123/character-aware-neural-language-models