albert zh for pytorch transformers تنزيل - albert zh for pytorch transformers تنزيل رمز المصدر

albert zh for pytorch transformers

كود الذكاء الاصطناعي

albert for pytorch

تنزيل

قدم المؤلف المرجعي الأصلي نتائج تنزيل النموذج واختبارها

https://github.com/lonepatient/albert_pytorch/blob/master/readme_zh.md

Albert-Zh ل Pytorch transformers

توقف عن التحديث
فقط تحويل بناءً على المرجع ثم خطوة على المنجم
ألبرت تشه لبرنامج Pytorch transformers
اختبار الدعم للصينيين التقليديين

النماذج المتاحة

Albert_tiny_zh
Albert_base_zh
Albert_large_zh
Albert_xlarge_zh

API

المركز الأول في albert_zh في هذا الريبو تحت مشروعك

from albert_zh import ...

 AlbertConfig
AlbertTokenizer
AlbertModel
AlbertForMaskedLM
AlbertForQuestionAnswering
AlbertForSequenceClassification

https://huggingface.co/transformers/v2.3.0/model_doc/albert.html

كيفية استخدام

انظر usage_example.py
أو الرجوع إلى مثال الاستخدام الفعلي لـ P208P2002/TAIPE-QA-Bert
يعمل الاختبار بشكل صحيح في المحولات 2.3.0

الأسئلة المتداولة

أريد أن أقدمه في Jupyter و Colab لكن لدي مشاكل

لا يتوافق تسمية الريبو هذه مع اتفاقية تسمية وحدة بيثون ، ولا يتمتع Jupyter نفسه بدعم جيد للوحدات النمطية المخصصة. يرجى الرجوع إلى مثال الحل أدناه. النظر في دفع PYPI لاحقًا

 # 此段code僅適用於jupyter、colab
!git clone https://github.com/p208p2002/albert-zh-for-pytorch-transformers.git albert
import sys 
sys.path.append('.')
from albert.albert_zh import AlbertConfig, AlbertTokenizer, AlbertForSequenceClassification

لا يمكن تقليل الخسارة ، ويصبح التدريب القمامة

تأكد من تقديم فئة النموذج والتكوين النموذجية بواسطة Albert_zh ، وليس المحولات

LonePatient/Albert_pytorch#35

AttributeerRor: كائن "BertConfig" ليس له سمة "share_type"

يضيف config.json "share_type":"all"

يطبع النموذج الأشياء أثناء التدريب

يرجى استخدام log() بدلاً من print() ، وتنفيذ blockPrint() مرة واحدة في بداية البرنامج

 import os , sys
def log ( * logs ):
    enablePrint ()
    print ( * logs )
    blockPrint ()

# Disable
def blockPrint ():
    sys . stdout = open ( os . devnull , 'w' )

# Restore
def enablePrint ():
    sys . stdout = sys . __stdout__