albert zh for pytorch transformersダウンロードalbert zh for pytorch transformersソースコードダウンロード

albert zh for pytorch transformers

AI ソースコード

albert for pytorch

ダウンロード

元の参照著者は、モデルのダウンロードとテスト結果を提供しました

https://github.com/lonepatient/albert_pytorch/blob/master/readme_zh.md

Pytorch-TransformersのAlbert-Zh

更新を停止します
参照に基づいて変換してから、鉱山を踏む
Pytorch-TransformersのAlbert Zh
伝統的な中国人のテストサポート

利用可能なモデル

albert_tiny_zh
albert_base_zh
albert_large_zh
albert_xlarge_zh

API

あなたのプロジェクトの下にあるこのレポのalbert_zh 1位にしてください

from albert_zh import ...

 AlbertConfig
AlbertTokenizer
AlbertModel
AlbertForMaskedLM
AlbertForQuestionAnswering
AlbertForSequenceClassification

https://huggingface.co/transformers/v2.3.0/model_doc/albert.html

使い方

usage_example.pyを参照してください
または、P208P2002/TAIPEI-QA-BERTの実際の使用例を参照してください
テストはトランス2.3.0で適切に機能します

よくある質問

jupyterとcolabで紹介したいのですが、問題があります

このレポの命名は、Pythonモジュールネーミング条約に準拠しておらず、Jupyter自体はカスタマイズされたモジュールを適切にサポートしていません。以下の解決策の例を参照してください。後でピピを押すことを検討してください

 # 此段code僅適用於jupyter、colab
!git clone https://github.com/p208p2002/albert-zh-for-pytorch-transformers.git albert
import sys 
sys.path.append('.')
from albert.albert_zh import AlbertConfig, AlbertTokenizer, AlbertForSequenceClassification

損失を減らすことはできません。トレーニングはゴミになります

モデルクラスとモデルの構成が、変圧器ではなくalbert_zhによって導入されることを確認してください

lonepatient/albert_pytorch＃35

属性エラー：「bertconfig」オブジェクトには属性「share_type」がありません

config.jsonは"share_type":"all"

モデルはトレーニング中に物事を印刷します

print()の代わりにlog()を使用し、プログラムの開始時にblockPrint()を1回実行してください

 import os , sys
def log ( * logs ):
    enablePrint ()
    print ( * logs )
    blockPrint ()

# Disable
def blockPrint ():
    sys . stdout = open ( os . devnull , 'w' )

# Restore
def enablePrint ():
    sys . stdout = sys . __stdout__