الصفحة الرئيسية>المتعلقة بالبرمجة>شفرة المصدر الأخرى
تنزيل

ner الصينية باستخدام Bert

بيرت ل ner الصينية.

تحديث ： ： ، 包括 biaffine 、 GlobalPointer 等: أمثلة

قائمة مجموعة البيانات

  1. CNER: مجموعات البيانات/CNER
  2. Cluener: https://github.com/cluebenchmark/cluener

قائمة النموذج

  1. بيرت+softmax
  2. بيرت+CRF
  3. بيرت+سبعة

متطلبات

  1. 1.1.0 = <pytorch <1.5.0
  2. CUDA = 9.0
  3. Python3.6+

تنسيق الإدخال

تنسيق الإدخال (تفضل مخطط العلامات BIOS) ، مع كل حرف تسمية له لخط واحد. يتم تقسيم الجمل بخط فارغ. 

美	B-LOC
国	I-LOC
的	O
华	B-PER
莱	I-PER
士	I-PER

我	O
跟	O
他	O

تشغيل الرمز

  1. تعديل معلومات التكوين في run_ner_xxx.py أو run_ner_xxx.sh .
  2. sh scripts/run_ner_xxx.sh

ملاحظة : بنية ملف النموذج 

 ├── prev_trained_model
|  └── bert_base
|  |  └── pytorch_model.bin
|  |  └── config.json
|  |  └── vocab.txt
|  |  └── ......

نتيجة Cluener

الأداء العام لبيرت على ديف :

الدقة (الكيان) استدعاء (كيان) درجة F1 (الكيان)
بيرت+softmax 0.7897 0.8031 0.7963
بيرت+CRF 0.7977 0.8177 0.8076
بيرت+سبعة 0.8132 0.8092 0.8112
بيرت+سبان+adv 0.8267 0.8073 0.8169
Bert-Small (6 طبقات)+span+kd 0.8241 0.7839 0.8051
Bert+Span+Focal_loss 0.8121 0.8008 0.8064
Bert+span+label_smoothing 0.8235 0.7946 0.8088

ألبرت لكلوانر

الأداء العام لألبرت على ديف :

نموذج إصدار الدقة (الكيان) استدعاء (كيان) F1 (الكيان) وقت القطار/الحقبة
ألبرت base_google 0.8014 0.6908 0.7420 0.75x
ألبرت large_google 0.8024 0.7520 0.7763 2.1x
ألبرت xlarge_google 0.8286 0.7773 0.8021 6.7x
بيرت جوجل 0.8118 0.8031 0.8074 -----
ألبرت base_bright 0.8068 0.7529 0.7789 0.75x
ألبرت large_bright 0.8152 0.7480 0.7802 2.2x
ألبرت xlarge_bright 0.8222 0.7692 0.7948 7.3x

نتيجة Cner

الأداء الكلي لـ BERT على DEV (اختبار) :

الدقة (الكيان) استدعاء (كيان) درجة F1 (الكيان)
بيرت+softmax 0.9586 (0.9566) 0.9644 (0.9613) 0.9615 (0.9590)
بيرت+CRF 0.9562 (0.9539) 0.9671 ( 0.9644 ) 0.9616 (0.9591)
بيرت+سبعة 0.9604 ( 0.9620 ) 0.9617 (0.9632) 0.9611 ( 0.9626 )
Bert+Span+Focal_loss 0.9516 (0.9569) 0.9644 (0.9681) 0.9580 (0.9625)
Bert+span+label_smoothing 0.9566 (0.9568) 0.9624 (0.9656) 0.9595 (0.9612)
يوسع
معلومات إضافية
تطبيقات ذات صلة
نوصي لك
أخبار ذات صلة الكل