Text Embeddings API

نصوص النص API

يوفر هذا المشروع واجهة برمجة تطبيقات REST لإنشاء تضمينات نصية باستخدام نموذج محولات الجملة. تم تصميمه باستخدام Flask ويهدف إلى تبسيط عملية تحويل النص إلى تضمينات لمهام NLP المختلفة.

سمات

• توليد تضمين النص : يحول نص الإدخال إلى تضمينات باستخدام نموذج BAAI/bge-base-zh .
• معالجة الأخطاء : معالجة خطأ قوية لإدارة الحقول المفقودة والأخطاء غير المتوقعة.
• التسجيل : تسجيل شامل لرصد طلبات API وتصحيح الأخطاء.

الاستخدام

نقطة نهاية API

• Post / : يقبل حمولة JSON مع حقل text وإرجاع التضمينات المقابلة.

طلب مثال

curl -X POST http:// < server_address > / -H " Content-Type: application/json " -d ' {"text": "Your text here"} '

استجابة مثال

{
  "Embeddings" : [ ... ]
}

التعقيد والتحديات

1. تكامل النموذج

• التعقيد : دمج نموذج محولات الجملة وضمان تحميله بشكل صحيح.
• الحل : يستخدم SentenceTransformer من حزمة sentence_transformers لتحميل النموذج الذي تم تدريبه مسبقًا.

2. معالجة الأخطاء

• التعقيد : التعامل مع الأخطاء بأمان ، مثل الحقول المفقودة أو فشل النموذج.
• الحل : تم تنفيذ كتل TRAW-EVEST للقبض على أخطاء السجل وتسجيلها ، وإعادة رموز حالة HTTP المناسبة.

3. قطع الأشجار

• التعقيد : ضمان تسجيل شامل لتصحيح الأخطاء والمراقبة.
• الحل : تم تكوين التسجيل لالتقاط جميع مستويات السجلات وتضمن رسائل سجل مفصلة.

ابدء

المتطلبات الأساسية

• بيثون 3.6+
• قارورة
• محولات الجملة

تثبيت

1. استنساخ المستودع:

   git clone https://github.com/faisal-fida/text-embeddings-API.git
   cd text-embeddings-API

2. تثبيت التبعيات:

   pip install -r requirements.txt

3. تشغيل التطبيق:

   python main.py

خاتمة

يوفر واجهة برمجة التطبيقات هذه نهجًا فعالًا ومباشرًا لإنشاء تضمينات نصية ، مع معالجة أخطاء قوية وتسجيلها لضمان الموثوقية. إنه مثالي للتطبيقات التي تحتاج إلى تمثيل نص سريع ودقيق لمهام NLP.