Text Embeddings API

ข้อความ Embeddings API

โครงการนี้มี REST API สำหรับการสร้างการฝังข้อความโดยใช้โมเดล Transformers ประโยค มันถูกสร้างขึ้นโดยใช้ขวดและมีจุดมุ่งหมายเพื่อลดความซับซ้อนของกระบวนการแปลงข้อความเป็น embeddings สำหรับงาน NLP ต่างๆ

คุณสมบัติ

• การสร้างการฝังข้อความ : แปลงข้อความอินพุตเป็น embeddings โดยใช้โมเดล BAAI/bge-base-zh
• การจัดการข้อผิดพลาด : การจัดการข้อผิดพลาดที่แข็งแกร่งเพื่อจัดการฟิลด์ที่หายไปและข้อผิดพลาดที่ไม่คาดคิด
• การบันทึก : การบันทึกที่ครอบคลุมสำหรับการตรวจสอบคำขอ API และการดีบัก

การใช้งาน

จุดสิ้นสุด API

• โพสต์ / : ยอมรับเพย์โหลด JSON พร้อมฟิลด์ text และส่งคืนการฝังที่เกี่ยวข้อง

คำขอตัวอย่าง

curl -X POST http:// < server_address > / -H " Content-Type: application/json " -d ' {"text": "Your text here"} '

การตอบสนองตัวอย่าง

{
  "Embeddings" : [ ... ]
}

ความซับซ้อนและความท้าทาย

1. การรวมโมเดล

• ความซับซ้อน : การรวมโมเดล Transformers ประโยคและทำให้มั่นใจได้ว่าโหลดได้อย่างถูกต้อง
• วิธีแก้ปัญหา : ใช้ SentenceTransformer จากแพ็คเกจ sentence_transformers เพื่อโหลดโมเดลที่ผ่านการฝึกอบรมมาก่อน

2. การจัดการข้อผิดพลาด

• ความซับซ้อน : การจัดการข้อผิดพลาดอย่างสง่างามเช่นฟิลด์ที่หายไปหรือความล้มเหลวของแบบจำลอง
• วิธีแก้ปัญหา : นำบล็อก Except Except เพื่อจับและบันทึกข้อผิดพลาดส่งคืนรหัสสถานะ HTTP ที่เหมาะสม

3. การบันทึก

• ความซับซ้อน : สร้างความมั่นใจในการบันทึกที่ครอบคลุมสำหรับการดีบักและการตรวจสอบ
• วิธีแก้ปัญหา : การกำหนดค่าการบันทึกเพื่อจับบันทึกทุกระดับและรวมข้อความบันทึกโดยละเอียด

เริ่มต้น

ข้อกำหนดเบื้องต้น

• Python 3.6+
• ขวด
• ผู้เปลี่ยนประโยค

การติดตั้ง

1. โคลนที่เก็บ:

   git clone https://github.com/faisal-fida/text-embeddings-API.git
   cd text-embeddings-API

2. ติดตั้งการพึ่งพา:

   pip install -r requirements.txt

3. เรียกใช้แอปพลิเคชัน:

   python main.py

บทสรุป

API นี้ให้วิธีการที่มีประสิทธิภาพและตรงไปตรงมาในการสร้างการฝังข้อความด้วยการจัดการข้อผิดพลาดที่แข็งแกร่งและการบันทึกเพื่อให้แน่ใจว่าน่าเชื่อถือ เหมาะอย่างยิ่งสำหรับแอปพลิเคชันที่ต้องการการแสดงข้อความที่รวดเร็วและแม่นยำสำหรับงาน NLP