หน้าแรก>การเขียนโปรแกรมที่เกี่ยวข้อง>ซอร์สโค้ดอื่น ๆ
ดาวน์โหลด

เวทีหนึ่ง

  1. ไฟล์ผ้าขี้ริ้ว
    • รูปแบบภาษาขนาดใหญ่:
      • โมเดลภาษา: "Databricks/DBRX-Instruct": https://huggingface.co/databricks/dbrx-instruct
      • ไคลเอนต์ nvidia: https://build.nvidia.com/databricks/dbrx-instruct
    • ฐานข้อมูลเวกเตอร์:
      • Milvus: https://milvus.io/
      • โมเดลการฝัง: https://huggingface.co/thenlper/gte-base
      • สนับสนุนระบบปฏิบัติการ: Linux
        • ปัจจุบันไม่รองรับ Windows OS เนื่องจาก milvus_lite ไม่รองรับ Windows OS
        • จะเลือกฐานข้อมูลที่แตกต่างกันในอนาคตเพื่อแก้ไขปัญหานี้
  2. ไฟล์ pdf_to_txt
    • มือจับปัจจุบัน:
      • PDF (ข้อความ) ถึง txt
      • จำเป็นต้องปรับปรุงการประมวลผลล่วงหน้าเพื่อป้อนรูปแบบ RAG ล่วงหน้า
  3. ความคืบหน้า (10/01/2024): เวอร์ชันที่เรียบง่ายทำงานบน Linux ด้วยความสามารถในการสืบค้นหนึ่งรายการ
    • (10/02/2024): สามารถนำคอลเลกชันกลับมาใช้ซ้ำได้อีกครั้ง

ขั้นตอนที่สอง (ปัจจุบัน)

  1. การสร้างเครื่องอ่าน PDF โดยใช้ OCR
    • ยอมรับ PDF ที่อัปโหลด
    • อ่านโดยใช้ EasyCh
    • จัดเก็บผลลัพธ์ในไฟล์โดยเฉพาะอย่างยิ่งหนึ่งไฟล์สำหรับแต่ละ pdf
  2. ไฟล์ RAG รองรับคำถามและคำตอบแบบเรียกซ้ำ
  3. สามารถจัดเก็บ QA ประวัติศาสตร์ในไฟล์ที่เกี่ยวข้อง

ขั้นตอนที่สาม

  1. รวมผ้าขี้ริ้วกับเครื่องอ่าน PDF
  2. รองรับหน่วยความจำระยะยาว LLM
    • เพิ่มประวัติ QA ไปยังที่เก็บข้อมูลอื่น
    • รวมคำตอบกับประวัติศาสตร์

การทำความสะอาดใช้ยาและเพิ่มประสิทธิภาพ

  1. การเพิ่มประสิทธิภาพความเร็วและหน่วยความจำ

การปรับใช้?

ขยาย
ข้อมูลเพิ่มเติม
แอปที่เกี่ยวข้อง
แนะนำสำหรับคุณ
ข้อมูลที่เกี่ยวข้อง ทั้งหมด