DataChad

Datachad v3?

นี่คือแอพที่ให้คุณถามคำถามเกี่ยวกับแหล่งข้อมูลใด ๆ โดยใช้ประโยชน์จากการฝังฐานข้อมูลเวกเตอร์โมเดลภาษาขนาดใหญ่และสุดท้าย แต่ไม่น้อยที่สุด

มันทำงานอย่างไร?

1. อัปโหลด file(s) ใด ๆ หรือป้อน path หรือ url ใด ๆ เพื่อสร้างฐานความรู้ซึ่งสามารถมีไฟล์หลายไฟล์ทุกประเภทรูปแบบและเนื้อหาและสร้างคำถามที่พบบ่อยอัจฉริยะซึ่งเป็นรายการของ Q & AS หมายเลขที่รวบรวมไว้
2. แหล่งข้อมูลหรือไฟล์ถูกโหลดและแยกออกเป็นชิ้นเอกสารข้อความ
3. ชิ้นเอกสารข้อความถูกฝังอยู่โดยใช้ OpenAI หรือ HuggingFace Embeddings
4. Embeddings จะถูกเก็บไว้เป็นชุดข้อมูลเวกเตอร์ไปยัง Hub ฐานข้อมูลของ ActiveLoop
5. Langchain ถูกสร้างขึ้นประกอบด้วยการเลือกแบบกำหนดเองของรุ่น LLM ( gpt-3.5-turbo โดยค่าเริ่มต้น) ร้านค้าเวกเตอร์หลายแห่งเป็นฐานความรู้
6. เมื่อถามคำถามไปยังแอพโซ่จะฝังพรอมต์อินพุตและทำการค้นหาความคล้ายคลึงกันในร้านค้าเวกเตอร์ที่ให้มาและใช้ผลลัพธ์ที่ดีที่สุดเป็นบริบทสำหรับ LLM เพื่อสร้างการตอบสนองที่เหมาะสม
7. ในที่สุดประวัติการแชทถูกแคชในพื้นที่เพื่อเปิดใช้งาน chatgpt เช่นการสนทนาถาม - ตอบ

ดีที่รู้

• แอปทำงานบน py>=3.10 เท่านั้น!
• ในการรันในพื้นที่หรือปรับใช้ที่ไหนสักแห่งให้ดำเนินการ cp .env.template .env และตั้งค่าข้อมูลรับรองในไฟล์. .env ที่สร้างขึ้นใหม่ ตัวเลือกอื่น ๆ คือการตั้งค่าตัวแปรสภาพแวดล้อมของระบบด้วยตนเองหรือจัดเก็บไว้ใน .streamlit/secrets.toml เมื่อโฮสต์ผ่าน Streamlit
• หากคุณมีข้อมูลรับรองตามที่อธิบายไว้ข้างต้นคุณสามารถกด submit ในการรับรองความถูกต้องโดยไม่ต้องป้อนข้อมูลรับรองของคุณในแอพอีกครั้ง
• หากคุณเรียกใช้แอพพิจารณาการแก้ไขการกำหนดค่าใน datachad/backend/constants.py เช่นการเปิดใช้งานตัวเลือกขั้นสูง
• ข้อมูลของคุณจะไม่โหลด? อย่าลังเลที่จะเปิดปัญหาหรือประชาสัมพันธ์และมีส่วนร่วม!
• ใช้รุ่นก่อนหน้าเช่น V1 หรือ V2 สำหรับฟังก์ชั่นดั้งเดิมและ UI

เป็นอย่างไร?

รายการสิ่งที่ต้องทำ

หากคุณต้องการมีส่วนร่วมอย่าลังเลที่จะคว้างานใด ๆ

• refactor ใช้โดยเฉพาะอย่างยิ่งรถตัก
• เพิ่มตัวเลือกในการเลือกรุ่นและการฝัง
• เปิดใช้งานโหมดท้องถิ่น / ส่วนตัวอย่างเต็มที่
• เพิ่มตัวเลือกเพื่ออัปโหลดหลายไฟล์ไปยังชุดข้อมูลเดียว
• decouple datachad modules จาก streamlit
• ลบโหมดท้องถิ่นทั้งหมดและสิ่งอื่น ๆ v1
• โหลดฐานความรู้ที่มีอยู่
• ลบฐานความรู้ที่มีอยู่
• เปิดใช้งานการตอบสนองการสตรีมมิ่ง
• แสดงบริบทที่ดึงมา
• refactor ui
• แนะนำคำถามที่พบบ่อยอัจฉริยะ
• แลกเปลี่ยนที่เก็บไฟล์ที่ดาวน์โหลดด้วย tempfile
• เพิ่มการสร้างผู้ใช้และเข้าสู่ระบบ
• เพิ่มประวัติการแชทต่อผู้ใช้
• ทำให้ทุกอะซิงโครนัส
• ใช้แอพเส้นทาง fastapi และแอพแบ็กเอนด์
• ใช้ส่วนหน้า (ตอบสนองหรืออะไรก็ตาม)
• บรรจุแอพ