หน้าแรก>การเขียนโปรแกรมที่เกี่ยวข้อง>ซอร์สโค้ดอื่น ๆ
ดาวน์โหลด

readme

คุณสมบัติ

  • ใช้โมเดล LSI เพื่อค้นหาประโยคที่คล้ายกัน
  • ดัชนีได้รับการอัปเดตเป็นพื้นหลังโดยคนงานแยกต่างหาก
  • ดัชนีได้รับการอัปเดตในการเพิ่มข้อความใหม่ทุกครั้ง
  • แคชที่แข็งแกร่งทางด้านลูกค้า
  • graphql api
  • หากการทดสอบผ่านภาพ Docker ถูกสร้างขึ้นโดยอัตโนมัติโดยการกระทำของ GitHhub และอัปโหลดไปยัง Docker Hub

ข้อ จำกัด

  • ดัชนีทั้งหมดถูกเก็บไว้ใน RAM ดังนั้นสิ่งนี้จะไม่ทำงานสำหรับชุดข้อมูลขนาดใหญ่
  • ปัจจุบันรองรับผู้ปฏิบัติงานพื้นหลังเพียงหนึ่งอินสแตนซ์
  • ดัชนีได้รับการอัปเดตในการเพิ่มข้อความใหม่ทุกครั้งซึ่งจะไม่ทำงานสำหรับโหลดสูง (ในสถานการณ์จริงในโลกแห่งความเป็นจริงฉันจะอัปเดตว่าทุก 10 นาที)

สถาปัตยกรรมและสแต็ค

ลูกค้า

  • typescript / react
  • Apollo ไคลเอน

เซิร์ฟเวอร์

  • aiohttp เป็นเซิร์ฟเวอร์ http
  • tartiflette สำหรับ graphql (สามารถพบสคีมาได้ที่นี่)
  • Mongo เป็น db
  • Gensim สำหรับรุ่น LSI
  • Spacy เพื่อแยกข้อความเป็นประโยค
  • MongoDB เคอร์เซอร์ที่ปรับแต่งได้และคอลเลกชันต่อยอดสำหรับ PubSub

วิ่ง

เพื่อเรียกใช้การผลิตสร้างลองสิ่งต่อไปนี้ สิ่งนี้จะดึงภาพที่สร้างไว้ล่วงหน้าจาก Docker Hub

 นักเทียบท่า

สำหรับการพัฒนา (สิ่งนี้จะสร้างภาพนักเทียบท่าจากแหล่งที่มาซึ่งอาจใช้เวลาสักครู่):

 Docker-compose -f docker-compose.dev.yml up

ตัวแปรสภาพแวดล้อม

เซิร์ฟเวอร์

SIMTXT_DB_URI URI สำหรับฐานข้อมูล Mongo (ค่าเริ่มต้น: mongodb://localhost:27017 )
SIMTXT_INDEX_MIN_SCORE หากคะแนนความคล้ายคลึงกันมากกว่าค่านี้เราจะรวมประโยคไว้ในรายการประโยคที่คล้ายกัน (ค่าเริ่มต้น: 0.1 )
SIMTXT_LSI_NUM_TOPIC จำนวนหัวข้อสำหรับรุ่น LSI (ค่าเริ่มต้น: 100 )

หากคุณมีชุดข้อมูลขนาดเล็กและไม่ได้รับประโยคที่คล้ายกันลองเปลี่ยน SIMTXT_INDEX_MIN_SCORE เป็น 0 ตัวอย่างเช่น SIMTXT_INDEX_MIN_SCORE=0 docker-compose up

ลูกค้า

REACT_APP_GRAPHQL_URI uri สำหรับ graphql api (ค่าเริ่มต้น: http://localhost:8080/graphql )

การทดสอบและผ้าสำลี

เซิร์ฟเวอร์

 pytest
Pylint Simtxt
mypy simtxt

ลูกค้า

 การทดสอบเส้นด้าย -watchall = false
NPX ESLINT SRC
ขยาย
ข้อมูลเพิ่มเติม
แอปที่เกี่ยวข้อง
แนะนำสำหรับคุณ
ข้อมูลที่เกี่ยวข้อง ทั้งหมด