news article vector search

⚡️快速快速NRC搜索

[實驗]

此存儲庫的目的是使用多語言LLM和QDRANT（象限）向量db構建閃耀的快速語義神經搜索。使用以下技術人員

• QDRANT
• 快感
• 句子變壓器
• Distiluse-base-Multlindual-casted-v1（模型）
  • 生成對齊的向量空間，即不同語言的類似輸入，在矢量空間中映射
  • 14種語言（包括NL）
• 標量量化（用於更快的推理時間和記憶效率）
  • 8位

數據

數據是通過使用NRC刮板API刮擦的。結果是NRC文章項目> 6500的數據集以及完整文章> 45000的塊。

安裝

 pip install -r requirements.txt

用法

QDRANT

 http://localhost:6333

API

 http://localhost:8000

Web UI

 index.html

昂首闊步

 http://localhost:8000/docs