news article vector search

⚡️快速快速NRC搜索

[实验]

此存储库的目的是使用多语言LLM和QDRANT（象限）向量db构建闪耀的快速语义神经搜索。使用以下技术人员

• QDRANT
• 快感
• 句子变压器
• Distiluse-base-Multlindual-casted-v1（模型）
  • 生成对齐的向量空间，即不同语言的类似输入，在矢量空间中映射
  • 14种语言（包括NL）
• 标量量化（用于更快的推理时间和记忆效率）
  • 8位

数据

数据是通过使用NRC刮板API刮擦的。结果是NRC文章项目> 6500的数据集以及完整文章> 45000的块。

安装

 pip install -r requirements.txt

用法

QDRANT

 http://localhost:6333

API

 http://localhost:8000

Web UI

 index.html

昂首阔步

 http://localhost:8000/docs