mettis

MetTISDB：通过 *scratch构建的分布式Lite矢量数据库。

它做什么：

• 使用接近等级的全文搜索
• 通过HNSW +余弦距离搜索语义搜索
• 集成的基本文本嵌入式服务（句子变压器周围的Python HTTP API）
• 互合融合全文 +语义搜索结果的相互等级融合
• 内存服务 +磁盘持久性
• 使用筏的片段复制的故障耐受性

不是什么：

• 准备生产（代码现在非常sus）
• 完美（因为善良的敌人）

建筑学

入门

使用PIP安装基本文本third_party服务的基本文本嵌入式服务的依赖项。

pip install -r requirements.txt

然后像这样开始服务：

uvicorn main:app

设置一个环境变量EmbeddingHost ，指向嵌入式服务的地址

 export EmbeddingHost="http://127.0.0.1:8000/embeddings"

继续启动向量数据库的实例

标志

• HTTPADDR：HTTP API服务的地址
• JOINADDR：主要节点的HTTP API服务地址
• Nodeid：节点的唯一标识符
• Raftaddr：节点的筏地址

运行单节点

go run cmd/server/main.go -httpAddr 127.0.0.1:8111 -nodeId 0 -raftAddr 127.0.0.1:9000

API

发布 /索引

索引文档

curl --location ' 127.0.0.1:8111/index ' --header ' Content-Type: application/json ' --data ' {"text": "some text"} ' 

获取 /搜索

搜索

curl --location --request GET ' 127.0.0.1:8111/search ' 
--header ' Content-Type: application/json ' 
--data ' {"query": "some text"} ' 

运行3节点群集

在不同的机器上运行以下命令（至少要模拟项目的不同实例）

go run cmd/server/main.go -httpAddr 127.0.0.1:8111 -nodeId 0 -raftAddr 127.0.0.1:9000

复制品在127.0.0.1:9000上加入初选

go run cmd/server/main.go -httpAddr 127.0.0.1:8112 -nodeId 1 -raftAddr 127.0.0.1:9001 -joinAddr 127.0.0.1:8111

go run cmd/server/main.go -httpAddr 127.0.0.1:8113 -nodeId 2 -raftAddr 127.0.0.1:9002 -joinAddr 127.0.0.1:8111

托多

• 索引
  • 使用goroutines处理术语的并发索引
• 检索
  • 布尔查询
  • 并发记忆搜索
• 排行
• API
  • 批量指数
  • 文档删除
• 贮存
  • 段压实
• 复制
  • 快照工作？
• 部署
  • 容器化
• 代码质量
  • 我犯下的所有暴行的ance悔。

*没有这些资源是不可能的：

• 让我们构建一个全文搜索引擎
• 探索成员
• hraftd
• 分层通航的小世界
• 信息检索实施和评估搜索引擎
• GO分布式服务