memista

Memista: высокопроизводительный сервис поиска вектора

Memista-это высокопроизводительный сервис поиска вектора, написанная в ржавчине, которая предоставляет простой HTTP API для хранения и получения текстовых кусков с помощью связанных векторных внедрений. Он объединяет SQLite для хранения метаданных с USERCH для эффективного поиска сходства вектора.

Функции

• Быстрый поиск сходства вектора с использованием USERCH
• Постоянное хранение текстовых кусков и метаданных в SQLite
• Поддержка с несколькими базами данных через распределение Database_id
• Документация OPENAPI с несколькими вариантами пользовательского интерфейса (Swagger, Redoc, Rapidoc)
• Настраивается через переменные среды
• Асинхровый ввод/вывод для высокой производительности

API конечные точки

Post /v1 /insert

Вставьте текстовые куски с их встроенными в указанную базу данных.

Post /v1 /search

Поиск подобных кусков с использованием векторных внедрений.

Удалить /v1 /Drop

Отбросьте конкретную базу данных и связанный с ним векторный индекс.

Конфигурация

Служба может быть настроена с использованием переменных среды:

• DATABASE_PATH : Path to SQLite Database File (по умолчанию: "Memista.db")
• SERVER_HOST : адрес хоста для привязки (по умолчанию: "127.0.0.1")
• SERVER_PORT : порт для прослушивания (по умолчанию: 8083)
• LOG_LEVEL : уровень ведения журнала (по умолчанию: "info")

Быстрый старт

1. Установить ржавчину и груз
2. Клонировать это хранилище
3. Создайте файл .env с вашей конфигурацией (необязательно)
4. Запустите сервер:

cargo run

Сервер начнется, и документация по API будет доступна по адресу:

• Swagger UI: http: // localhost: 8083/swagger
• Redoc: http: // localhost: 8083/redoc
• Rapidoc: http: // localhost: 8083/rapidoc
• Openapi JSON: http: // localhost: 8083/openapi.json

Пример использования

Вставьте куски

curl -X POST http://localhost:8083/v1/insert 
  -H " Content-Type: application/json " 
  -d ' {
    "database_id": "my_db",
    "chunks": [{
      "embedding": [0.1, 0.2],
      "text": "Sample text",
      "metadata": "{"source": "document1"}"
    }]
  } '

Поиск кусков

curl -X POST http://localhost:8083/v1/search 
  -H " Content-Type: application/json " 
  -d ' {
    "database_id": "my_db",
    "embeddings": [[0.1, 0.2]],
    "num_results": 5
  } ' 

Зависимости

Проект использует несколько ключевых зависимостей:

• Actix-Web: веб-фреймворк
• Usearch: поиск сходства вектора
• Async-Sqlite: Async Sqlite Database Interface
• Apistos: генерация документации OpenAPI
• Серде: сериализация/десериализация

Полный список зависимостей см. В файле Cargo.toml.

Лицензия

Этот проект лицензирован в рамках общей публичной лицензии GNU v3.0 (GPL -3.0) - см. Ниже приведено в резюме:

GNU General Public License v3.0 (GPL-3.0)

Разрешения:

• Коммерческое использование
• Распределение
• Модификация
• Патентное использование
• Частное использование

Условия:

• Раскрыть источник
• Лицензия и уведомление об авторском праве
• Та же лицензия
• Состояние изменения

Ограничения:

• Обязанность
• Гарантия

Для полного текста лицензии см. Лицензию или посетите https://www.gnu.org/licenses/gpl-3.0.en.html

? Контакт

[email protected]