denser retriever

Аи-ретривер корпоративного уровня, предназначенный для оптимизации интеграции ИИ в ваши приложения, обеспечивая передовую точность.

Описание

Learser Retriever объединяет несколько технологий поиска в одну платформу. Он использует технику машинного обучения по повышению градиента (XGBOOST) для объединения:

• Поиски на основе ключевых слов , которые фокусируются на том, чтобы точно извлекать то, что упоминает запрос.
• Векторные базы данных , которые отлично подходят для поиска широкого спектра потенциально релевантных ответов.
• Машинное обучение перерывывает, которые настраивают результаты, чтобы обеспечить наиболее релевантные ответы, возглавляя список.

• Наши эксперименты на наборах данных MTEB показывают, что комбинация поиска ключевых слов, векторного поиска и переосмысления через модель XGBOOST (обозначенная как ES+VS+RR_N), может значительно улучшить базовую линию поиска вектора (VS).

• Проверьте более плотные эксперименты с использованием набора данных антропного контекстуального поиска здесь .

Функции

Первоначальный выпуск более плотного ретривера предоставляет следующие функции.

• Поддержка гетерогенных ретриверов, таких как поиск по ключевым словам , поиск вектора и ML Model
• Использование метода XGBOOST ML для эффективного объединения гетерогенных ретриверов
• Современная точность на сравнительном анализации MTEB
• Демонстрируя, как использовать более плотный ретривер для питания сквозных приложений, таких как чат-бот и семантический поиск

? Установка

Мы рекомендуем установить Python через Anaconda, так как мы получили отзыв о проблемах с установкой Numpy при использовании установщика с https://www.python.org/downloads/. Мы работаем над предоставлением решения этой проблемы. Чтобы установить более плотный ретривер, вы можете запустить:

Пип

pip install git+https://github.com/denser-org/denser-retriever.git#main

Поэзия

poetry add git+https://github.com/denser-org/denser-retriever.git#main

? Документация

Официальная документация размещена на retriever.denser.ai. Нажмите здесь, чтобы начать.

??разработка

Вы можете начать разработку более плотного ретривера на своей местной машине.

Смотрите Development.md для более подробной информации.

? Лицензия

Этот проект лицензирован в соответствии с условиями лицензии MIT . Смотрите лицензию для более подробной информации.

? Цитирование

 @misc { denser-retriever ,
  author = { denser-org } ,
  title = { An enterprise-grade AI retriever designed to streamline AI integration into your applications, ensuring cutting-edge accuracy. } ,
  year = { 2024 } ,
  publisher = { GitHub } ,
  journal = { GitHub repository } ,
  howpublished = { url{https://github.com/denser-org/denser-retriever} }
}