vector admin

O UI universal e o conjunto de ferramentas para gerenciar bancos de dados de vetores em escala.

| | | DOCs | Instância hospedada

Rápido! Você pode me dizer exatamente quais informações estão incorporadas no seu banco de dados Pinecone ou Chroma Vector? Aposto que você não pode. Enquanto essas equipes se concentram na construção da arquitetura subjacente, facilitamos o gerenciamento de dados vetoriais sem as dores de cabeça e as chamadas da API.

Chamamos isso de VectorAdmin e queremos ser o melhor gerenciamento de banco de dados do Vector para vetor.

Veja mais capturas de tela

Assista à demonstração!

Visão geral do produto

O VectorAdmin pretende ser um aplicativo de pilha completa que oferece controle total sobre seus dados vetoriais pesados ​​que você está incorporando por meio de uma API ou usando ferramentas como o Langchain, que não mostram o que você acabou de salvar em seu banco de dados.

O VectorAdmin é um produto multiusuário capaz completo que você pode ser executado localmente via Docker e hospedar remotamente e gerenciar vários bancos de dados vetoriais de uma só vez.

O VectorAdmin é mais do que uma única ferramenta. O VectorAdmin é um conjunto de ferramentas que facilitam a interação e a compreensão do texto vetorizado, sem comprometer os controles que você esperaria de um sistema de gerenciamento de banco de dados tradicional.

Algumas características legais do VectorAdmin

• Suporte e supervisão de instância multi-usuários
• Veja atomicamente, atualize e exclua pedaços de texto singulares de incorporações.
• Copie documentos inteiros ou mesmo namespaces inteiros e incorporações sem pagar para reembolsar.
• Carregue e incorpore novos documentos diretamente no banco de dados vetorial.
• Migrar um banco de dados vetorial existente para outro tipo ou instância. ainda em andamento
• Gerencie vários bancos de dados vetoriais simultâneos de uma só vez.
• Dados de permissão e acesso a dados
• 100% de implantação em nuvem pronta.
• Os testes de regressão automatizados que são executados como espaços de nome ou coleções são atualizados com novos documentos para garantir a qualidade da resposta. ainda em andamento
• API completa, JavaScript e Python Standalone Client e Langchain Integration. ainda em andamento
• Medidas de economia de custos extremamente eficientes para gerenciar documentos muito grandes. Você nunca pagará para incorporar um documento ou transcrição enorme mais de uma vez.

Visão geral técnica

Este Monorepo consiste em três seções principais:

• document-processor : Flask App para digerir, analisar e incorporar documentos facilmente.
• frontend : um front -end Vitejs + React que você pode executar para criar e gerenciar facilmente todo o seu conteúdo.
• backend : um servidor NodeJS + Express para lidar com todas as interações e fazer todo o gerenciamento do Vectordb.
• workers : uma instância ingestão para lidar com as tarefas de fundo de processos de longa duração para o desempenho rápido.
• docker : Execute todo esse arco em um único comando como uma instância do docker recomendada .

Requisitos

• yarn e node em sua máquina
• python 3.9+ para executar scripts no document-processor/ .
• Acesso a uma chave da API OpenAI se planejar atualizar incorporação ou fazer upload de novos documentos.
• uma conta gratuita Pinecone.io ou uma instância em execução do Chromadb.

Como começar (Docker - Configuração simples)

Suba e correndo em minutos com o Docker

Como começar (ambiente de desenvolvimento)

As instruções abaixo não funcionarão no Windows.

• yarn dev:setup do diretório raiz do projeto.
• cd document-processor && python3.9 -m virtual-env v-env && source v-env/bin/activate && pip install -r requirements.txt

Em janelas de terminal separadas da raiz do projeto:

• yarn prisma:setup para criar migração e cliente do yarn dev:server
• yarn dev:frontend
• yarn dev:workers
• cd document-processor && flask run --host '0.0.0.0' --port 8888

Na primeira inicialização e visita da página inicial, você será redirecionado automaticamente para criar sua conta de administração, organização e conexão com o banco de dados.

Contribuindo

• criar problema
• Crie PR com nomes de ramificação Formato de <issue number>-<short name>
• yee Haw vamos mergulhar

Telemetria

O VectorAdmin da Mintplex Labs Inc contém um recurso de telemetria que coleta informações de uso anônimo.

Por que?

Usamos essas informações para nos ajudar a entender como o VectorAdmin é usado, para nos ajudar a priorizar o trabalho em novos recursos e correções de bugs e para nos ajudar a melhorar o desempenho e a estabilidade do VectorAdmin.

Optando por fora

Definir DISABLE_TELEMETRY em seu servidor ou docker .env Configurações para "true" para optar por não participar da telemetria.

 DISABLE_TELEMETRY="true"

O que você rastreia explicitamente?

Vamos rastrear apenas detalhes de uso que nos ajudam a tomar decisões de produtos e roteiros, especificamente:

• O servidor é iniciado ou inicializado.
• Versão da sua instalação.
• Tipo de trabalho quando executado.

Você pode verificar essas reivindicações encontrando todos os locais Telemetry.sendTelemetry é chamada. Além disso, esses eventos são gravados no log de saída para que você também possa ver os dados específicos que foram enviados - se ativados. Nenhuma IP ou outra informação de identificação é coletada. O provedor de telemetria é pós -có - um serviço de coleta de telemetria de código aberto.