LangGraphRAG

Langgraphrag

O Langgraphrag é um sistema de geração de recuperação baseado em terminal (RAG) implementado usando o Langgraph. A arquitetura foi projetada para lidar com consultas, roteando -as através de uma série de processos que envolvem cache de histórico de mensagens, transformação de consulta e recuperação de documentos de um banco de dados vetorial.

Estrutura do projeto

O projeto é dividido em vários módulos, cada um responsável por funcionalidades específicas:

1. Arquitetura : define o fluxo do sistema de pano.
2. Dados : contém arquivos de dados e modelos.
3. Módulos : abriga a lógica e as funções do núcleo.

Instruções de configuração

Siga estas etapas para configurar e executar o projeto:

1. Clone o repositório :

   git clone https://github.com/ranguy9304/LangGraphRAG.git
   cd LangGraphRAG

2. Crie um ambiente virtual :

   python3.12 -m venv venv
   source venv/bin/activate  # On Windows use `venvScriptsactivate`

3. Instale os requisitos :

   pip install -r requirements.txt
   choco install wkhtmltopdf

4. Configure as variáveis ​​de ambiente :

   • Copie o arquivo de ambiente de exemplo:

     cp .env.example .env

   • Modifique o arquivo .env para adicionar sua tecla GPT:

      OPENAI_API_KEY = your_gpt_key_here

   • Adicione seus URLs de página da web se usar páginas da web (mantenha -o separado sem citações):

      URLS = url1,url2

   • Defina o GET_WEB_PAGES_TO_PDF como true se baixar as páginas da web false:

      GET_WEB_PAGES_TO_PDF = False
     

   • Defina o CONVERT_PDF_TO_MD como true se já tiver pdf else false:

      CONVERT_PDF_TO_MD = True
     

   • Se usar os documentos em PDF os armazenar diretamente no caminho usado em INTERMEDIATE_PDF_DIR
   • Se o uso .md docs armazenam -os diretamente no caminho usado em DATA_DIR

5. Documentos de configuração : a partir da execução do diretório raiz

   python modules/processDocs.py

   Isso configura as páginas da Web e os documentos. Não se esqueça de modificar os parâmetros de processamento de documentos em .env conforme suas necessidades.

6. Execute o programa principal :

   python main.py

Uso

• O sistema lida com consultas, roteando -as por diferentes processos.
• Ele usa o Langgraph para gerenciar o fluxo e as interações entre os módulos.

Diagramas

Criação de banco de dados vetorial

Arquitetura de Rag

Contribuição

Sinta -se à vontade para bifurcar o repositório e enviar solicitações de tração. Para grandes mudanças, abra um problema para discutir o que você gostaria de mudar.

Licença

Mit