LangGraphRAG

langgraphrag

Langgraphrag是一種基於終端檢索的生成（RAG）系統，該系統使用Langgraph實施。該體系結構旨在通過通過一系列涉及消息歷史記錄緩存，查詢轉換和從矢量數據庫檢索文檔檢索的過程來處理查詢來處理查詢。

項目結構

該項目分為幾個模塊，每個模塊負責特定功能：

1. 體系結構：定義抹布系統的流程。
2. 數據：包含數據文件和模型。
3. 模塊：包含核心邏輯和功能。

設置說明

請按照以下步驟設置並運行項目：

1. 克隆存儲庫：

   git clone https://github.com/ranguy9304/LangGraphRAG.git
   cd LangGraphRAG

2. 創建虛擬環境：

   python3.12 -m venv venv
   source venv/bin/activate  # On Windows use `venvScriptsactivate`

3. 安裝要求：

   pip install -r requirements.txt
   choco install wkhtmltopdf

4. 配置環境變量：

   • 複製示例環境文件：

     cp .env.example .env

   • 修改.env文件以添加您的GPT密鑰：

      OPENAI_API_KEY = your_gpt_key_here

   • 如果使用網頁，請添加您的網頁URL（在沒有報價的情況下將其分開）：

      URLS = url1,url2

   • 如果下載網頁，則將GET_WEB_PAGES_TO_PDF設置為true否則false：

      GET_WEB_PAGES_TO_PDF = False
     

   • 如果已經有pdf else false，則將CONVERT_PDF_TO_MD設置為true：

      CONVERT_PDF_TO_MD = True
     

   • 如果使用PDF文檔直接將它們存儲在INTERMEDIATE_PDF_DIR中使用的路徑中
   • 如果使用.md文檔將它們直接存儲在DATA_DIR中使用的路徑中

5. 設置文檔：從根目錄運行

   python modules/processDocs.py

   這設置了網頁和文檔。不要忘記根據需要修改.env中的文檔處理參數。

6. 運行主要程序：

   python main.py

用法

• 系統通過通過不同的過程將查詢來處理查詢。
• 它使用langgraph來管理模塊之間的流程和交互。

圖

向量數據庫創建

抹布架構

貢獻

請隨意分叉存儲庫並提交拉動請求。對於重大更改，請打開一個問題，討論您想更改的內容。

執照

麻省理工學院