librai server

Libraiサーバー - ドキュメント処理と埋め込みサービス

説明

このプロジェクトは、OpenAI APIを使用してドキュメントを埋め込みに処理し、それらをQDRANTベクターデータベースに保存するnode.jsアプリケーションです。ファイルアップロード用の最新のWebインターフェイスを備えており、ドキュメントベースのインタラクションを強化するためにチャットボットのフロントエンドで消費できるバックエンドサービスを提供します。

librai-uiとのペア。

特徴

• Alpine.jsとTailwind CSSで構築された最新のレスポンシブWebインターフェイス
• ドラッグアンドドロップファイルのアップロードサポート
• ファイルアップロードの進行状況追跡
• PDFおよびEPUBファイルのオプションのページ範囲除外
• PDF、EPUB、TXT、およびMDファイル形式をサポートします
• アップロードされたファイルからテキストコンテンツを抽出および処理します
• OpenAIのAPIを使用して埋め込みを生成します
• 効率的な検索のためにQDRANTに埋め込みを保存します
• プログラマティックアクセス用のRESTFUL APIエンドポイント

インストール

1. リポジトリをクローンします：

   git clone < repository-url >
   cd < repository-directory >

2. 依存関係をインストールします：

   npm install

3. ルートディレクトリに.envファイルを作成し、次の環境変数を追加します。

    PORT=3000
   OPENAI_API_KEY=<your-openai-api-key>
   OPENAI_EMBEDDINGS_MODEL=<your-openai-embeddings-model>
   QDRANT_API_URL=<your-qdrant-api-url>
   QDRANT_API_KEY=<your-qdrant-api-key>
   QDRANT_COLLECTION=<your-qdrant-collection-name>
   

使用法

1. プロジェクトの構築：

   npm run build

2. サーバーを開始します：

   npm start

3. Webインターフェイスへのアクセス：ブラウザを開き、 http://localhost:3000に移動します

   または、プログラムでAPIを使用します。

   curl -X POST http://localhost:3000/api/files/upload -F ' file=@/path/to/your/file.pdf ' 

発達

開発の目的で、サーバーを時計モードで実行できます。

npm run dev

CSSのホットリロードを有効にするには、このコマンドを別の端末で実行します。

npm run dev:css

貢献

貢献は大歓迎です！問題を開くか、改善またはバグ修正のためのプルリクエストを送信してください。

ライセンス

このプロジェクトは、GNU Affero General Public License v3.0（AGPL-3.0）に基づいてライセンスされています。詳細については、license.txtファイルを参照してください。