gpt4 pdf chatbot langchain

gpt -4＆langchain -pdfファイルのchatgptチャットボットを作成します

新しいGPT-4 APIを使用して、複数の大型PDFファイルのChatGPTチャットボットを構築します。

使用される技術スタックには、Langchain、Pinecone、TypeScript、Openai、およびnext.jsが含まれます。 Langchainは、スケーラブルなAI/LLMアプリとチャットボットを簡単に構築できるようにするフレームワークです。 Pineconeは、埋め込みとPDFをテキストに保存するためのVectorStoreです。後で同様のドキュメントを取得します。

チュートリアルビデオ

ご質問がある場合は、不一致に参加してください

このレポとチュートリアルのビジュアルガイドは、 visual guideフォルダーにあります。

エラーが発生した場合は、このページのさらに下のトラブルシューティングセクションを確認してください。

プレリュード：システムにノードを既にダウンロードしていることを確認してください。バージョンは18歳以上であることを確認してください。

発達

1. レポをクローンするか、zipをダウンロードします

 git clone [github https url]

2. パッケージをインストールします

最初にnpm install yarn -gグローバルにYARNをインストールします（まだおかしい場合は）。

その後、実行：

 yarn install

インストール後、 node_modulesフォルダーが表示されるようになりました。

3. .envファイルを設定します

• .env.example into .env your .envファイルは次のようになります。

 OPENAI_API_KEY=

PINECONE_API_KEY=
PINECONE_ENVIRONMENT=

PINECONE_INDEX_NAME=

• Openaiにアクセスして、APIキーを取得し、 .envファイルに挿入します。
• PineconeにアクセスしてAPIキーを作成および取得し、ダッシュボードから環境とインデックス名を取得します。

4. configフォルダーで、 PINECONE_NAME_SPACE namespaceに置き換えますnpm run ingest実行するときに、埋め込みをPineconeに保存します。この名前空間は、後でクエリと取得に使用されます。

5. utils/makechain.tsチェーンでは、独自のユーザーのQA_PROMPT変更します。 gpt-4 APIにアクセスできる場合は、 new OpenAIのgpt-4にmodelName変更します。 gpt-4 APIにアクセスできることをこのレポの外部で確認してください。そうしないと、アプリケーションが機能しません。

PDFファイルを埋め込みに変換します

このレポは、複数のPDFファイルをロードできます

1. docsフォルダー内で、PDFファイルを含むPDFファイルまたはフォルダーを追加します。

2. スクリプトを実行してyarn run ingest 「摂取」してドキュメントを埋め込みます。エラーが発生した場合は、以下のトラブルシューティングを行います。

3. Pineconeダッシュボードを確認して、名前空間とベクトルが追加されていることを確認してください。

アプリを実行します

埋め込みとコンテンツがPineconeに正常に追加されたことを確認したら、App npm run devを実行してローカル開発環境を起動し、チャットインターフェイスに質問を入力できます。

トラブルシューティング

一般に、ソリューションについては、このリポジトリのissuesとdiscussionsセクションに注意してください。

一般的なエラー

• 最新のノードバージョンを実行していることを確認してください。 node -vを実行します
• 別のPDFを試してみるか、最初にPDFをテキストに変換します。 PDFが破損したり、スキャンされたり、OCRがテキストに変換する必要がある可能性があります。
• Console.log env変数を調整し、それらが公開されていることを確認します。
• LangchainとPineconeの同じバージョンをこのリポジトリと使用していることを確認してください。
• 有効な（および動作）APIキー、環境、インデックス名を含む.envファイルを作成したことを確認してください。
• OpenAIでmodelName変更する場合は、適切なモデルのAPIにアクセスできることを確認してください。
• Billingsアカウントに十分なOpenAIクレジットと有効なカードがあることを確認してください。
• グローバル環境に複数のOpenAPIキーがないことを確認してください。もしそうなら、プロジェクトのローカルenvファイルはSystems env変数によって上書きされます。
• APIキーをprocess.envにハードコーディングしてみてください。ENV変数まだ問題がある場合。

松ぼっくりエラー

• pinecone.tsおよび.envファイルのPineconeダッシュボードenvironmentとindex環境と一致することを確認してください。
• ベクトル寸法を1536に設定していることを確認してください。
• Pineconeの名前空間が小文字にあることを確認してください。
• スターター（無料）プランのユーザーの松ぼっくりインデックスは、7日間の不活動の後に削除されます。これを防ぐには、7日前にAPIリクエストをPineconeに送信してカウンターをリセットします。
• 新しいPineconeプロジェクト、インデックス、およびクローンされたリポジトリでゼロから再試行します。

クレジット

このレポのフロントエンドは、Langchain-chat-nextjsに触発されています