document assistant

Ash의 문서 보조원

이 Python 응용 프로그램은 사용자 쿼리에 대한 응답을 생성하기 위해 Streamlit, Pinecone (Vector Store) 및 언어 모델 (OpenAI)을 사용하여 간단한 문서 어시스턴트를 만듭니다.

HTML 형식의 문서를 다운로드하도록 명령하십시오

wget --mirror --convert-links --adjust-extension --page-requisites --no-parent -P langchain-docs --execute robots=off --user-agent="Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/86.0.4240.198 Safari/537.36" https://api.python.langchain.com/en/latest/

1. main.py

이 스크립트는 Sleamlit을 사용하여 웹 응용 프로그램을 만듭니다. 문서 지원을위한 사용자 인터페이스를 제공하여 사용자가 질문을 제출하고 출처를 포함한 답변을받을 수 있습니다.

주요 기능

• 간소화 인터페이스 : 입력 필드 및 세션 관리를 포함하여 UI에 간소화를 사용합니다.
• 소스 URL 정렬 : URL 세트를 취하고 정렬하고 번호가 매겨진 목록으로 형식화하는 함수 create_sources_string이 포함됩니다.

2. 섭취 .py

이 스크립트는 기계 학습 또는 검색 응용 프로그램을 수집 및 처리하는 데 책임이 있습니다. 환경 변수와 Pinecone이라는 서비스와 함께 인터페이스를 사용합니다.

주요 기능

• 문서로드 및 분할 : 지정된 소스에서 문서를로드하여 청크로 나눕니다.
• PENECONE 통합 : 문서 벡터를 Pinecone Vector Store에 삽입합니다.

3. Core.py

이 파일은 검색 시스템을 사용하여 언어 모델 쿼리를 실행하는 핵심 기능을 정의합니다. 벡터 저장 및 검색을 위해 Pinecone과 밀접하게 통합 된 것 같습니다.

주요 기능

• 환경 구성 : 환경 변수를로드합니다.
• 쿼리 처리 : 언어 모델과 문서 리트리버가있는 대화 체인을 사용하여 쿼리를 처리하는 함수 run_llm을 제공합니다.