document assistant

Asisten Dokumen oleh Ash

Aplikasi Python ini membuat asisten dokumen sederhana menggunakan StreamLit, Pinecone (Vector Store) dan model bahasa (OpenAi) untuk menghasilkan tanggapan terhadap kueri pengguna.

Perintah untuk mengunduh dokumen dalam format html

wget --mirror --convert-links --adjust-extension --page-requisites --no-parent -P langchain-docs --execute robots=off --user-agent="Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/86.0.4240.198 Safari/537.36" https://api.python.langchain.com/en/latest/

1. Main.py

Script ini membuat aplikasi web menggunakan streamlit. Ini menyediakan antarmuka pengguna untuk bantuan dokumen, memungkinkan pengguna untuk mengirimkan pertanyaan dan menerima jawaban yang mencakup sumber.

Fitur utama

• Antarmuka Streamlit: Menggunakan StreamLit untuk UI, termasuk bidang input dan manajemen sesi.
• Penyortiran URL Sumber: Termasuk fungsi create_sources_string yang mengambil satu set URL, mengurutkannya, dan memformatnya sebagai daftar bernomor.

2. engscion.py

Skrip ini bertanggung jawab untuk menelan dan memproses dokumen, mungkin untuk pembelajaran mesin atau aplikasi pencarian. Ini menggunakan variabel lingkungan dan antarmuka dengan layanan yang disebut Pinecone.

Fitur utama

• Dokumen Pemuatan dan Pemisahan: Memuat dokumen dari sumber yang ditentukan dan membelahnya menjadi potongan -potongan.
• Integrasi Pinecone: Sisipkan vektor dokumen ke toko vektor Pinecone.

3. Core.py

File ini mendefinisikan fungsionalitas inti untuk menjalankan kueri model bahasa menggunakan sistem pengambilan. Tampaknya terintegrasi erat dengan pinecone untuk penyimpanan dan pengambilan vektor.

Fitur utama

• Konfigurasi Lingkungan: memuat variabel lingkungan.
• Pemrosesan kueri: Menyediakan fungsi run_llm yang memproses kueri menggunakan rantai percakapan dengan model bahasa dan pengambilan dokumen.