Model Bahasa Besar (LLM) Tangan
Buku Referensi: Menguasai Model Bahasa Besar [Pratinjau Buku Google] [Tautan GitHub]
Penjelasan Kode: Tautan
Isi
Model berbasis aturan
- Ekstraksi nomor telepon menggunakan ekspresi reguler
- Pencocokan pola menggunakan bagian tag bicara
- Pencocokan token spesifik dengan atribut spesifik
Model Bahasa Statistik
- Implementasi Sederhana Model Bahasa Bigram
- Ngram kalimat
Preprocessing data
- Pembersihan Data Dasar
- Deteksi Entitas
- Anonimisasi
- Contoh pra-pemrosesan teks
- Tag bagian-of-speech (POS)
- Parsing ketergantungan
Jaringan saraf
- FeedForward Neural Network Untuk Memecahkan Masalah Xnor
- LSTM untuk Klasifikasi Sentimen Ulasan Film IMDB
- GRU untuk Klasifikasi Sentimen Ulasan Film IMDB
- RNN dua arah untuk klasifikasi sentimen ulasan film IMDB
- Arsitektur Model Bahasa berbasis CNN
Model berbasis transformator
- Visualisasi diri sendiri
- Pengkodean posisi
Melatih Model Bahasa Besar
- Merancang LLM kecil untuk pembuatan teks
- Merancang model pembuatan teks tingkat karakter
- Merancang model pembuatan teks tingkat kata
- Merancang model pembuatan teks tingkat kata dengan dataset besar
- Model pembuatan teks menggunakan T5
Model bahasa besar menyempurnakan
- Model Gemma 2B-IT yang menyempurnakan dari wajah memeluk
Pengantar Ollama
- Model Llama 3.2 yang Menyukainya Menggunakan Perpustakaan Ollama Python
- Model Gemma 2 yang Menyukainya Menggunakan Perpustakaan Ollama Python
- Model Llava yang Menyimpulkan Menggunakan Perpustakaan Ollama Python
Pengantar Langchain
- Model Llama 3.2 Menyimpulkan Menggunakan Langchain dan Ollama
- Model Llava Menyimpulkan Menggunakan Langchain dan Ollama
Retrieval-Agusted Generation (RAG)
- Mendesain pipa Generasi Pengambilan (RAG) Retrieval-Agusted Menggunakan Llamaindex dan Ollama
- Mendesain Pipa Generasi Pengambilan (RAG) Retrieval untuk Model Gemma 2
Teknik yang cepat