transformers stuff

Transformers-Suff

Repositori ini berisi kode, skrip, dan buku catatan tentang berbagai aspek model transformator. Implementasi menggunakan Pytorch.

• GPT_Transformer.ipynb berisi walk-through terperinci dari implemenasi transformator sambil menjelaskan konsep-konsep inti di sepanjang jalan.
• GPT_Language_Model.ipynb Membangun dan melatih model bahasa dari awal menggunakan data wikipedia , termasuk pra-pemrosesan data yang relevan.