Unduh speech_course - Unduh Kode Sumber speech

speech_course

Kode Sumber AI

spring 2024

Unduh

Kursus Pemrosesan Pidato YSDA

Bahan untuk setiap minggu ada di folder ./week*

Program kursus

Minggu 1: Slide | Kuliah | Seminar
- Kuliah: Intro to Digital Signal Processing (DSP)
- Seminar: Menerapkan DSP Pipeline
Minggu 2: Slide | Kuliah | Seminar
- Kuliah: Pengantar Model Diskriminatif NN. Tugas Deteksi Aktivitas Suara (VAD) dan Sound Event Detection (SED)
- Seminar: Latih model VAD
- Pekerjaan Rumah: Latih Model Sed
Minggu 3: Slide | Kuliah | Seminar
- Kuliah: Tugas Berbicara Kata Kunci dan Biometrik Pidato
- Seminar: Latih model biometrik dan lihat embeddings
- Pekerjaan rumah: Latih model biometrik ke kualitas yang lebih baik
Minggu 4: Slide | Kuliah | Seminar
- Kuliah: Pengenalan Pidato i
- Seminar: Metrik dan augmentasi untuk pengenalan suara
- Pekerjaan Rumah: Menerapkan algoritma CTC
Minggu 5: Slide | Kuliah
- Kuliah: Pengenalan Pidato II, pretraining
- Pekerjaan rumah: Finetune WAV2VEC2
Minggu 6: Slide | Kuliah
- Kuliah: Text-to-Speech I, Intro, Preprocessor, Metrics
Minggu 7: Slide | Kuliah
- Kuliah: Text-to-Speech II, model akustik
- Seminar: Estimasi Pitch, Pencarian Alignment Monotonik untuk Estimasi Durasi Fonem
- Pekerjaan Rumah: Model Latih Fastpitch
Minggu 8: Slide, P1 | Kuliah, P1 | Slide, p2 | Kuliah, P2 | Seminar
- Kuliah, P1: Teks-ke-Speech III, Vocoding
- Kuliah, P2: Kuantisasi Vektor, Codec
- Seminar: Vektor kuantison, kuantisasi vektor residu
Minggu 9: Slide | Kuliah, P1 | Kuliah, p2
- Kuliah: Tranformers untuk TTS
- Pekerjaan rumah: Tulis inferensi untuk transformator pra-terlatih
Minggu 10: Slide | Kuliah | Seminar
- Kuliah: Pengurangan kebisingan
- Seminar: Streaming STFT dan ISTFT
- Pekerjaan Rumah: Implementasi Model Pengurangan Kebisingan
Minggu 11: Slide | Kuliah
- Kuliah: Pembatalan Echo Akustik (AEC) dan Baling -Burung
Minggu 12: Slide | Kuliah | Seminar
- Kuliah: Inferensi ASR
- Seminar: Streaming ASR
Minggu 13: Slide | Kuliah
- Kuliah: Konversi TTS + Voice Berbasis Aliran