speech_course

YSDA語音處理課程

• 每週的材料在./week*文件夾中

課程課程

• 第1週：幻燈片|講座|研討會
  • 講座：數字信號處理介紹（DSP）
  • 研討會：實施DSP管道
• 第2週：幻燈片|講座|研討會
  • 講座：語音NN歧視模型介紹。語音活動檢測（VAD）和聲音事件檢測（SED）任務
  • 研討會：火車VAD模型
  • 作業：火車SED模型
• 第3週：幻燈片|講座|研討會
  • 講座：關鍵字發現和語音生物識別任務
  • 研討會：火車生物識別模型，查看嵌入
  • 家庭作業：訓練生物識別模型以提高質量
• 第4週：幻燈片|講座|研討會
  • 講座：語音識別我
  • 研討會：語音識別的指標和增強
  • 作業：實施CTC算法
• 第5週：幻燈片|演講
  • 講座：言語識別II，預訓練
  • 作業：Finetune Wav2Vec2
• 第6週：幻燈片|演講
  • 講座：文本到語音I，簡介，預處理器，指標
• 第7週：幻燈片|演講
  • 講座：文本到語音II，聲學模型
  • 研討會：音高估計，單調對準搜索音素持續時間估計
  • 作業：訓練FastPitch模型
• 第8週：幻燈片，P1 |講座，P1 |幻燈片，P2 |講座，p2 |研討會
  • 講座，P1：文本到語音III，聲音
  • 講座，P2：矢量量化，編解碼器
  • 研討會：矢量量化，殘留矢量量化
• 第9週：幻燈片|講座，P1 |講座，P2
  • 講座：TTS的tranformers
  • 作業：為預訓練的變壓器寫推斷
• 第10週：幻燈片|講座|研討會
  • 講座：降噪
  • 研討會：流媒體和ISTFT
  • 作業：降噪模型實施
• 第11週：幻燈片|演講
  • 講座：聲學迴聲取消（AEC）和波束形成
• 第12週：幻燈片|講座|研討會
  • 講座：ASR推理
  • 研討會：流媒體ASR
• 第13週：幻燈片|演講
  • 講座：基於流量的TTS +語音轉換

貢獻者和課程人員

當前的：

• 亞歷克斯·拉克（Alex Rak） - vad，topter，生物特徵
• Mikhail Andreev- ASR
• Stepan Kargaltsev- ASR
• Evgeniia Elistratova -TTS
• 羅馬凱爾 - TTS
• Vladimir Platonov -TTS
• evgenii shabalin -tts
• Ravil Khisamov -VQE

以前的迭代：

• Andrey Malinin-課程管理，講座，研討會，家庭作業
• Vladimir Kirichenko-講座，研討會，家庭作業
• 塞吉·杜卡諾夫（Segey Dukanov） - 訓練，研討會，家庭作業