awesome generative models

很棒的生成模型

精心策劃的媒體生產的令人敬畏的生成模型框架，庫，軟件和資源的清單

靈感來自很棒的佩頓

---

^{我的開源工作得到了社區的支持}

• 很棒的生成型
  • 代碼生成：ML算法 +靜態分析
  • GUI的代碼：算法到用戶界面
  • 圖像合成
    • 圖像樣式轉移
  • 文本生成/NLP
    • 音頻和音樂生成/處理
    • 音樂視頻合成
  • 視頻同伴
  • 遊戲生成
  • 圖像生成
  • 論壇

GUI代碼：算法到用戶界面：

• 屏幕截圖到代碼
• pix2code：從圖形用戶界面屏幕截圖生成代碼
• 育種勝利者：來自環境的工程推理的機器學習

代碼生成：ML算法 +靜態分析

• Tabnine：深度學習的自動完成
• 風箏：算法輔助編碼器完成
• Insignt：標準代碼完成工具通常仍使用字母順序排序，而風箏使用ML算法來推斷開發人員可能嘗試做的事情

圖像合成

• NVLABS的Spade：綜合化學逼真的圖像給定輸入語義佈局。代碼

圖像樣式轉移

• 基於Biggan Models OpenSource版本Biggan模型的Artbreeder

• 一個很酷的藝術項目：... DGSPITZER（EDDIE HU）獨立遊戲製造商使用基於Biggan型號的Artbreeder，Stylegan-Artm coramistic-neural_talking_talking_talking_modelsm first order-order_modelsm dain and topaz dain and topaz實驗室，在數字視頻上進行一些出色的工作，以使黑色和視頻上色化。

• 一個很酷的項目：使用ML樣式轉移的視覺小說

NLP：文本式 - 分析：

• DeepMoji：一種情感分析模型該模型也用於15.AI，這是一種文本到語音工具，用於生成各個字符的聲音。

文本到圖像：

• 數據集：Google的“快速繪製”開源數據集GitHub

文本到視頻：

• Allennlp：想像一下！腳本到視頻的構圖

圖像字幕

• TensorFlow核心：圖像字幕並視覺注意力

文本對動畫

• 從劇本中生成動畫

文本生成/NLP

問題生成：

• 問題生成：從文本中生成多項選擇答案

其他

• Openai 15億參數GPT-2發布
• Aidungeon
• CTRL-GCE：Google Compute Engine上的CTRL Text-Inereration模型，只需幾個控制台命令。為什麼Google Compute Engine：CTRL模型如此之大（磁盤上的12 GB，15.5 GB GB GPU VRAM加載後，運行時的系統RAM甚至更多的系統RAM）目前將不適合免費的Colaboration或Kaggle Notebook。
• 使用機器Scifi Copus TXT數據集編寫可能對GPT2模型微調有用
• gpt2-中國谷歌 - 新星
• GPT-2中國人
• [擁抱的臉變壓器] -Pytorch樞紐

文本語料庫/數據集

• 科幻字體
• 底特律bec的人類可能是分析對話樹和決策樹結構的來源。

音頻和音樂生成/處理

專案:

• 像您最喜歡的角色一樣說話：文本到語音的相關研究：
• tacotron2
• 前向tacotron：tacotron2無注意
• 語音克隆：實時訪問
• Spleeter：聲音軌道分離聲音分離在音樂信息檢索的範圍內。
• 亞歷克斯·貝恩特（Alex Bainter）創作的環境生成音樂儘管該項目不是由算法產生的，但在音樂一代領域具有很大的靈感。中型代碼 *神經朋克：帶有ML的聲音設計

音樂視頻合成

• 使用Biggan代碼的深音樂可視化器

視頻綜合和一代：

• PIX2PIX-TESORFLOW：POWEED相互呈現的虛擬世界代碼更新：預審計的模型添加了有關COLAB的更多信息

  • 使用此技術，我們可以使黑白照片著色，將Google Maps轉換為Google Earth，等等。

• Craft，基於文本descritpionsa生成動畫片，這是一項非常有創造力的作品，涉及研究人員項目頁面的Allen NLP視頻發電的文本

音頻系統

• NVIDIA的Taco2 Pytorch實施
• 實時聲音克隆

程序代理人

地圖生成

• AI驅動程序幻想地圖生成器，參考： @Linonetwo的博客

動畫片

• 角色動畫和控制的深度學習
• 深度介紹：通過深度加固學習的運動模仿

分佈式培訓：

• MPI減少和Allreduce非常有用的教程，以說明MPT的概念。檢查代碼
• 還要檢查張量流核
• 分佈式傳輸策略

遊戲中的計算機視覺應用

• 基於多模式Twitch流數據數據採集和建模代碼聊天日誌twich流的電子競技人才搜尋

帶代碼的紙

• 帶代碼的紙

相關課程的資源：

• UIUC CS598RK：ML的HCI
• Coursera：序列模型
• 完整的堆棧深度學習
• fast.ai
• UIUC：ECE420視頻處理實驗室
• GPU免費資源：免費為Fast.ai設置Google Cloud實例GPU

雲計算設置

• AWS
• Google Colab

數據處理管道中的完整堆棧深度學習工具：

• 皮層：在沒有Docker和Kubernetes媒介的情況下，將機器學習模型部署在生產中

開發工具的資源：

• 管腔：視頻系統軟件
• 對話樹的基於統一和示例演示的節點編輯器

預驗證模型的更多資源：

• [Pytorch Hub] https://pytorch.org/hub/research-models
• Tensorflow Hub

在論壇上認識與您的思想聯繫的人：

• Reddit-Mediasysis

應用：

生成各種角色的聲音：理想情況下是播客和遊戲等：

• 15.AI

電影製作：

• 黑鏡：Bandersnatch表演案例：對話樹
• 延遲

設計

• 算法驅動設計
• 算法生成的徽標

參考：

• 有關如何從軟件的角度和數學中表示動畫體系結構的詳細信息。檢查遊戲引擎體系結構的第11章動畫系統，第二版Jason Gregory
• 風箏的新AI模型