awesome generative models

很棒的生成模型

精心策划的媒体生产的令人敬畏的生成模型框架，库，软件和资源的清单

灵感来自很棒的佩顿

---

^{我的开源工作得到了社区的支持}

• 很棒的生成型
  • 代码生成：ML算法 +静态分析
  • GUI的代码：算法到用户界面
  • 图像合成
    • 图像样式转移
  • 文本生成/NLP
    • 音频和音乐生成/处理
    • 音乐视频合成
  • 视频同伴
  • 游戏生成
  • 图像生成
  • 论坛

GUI代码：算法到用户界面：

• 屏幕截图到代码
• pix2code：从图形用户界面屏幕截图生成代码
• 育种胜利者：来自环境的工程推理的机器学习

代码生成：ML算法 +静态分析

• Tabnine：深度学习的自动完成
• 风筝：算法辅助编码器完成
• Insignt：标准代码完成工具通常仍使用字母顺序排序，而风筝使用ML算法来推断开发人员可能尝试做的事情

图像合成

• NVLABS的Spade：综合化学逼真的图像给定输入语义布局。代码

图像样式转移

• 基于Biggan Models OpenSource版本Biggan模型的Artbreeder

• 一个很酷的艺术项目：... DGSPITZER（EDDIE HU）独立游戏制造商使用基于Biggan型号的Artbreeder，Stylegan-Artm coramistic-neural_talking_talking_talking_modelsm first order-order_modelsm dain and topaz dain and topaz实验室，在数字视频上进行一些出色的工作，以使黑色和视频上色化。

• 一个很酷的项目：使用ML样式转移的视觉小说

NLP：文本式 - 分析：

• DeepMoji：一种情感分析模型该模型也用于15.AI，这是一种文本到语音工具，用于生成各个字符的声音。

文本到图像：

• 数据集：Google的“快速绘制”开源数据集GitHub

文本到视频：

• Allennlp：想象一下！脚本到视频的构图

图像字幕

• TensorFlow核心：图像字幕并视觉注意力

文本对动画

• 从剧本中生成动画

文本生成/NLP

问题生成：

• 问题生成：从文本中生成多项选择答案

其他

• Openai 15亿参数GPT-2发布
• Aidungeon
• CTRL-GCE：Google Compute Engine上的CTRL Text-Inereration模型，只需几个控制台命令。为什么Google Compute Engine：CTRL模型如此之大（磁盘上的12 GB，15.5 GB GB GPU VRAM加载后，运行时的系统RAM甚至更多的系统RAM）目前将不适合免费的Colaboration或Kaggle Notebook。
• 使用机器Scifi Copus TXT数据集编写可能对GPT2模型微调有用
• gpt2-中国谷歌 - 新星
• GPT-2中国人
• [拥抱的脸变压器] -Pytorch枢纽

文本语料库/数据集

• 科幻字体
• 底特律bec的人类可能是分析对话树和决策树结构的来源。

音频和音乐生成/处理

项目：

• 像您最喜欢的角色一样说话：文本到语音的相关研究：
• tacotron2
• 前向tacotron：tacotron2无注意
• 语音克隆：实时访问
• Spleeter：声音轨道分离声音分离在音乐信息检索的范围内。
• 亚历克斯·贝恩特（Alex Bainter）创作的环境生成音乐尽管该项目不是由算法产生的，但在音乐一代领域具有很大的灵感。中型代码 *神经朋克：带有ML的声音设计

音乐视频合成

• 使用Biggan代码的深音乐可视化器

视频综合和一代：

• PIX2PIX-TESORFLOW：POWEED相互呈现的虚拟世界代码更新：预审计的模型添加了有关COLAB的更多信息

  • 使用此技术，我们可以使黑白照片着色，将Google Maps转换为Google Earth，等等。

• Craft，基于文本descritpionsa生成动画片，这是一项非常有创造力的作品，涉及研究人员项目页面的Allen NLP视频发电的文本

音频系统

• NVIDIA的Taco2 Pytorch实施
• 实时声音克隆

程序代理人

地图生成

• AI驱动程序幻想地图生成器，参考： @Linonetwo的博客

动画片

• 角色动画和控制的深度学习
• 深度介绍：通过深度加固学习的运动模仿

分布式培训：

• MPI减少和Allreduce非常有用的教程，以说明MPT的概念。检查代码
• 还要检查张量流核
• 分布式传输策略

游戏中的计算机视觉应用

• 基于多模式Twitch流数据数据采集和建模代码聊天日志twich流的电子竞技人才搜寻

带代码的纸

• 带代码的纸

相关课程的资源：

• UIUC CS598RK：ML的HCI
• Coursera：序列模型
• 完整的堆栈深度学习
• fast.ai
• UIUC：ECE420视频处理实验室
• GPU免费资源：免费为Fast.ai设置Google Cloud实例GPU

云计算设置

• AWS
• Google Colab

数据处理管道中的完整堆栈深度学习工具：

• 皮层：在没有Docker和Kubernetes媒介的情况下，将机器学习模型部署在生产中

开发工具的资源：

• 管腔：视频系统软件
• 对话树的基于统一和示例演示的节点编辑器

预验证模型的更多资源：

• [Pytorch Hub] https://pytorch.org/hub/research-models
• Tensorflow Hub

在论坛上认识与您的思想联系的人：

• Reddit-Mediasysis

应用：

生成各种角色的声音：理想情况下是播客和游戏等：

• 15.AI

电影制作：

• 黑镜：Bandersnatch表演案例：对话树
• 延迟

设计

• 算法驱动设计
• 算法生成的徽标

参考：

• 有关如何从软件的角度和数学中表示动画体系结构的详细信息。检查游戏引擎体系结构的第11章动画系统，第二版Jason Gregory
• 风筝的新AI模型