awesome generative models

Удивительные генеративные модели

Куративный список удивительных структур, библиотеков, программного обеспечения и ресурсов для производства медиа

Вдохновлен Awesome-Python

---

^{Моя работа с открытым исходным кодом поддерживается сообществом}

• Потрясающие генеративные MDELS
  • Генерация кода: алгоритм ML + статический анализ
  • Код в графический интерфейс: алгоритм для пользовательского интерфейса
  • Синтез изображения
    • Перенос стиля изображения
  • Текст генерация/NLP
    • Аудио и генерация музыки/обработка
    • Музыкальный синтез
  • Видео-синтер
  • Процедурное поколение для игр
  • Генерация изображения
  • Форум

Код в графический интерфейс: алгоритм для пользовательского интерфейса:

• Экриншск, чтобы код
• Pix2Code: генерирование кода из экрана графического интерфейса пользователя
• Разведенный Виктор: машинное обучение в инженерном выводе из Enviroment

Генерация кода: алгоритм ML + статический анализ

• Таблица: автозаполнение с глубоким обучением
• Воздушный змей: Алгоритм Adviceed Coder
• Insignt: стандартные инструменты завершения кода часто по -прежнему используют алфавитную сортировку, в то время как Kite использует алгоритмы ML, чтобы сделать вывод, что разработчик, вероятно, пытается сделать

Синтез изображения

• Spade от NVLABS: синтезирование фотореалистических изображений, полученных входной семантической планировкой. код

Перенос стиля изображения

• Artbreeder на основе моделей Biggan Models OpenSource версии Biggan Models о

• Крутый художественный проект: ... Dgspitzer (Eddie Hu) Инди-производитель игры использует Artbreeder на основе моделей Biggan, Stylegan-Artm Realistic-neural_talking_head_modelsm первого порядка_modelsm Dain и Topaz Lab для отличной работы по цифровому репарации видео, которые раскрашивают черный и пока видео.

• Прохладный проект: визуальный роман с использованием переноса стиля ML

NLP: Text-Sentiment-анализ:

• DeepMoji: модель анализа настроений Эта модель, используемая в 15.AI, инструмент текста в речь для генерации голосов различных символов.

Текст к изображению:

• Набор данных: набор данных Google «Quick Draw» Github с открытым исходным кодом Github

Текст на Video:

• Allennlp: Представьте себе это! Сценарии к композициям для видео

Подпись изображения

• Ядро TensorFlow: Подпись изображения с визуальным вниманием

Текст к анимации

• Генерирование анимаций из сценариев

Текст генерация/NLP

Генерация вопросов:

• Генерация вопросов: генерируйте ответы с несколькими вариантами выбора из текста

Другой

• Openai 1,5 миллиарда Params GPT-2 релиз
• Aidungeon
• CTRL-GCE: CTRL-модель, создавая текст в Google Compute Engine с несколькими консольными командами., Почему Google Compute Engine: модель CTRL настолько большая (12 ГБ на диске, 15,5 ГБ VRAM при загрузке, еще больше системной оперативной памяти во время выполнения), что в настоящее время не будет вписаться в бесплатный коляборный или ноутбук.
• Набор данных Machine Scifi Corpus TXT может быть полезен для модели GPT2 Fine Tune
• GPT2-Chinese-Wuxiao-Novel
• GPT-2 китайцы
• [Объятие лица трансформатора лица] -pytorch Hub

Текстовый корпус/набор данных

• Sci-Fi-Fript
• Детройт-Бесковинг-Ужас может быть источником для анализа дерева диалога и структуры дерева решений.

Аудио и генерация музыки/обработка

Проект:

• Говорят как ваш любимый персонаж: исследование, связанное с генерацией звука текста в речь:
• Такотрон2
• Forwertacotron: Tacotron2 без внимания
• Голосовой клон: клонирование в реальном времени
• Sleeteter: Звуковая трека Seeperation Seartion Severation находится под доменом музыкальной информации Посмотреть.
• Эмбиентная генеративная музыка Алекса Бэнтера, хотя этот проект не генерируется алгоритмом, дает большое вдохновение в области поколения музыки. Средний код *Neuralfunk: звуковой дизайн с ML

Музыкальный синтез

• Глубокий музыкальный визуализатор с использованием кода Biggan

Синтез и поколение видео:

• Pix2pix-Tensorflow: Poweed Interative Rendereed Virtual World Code Обновление кода: предварительно подготовленная модель добавлена ​​больше о Colab

  • Используя эту технику, мы можем раскрасить черно -белые фотографии, преобразовать карты Google в Google Earth и т. Д.

• Craft, который генерирует мультфильмы на основе текста DescriTpionsa Очень креативная работа, включающая текст к генерации видео от Allen NLP от страницы Project Researcher Project

Аудиосиотез

• Реализация Nvidia Taco2 Pytorch
• в реальном времени голос

Процедурная генерация

Карта поколение

• Процедурный генератор фэнтезийной карты с AI, ссылка: @Linonetwo's Blog

Анимация

• глубокое обучение для анимации и контроля персонажей
• DeepMimic: имитация движения с глубоким обучением подкрепления

Распределенное обучение:

• MPI уменьшает и Allreduce очень полезный учебник, чтобы проиллюстрировать концепцию MPT. Проверьте код
• Также проверьте TensorFlow-Core
• Распределенная стратегия транзинга

Приложение компьютерного зрения в играх

• Скаутирование талантов электронного спорта на основе мультимодального потокового потокового потока

Бумага с кодом

• Бумага с кодом

Ресурсы на связанном курсе:

• UIUC CS598RK: HCI для ML
• Coursera: модели последовательности
• Полное стек глубокое обучение
• Fast.ai
• UIUC: ECE420 Video Processing Lab
• Бесплатный ресурс GPU: настройка графического процессора для экземпляра Google Cloud для Fast.ai бесплатно

Облачные вычисления настроены

• AWS
• Google Colab

Полный стек инструментов глубокого обучения в трубопроводе обработки данных:

• Cortex: развернуть модели машинного обучения в производстве, возможно, без Docker и Kubernetes Medium

Ресурсы для Dev Tool:

• Lumen: Video Syth Software
• Редактор узлов на основе дерева диалога для единства и примеров демонстрации

Больше ресурсов на предварительную модель:

• [Pytorch Hub] https://pytorch.org/hub/research-models
• Tensorflow Hub

Познакомьтесь с людьми на форуме:

• Reddit-Mediaasyntheesis

Приложение:

Создание голосов различных персонажей: в идеале подкаст, игры и т. Д.

• 15.ai

Создание фильмов:

• Черное зеркало: Bandersnatch Show Case: Дерево диалога
• Поздний сдвиг

Дизайн

• Алгоритм дизайн
• Алгоритм сгенерированный логотип

Ссылка:

• Для получения подробной информации о том, как представлять анимационную архитектуру с точки зрения программного обеспечения и по математике. Проверьте Главу11-Анимацию системы архитектуры игрового двигателя, 2-е издание от Джейсона Грегори
• Новая модель искусственного интеллекта кайта