Awesome-generative Modelle
Eine kuratierte Liste von fantastischen generativen Modell -Frameworks, Bibliotheken, Software und Ressourcen für die Medienproduktion
Inspiriert von Awesome-Python
Meine Open -Source -Arbeit wird von der Community unterstützt
- Tolle generative Mdels
- Codegenerierung: ML -Algorithmus + Statische Analyse
- Code zu GUI: Algorithmus zur Benutzeroberfläche
- Bildsynthese
- Textgenerierung/NLP
- Audio- und Musikgenerierung/-verarbeitung
- Musik-Video-Synthese
- Video-Synth
- Verfahrensgenerierung für Spiele
- Bild Generation
- Forum
Code zu GUI: Algorithmus zur Benutzeroberfläche:
- Screenshooting zu codieren
- PIX2CODE: Code aus einem grafischen Benutzeroberflächen -Screenshot generieren
- Gezüchteter Sieger: Maschinelles Lernen in technischer Inferenz von Enviroment
Codegenerierung: ML -Algorithmus + Statische Analyse
- Tabnine: Autoperation mit tiefem Lernen
- Kite: Algorithmus Assisted Codierer Fertigstellung
- Insignt: Standard -Tools für Standardcode -Abschluss verwenden häufig immer noch alphabetische Sortierung, während Kite ML -Algorithmen verwendet, um zu schließen, was ein Entwickler wahrscheinlich versucht zu tun
Bildsynthese
- Spaten von NVLABs: synthetisieren fotorealistische Bilder mit einem semantischen Eingangslayout. Code
Übertragung im Bildstil
Artbreeder basierend auf Biggan -Modellen OpenSource -Version Biggan Models über
Ein cooles künstlerisches Projekt: ... DGSPITZER (Eddie Hu) Ein Indie-Game-Hersteller verwendet ArtBreeder, basierend auf Biggan-Modellen, Stylegan-ARTM Realistic-Neural_Talking_head_Modelsm First-Order_Modelsm Dain und Topaz Lab für einige großartige Arbeiten zur digitalen Videoreparatur, die Schwarz und während des Videos foleln.
Ein cooles Projekt: visueller Roman mit ML Style Transfer
NLP: Text-Sentiment-Analyse:
- DeepMoji: Ein Stimmungsanalysemodell Dieses Modell verwendete auch in 15.AI, einem Text-zu-Sprach-Tool zum Generieren von Stimmen verschiedener Zeichen.
Text-to-Image:
- Datensatz: Googles "Quick Draw" Open Source -Datensatz GitHub
Text-to-Video:
- Allennlp: Stellen Sie sich das vor! Skripte zu Kompositionen zu Videos
Bildunterschrift
- Tensorflow Core: Bildunterschrift mit visueller Aufmerksamkeit
Text-to-Animation
- Animationen aus Drehbüchern generieren
Textgenerierung/NLP
Fragengenerierung:
- Frage Generierung: Generieren Sie Multiple -Choice -Antworten aus dem Text
Andere
- OpenAI 1,5 Milliarden Params GPT-2 Release
- Aidungeon
- STRL-GCE: CTRL-Text-erzeugender Modell auf Google Compute Engine mit nur wenigen Konsolenbefehlen. Warum Google-Motor berechnet: Das Strg-Modell ist so groß (12 GB auf der Festplatte, 15,5 GB GPU VRAM, wenn es während der Laufzeit mehr in ein kostenloses Colaboratory- oder KAGGLE-Notizbuch passt.
- Das Schreiben mit dem Maschinen -Scifi -Corpus -TXT -Datensatz könnte für GPT2 -Modellfeinstunde nützlich sein
- GPT2-Chinese-Wuxiao-Novel
- GPT-2 Chinese
- [Umarmender Gesichtstransformator] -Pytorch Hub
Textkorpus/Datensatz
- Sci-Fi-Skript
- Detroit-Becoming-Human könnte Quelle sein, um den Dialogbaum und die Entscheidungsbaumstruktur zu analysieren.
Audio- und Musikgenerierung/-verarbeitung
Projekt:
- Sprechen Sie wie Ihr Lieblingscharakter: Text-to-Speech-Audiogenerierung verwandte Forschung:
- Tacotron2
- VorwärtsTacotron: Tacotron2 ohne Aufmerksamkeit
- Sprachklon: Echtzeit-Voice-Kloning
- Spleeter: Sound -Track -Seperation Sound Separate steht unter Domain des Musikinformations -Rückzugs.
- Ambient Generative Music von Alex Bainter Obwohl dieses Projekt nicht vom Algorithmus erzeugt wird, gibt es im Bereich der Musikgeneration viel Inspiration. Mittelcode *NeuralFunk: Sounddesign mit ML
Musik-Video-Synthese
- Deep Music Visualizer mit Biggan Code
Video -Synthese und -generation:
PIX2PIX-TensorFlow: Powed Interative Rendereed Virtual World Code Update: Vorbereitete Modell hat mehr über Colab hinzugefügt
- Mit dieser Technik können wir Schwarz -Weiß -Fotos förern, Google Maps in Google Earth umwandeln usw.
Craft, das Cartoons basierend auf Text Descritpionsa generiert. Eine sehr kreative Arbeit beinhaltete Text zur Videogenerierung von Allen NLP von Forscher -Projektseiten Video
Audiosystemthese
- Nvidias TACO2 Pytorch -Implementierung
- Echtzeit-Voice-Klone
Proceduralgenerationforgaming
Kartengenerierung
- AI-betriebenes prozedurales Fantasy-Kartengenerator, Referenz: @Linonetwos Blog
Animation
- Tiefes Lernen für Charakteranimation und Kontrolle
- Deepmimic: Bewegung Nachahmung mit tiefem Verstärkungslernen
Verteiltes Training:
- MPI reduziert und sorgt für ein sehr nützliches Tutorial, um das Konzept von MPT zu veranschaulichen. Code überprüfen
- Überprüfen Sie auch den TensorFlow-Core
- Verteilte Traning -Strategie
Computer Vision Application im Spielen
- E-Sport-Talent-Scouting basierend auf multimodaler Twitch-Stream-Datendatenerfassung und Modellierungscode-Chat-Protokoll Twich Stream
Papier mit Code
Ressourcen auf dem verwandten Kurs:
- UIUC CS598RK: HCI für ML
- Coursera: Sequenzmodelle
- Voller Stack Deep Learning
- Fast.ai
- UIUC: ECE420 Video Processing Lab
- GPU -kostenlose Ressource: Einrichten einer Google Cloud -Instanz -GPU für Fast.ai kostenlos
Cloud Computing Einrichtung
Full Stack Deep Learning Tools in der Datenverarbeitungspipeline:
- Cortex: Bereitstellung maschineller Lernmodelle in Produktion möglicherweise ohne Docker und Kubernetes Medium
Ressourcen für Dev Tool:
- Lumen: Video Syth -Software
- Dialogbaumbasierter Knoten -Editor für Unity und Beispieldemo
Weitere Ressourcen für ein vorgezogenes Modell:
- [Pytorch Hub] https://pytorch.org/hub/research-models
- Tensorflow Hub
Treffen Sie die Menschen im Forum: Mind-verbundene Leute:
Anwendung:
Erzeugen von Stimmen verschiedener Zeichen: Idealerweise Podcast und Spiele usw.:
Filmemaking:
- Schwarzer Mirror: Bandersnatch Show Fall: Dialogbaum
- Verspätete Verschiebung
Design
- Algorithmus -gesteuerte Design
- Algorithmus erzeugte Logo
Referenz:
- Einzelheiten zur Darstellung der Animationsarchitektur aus der Sicht der Software und in Mathematik. Überprüfen Sie das Kapitel11-Animation-System der Game Engine-Architektur, 2. Ausgabe von Jason Gregory
- Kites neues KI -Modell
