fromthetensor

От тензора до стабильной диффузии

Вдохновлен от транзистора.

Машинное обучение сложно, много учебников трудно следовать, и трудно понять программное обеспечение 2.0 с первых принципов.

Вы хотите быть инженером ML? Что ж, вот шаги, чтобы добиться успеха в этом:

1. Скачать бумагу
2. Реализовать это
3. Продолжайте делать это, пока у вас не будет навыков

- Джордж Хотц

Раздел 1: Вступление: изменять наш путь мимо тензора - 1 неделя

• Итак, об этих тензорах - обзоре курса. Опишите, как модели глубокого обучения можно создавать с использованием тензоров, и как различные архитектуры, такие как CNN и RNN, используют тензоры по -разному. Поймите концепцию обратного распространения и градиентного происхождения. [видео]

Раздел 2: Глубокое обучение: что в любом случае глубокое обучение? - 1 неделя

• Создание простой нейронной сети - вашей первой маленькой программы! Получить модель работать и изучать основы глубокого обучения. [Код] [Видео]

• Создание простой CNN - вступительной главы для глубокого обучения, научитесь построить простой CNN и понять понятия свертки и объединения. [Код] [Видео]

• Создание простого RNN - изучите основы повторяющихся нейронных сетей и поймите концепцию «памяти», которая помогает им хранить состояния предыдущих входов. [Код] [Видео]

Раздел 3: Реализация документов (Часть 1): Модели зрения - 3 недели

• Реализация Lenet - узнайте о архитектуре Lenet и ее применении. [код] [бумага]

• Реализация Alexnet - научитесь реализовать Alexnet для задач классификации изображений. [код] [бумага]

• Реализация RESNET - Узнайте, как реализовать RESNET для задач классификации изображений. [код] [бумага]

• Создание DCGAN - Узнайте, как построить DCGAN и концепцию состязательного обучения. [код] [бумага]

Раздел 4: Реализация документов (часть 2): Языковые модели - 3 недели

• Реализация GRU и LSTM - узнайте о концепциях клеток LSTM и GRU. [код] [бумага]

• Реализация Cbow и Skip-Gram-узнайте об архитектуре Word2VEC и ее применении. [код] [бумага]

• Создание трансформатора - узнайте о архитектуре трансформатора и ее применении. [код] [бумага]

• Точная настраивая берт-узнайте о архитектуре BERT и настраивая предварительно обученную модель. [код] [бумага]

Раздел 5: Реализация документов (Часть 3): Модели на языке зрения-1 неделя

• Создание стабильной диффузионной модели - узнайте о стабильной диффузионной архитектуре и ее применении в задачах генерации изображений. [код] [бумага]