Generative AI with Large Language Models

Generative-AI-with-Large-Language-Models

Этот репозиторий содержит лабораторную работу для курса Coursera по «генеративному искусственному интеллекту с большими языковыми моделями».

1. Лаборатория 1 - Генеративный случай использования ИИ: суммируйте диалог

Выполните суммирование диалога с использованием генеративного ИИ. Экспериментируйте с контекстным обучением, таким как нулевой выстрел, один выстрел и несколько выводов выстрела и настройки связанных параметров конфигурации при выводе, чтобы влиять на результаты.

2. Лаборатория 2 - тонкая настройка генеративной модели ИИ для суммирования диалога

Выполните инструкции с точной настройкой на существующем LLM от обнимающего лица, модели Flan-T5. Исследуйте как полную тонкую настройку, так и методы PEFT (Parameter Parmater Fine Tuning), такие как Lora (адаптация с низким рангом) и оценка с использованием метрик Rouge.

3. Lab 3-Fine-Tune Flan-T5 с обучением подкреплению для получения более положительных резюме

Дальнейшая настройка модели Flan-T5 с использованием обучения подкреплению с помощью модели вознаграждения, такой как модель вознаграждения Meta AI, для создания менее токсичных резюме. Используйте оптимизацию проксимальной политики (PPO) для тонкой настройки и детоксикации модели.