Generative AI with Large Language Models

Generativ-ai-with-large-sprachliche Modelle

Dieses Repository enthält die Laborarbeit für den Coursera -Kurs auf "generativen KI mit großartigen Modellen".

1. Labor 1 - Generative AI -Anwendungsfall: Fassen Sie den Dialog zusammen

Führen Sie die Dialogübersicht mit der generativen AI durch. Experimentieren Sie mit dem Kontextlernen wie Null -Shot, einem Schuss und wenigen Schussschlendern und den zugehörigen Konfigurationsparametern mit Inferenz, um die Ergebnisse zu beeinflussen.

2. Labor 2 - Fein -Stellung eines generativen KI

Führen Sie eine Feinabstimmung der Anweisungen auf einem vorhandenen LLM vom Umarmungsgesicht, Flan-T5-Modell durch. Erforschen Sie sowohl die vollständige Feinabstimmung als auch die PEFT -Methoden (Parameter effiziente Feinabstimmung) wie LORA (Anpassung mit niedriger Rang) und die Bewertung unter Verwendung von Rouge -Metriken.

3. Labor 3-Fein-Tune-Flan-T5 mit Verstärkungslernen, um mehr positive Zusammenfassungen zu erzeugen

Weitere feine Melodie Ein Flan-T5-Modell mit Verstärkungslernen mit einem Belohnungsmodell wie dem Hassreden-Belohnungsmodell von Meta Ai, um weniger giftige Zusammenfassungen zu erzeugen. Verwenden Sie die proximale Richtlinienoptimierung (PPO), um das Modell zu optimieren und zu entgiften.