llama lora chinese couplet

Llama-Lora-Chinese-Coupet

Простой пример Llama-Lora End Bo To Cond, чтобы показать свой потенциал для обучения китайского AI Couplet AI

• int8 llama + lora = finetune в потребительском графическом процессоре <= 10g Vram!

Слайды, последнее обновление 29.04.2023

• LLM, предварительный, Finetune
• LORA: популярный параметр эффективного Finetune подход Microsoft
• Llama: подарок от Facebook в исследовательское сообщество
• Llama-2: новый и лучший подарок от Facebook
• Alpaca: подход к 600 долл. США к «дистилляции 80%» Chatgpt от Стэнфорда
• Alpaca-Lora: еще более дешевый подход от студента Стэнфорда?
• Опущено из -за времени
  • Квантование Intro, llm.int8

Примеры с нулевым выстрелом

• После 3 эпох 5 тыс. Парков, токенов CAP Max, жадные
• Пост-обработка, чтобы соответствовать # китайских чар (так что да, я обманул ^_ ^)
• В идеале хорошо обученная модель узнает о себе конец предложения (EOS)
• Приглашение:对联：{上联}n下联：

Главная ссылка	Базовая лама	Llama_lora_a100_9mins	Llama_lora_tesla_t4_35mins
Весенний бриз гордится тем, что проложил дорогу	Погрузитесь в грязь nprevious link	Лунный свет слушает звук ветра дует мечты	Ветер и дождь дуют мечты плавающие
Красивый Китай очаровательный Пекин	Красивый Китай очаровательный Пекин nprevious Link:	История мечты Китая	Мечта Китай мечта, застенчивый
Мечта о рыбной книге	Жареная рыба свиная n	Птицы звучат тысячи миль	Птицы звучат тысячи миль
Закат и закат в древний храм	Закат сияет на древнем храме n	Луна отражает утренний дождь заполняет мечту	Луна отражает утренний мороз заполняет мечту

• Если вы увлекаетесь китайскими куплетами, у меня есть лучшая версия T5

Некоторые дополнительные мысли о высококачественном ИИ

• Смотрите заметки