
Этот репозиторий предназначен для немецкой ночной версии модели Llama. Эта модель предназначена только для использования в исследованиях.
** В настоящее время обучение с Llama 2 (31.08.2023) **
Пространство в настоящее время в автономном режиме.
Если я видел дальше, это стоит на задней части ламы. - Исаак Ньютон
Благодаря португальской современной версии Llama, Cabrita, за вдохновение этого проекта. Также благодаря Meta AI за разработку и обучение базовой модели Llama и вызывая эпоху создания, подайте заявку на веса модели Llama здесь.
Была использована немецкая версия очищенного набора данных Стэнфордской альпаки. Оригинальный набор данных Стэнфордской альпаки доступен здесь. Перевод был сделан через facebook/wmt19-en-de model от HuggingFace? Центр.
Более подробную информацию о том, как настроен набор данных, можно найти здесь: Stanford Alpaca.
Базовая модель LLAMA-7B была создана с использованием метода LORA в 8-битном квантовании, используя части кода из Fork Alpaca Lora, который использует PEFT из HuggingFace? Сценарий Manetuning расположен здесь. Создание было выполнено с использованием одного графического процессора A100 40 ГБ для 1000 шагов.
Контрольные контрольные точки модели могут быть загружены на Huggingface?:
Стэнфордская альпака:
In welchen Ländern gibt es Lamas?
Llamas can be found in Bolivia, Peru, Chile, Ecuador, and Argentina.
Zicklein:
In welchen Ländern gibt es Lamas?
Lamas gibt es in den folgenden Ländern: Argentinien, Bolivien, Brasilien, Chile, Ecuador, Kolumbien,
Peru, Uruguay und Venezuela.
Стэнфордская Альпака:
Was ist die Rolle des Präsidenten?
The role of the President is to serve as the head of state and the commander-in-chief of the armed
forces. The President is responsible for executing the laws of the land, appointing judges and other
government officials, and representing the United States in international relations.
Zicklein:
Was ist die Rolle des Präsidenten?
Die Rolle des Präsidenten besteht darin, die Verfassung der Vereinigten Staaten zu verwalten und die
Regierung zu leiten.