Auto_Standard_Generator

自動標準生成器：微調實踐

該存儲庫包含Auto Standard Generator的代碼和數據，這是由Harbin Technology的五個本科生組成的一年級項目。

---

？消息

• [2024.3.25] ??收集原始數據：刮擦PDF技術標準。
• [2024.3.25] ??清潔和預處理：數據集的批處理文本。
• [2024.4.23] ??數據清潔：刪除了亂碼的文字。

托多

• 標記數據：構建指令數據以進行微調。
• 微調
• 加速與壓縮：採用模型加速和壓縮技術來降低推理潛伏期和內存成本。
• GUI開發：開髮用戶界面。

---

簡介

對特定於特定任務的標記數據的較小數據集上的微調預訓練的通用大語言模型（LLM），使模型可以學習對該任務很重要的特定功能，從而提高其性能。

該項目著重於微調開源總LLM，例如Llama 2或ChatGlm 3，以專門為生成技術標准文檔。

---

入門

1。環境準備

2。數據集建築

3。監督微調