เครือข่ายน้ำหนักเบาที่ควบคุมข้อมูลเชิงพื้นที่ของการแพร่กระจายที่มั่นคงโดยใช้การปรับแต่งภาษาจีน
เป็นภาษาอังกฤษ
Controllora เป็นวิศวกรรมที่ใช้เทคโนโลยี LORA เพื่อแก้ไขข้อบกพร่องการแพร่กระจายที่มั่นคงเพื่อควบคุมข้อมูลเชิงพื้นที่ โดยทั่วไปจะใช้เครือข่ายที่เรียบง่ายและเล็ก (พารามิเตอร์ ~ 7m, ~ 25M ที่เก็บข้อมูล) ข้อมูลเพิ่มเติมสามารถใช้ได้จาก Controllora
โครงการนี้ถือได้ว่าเป็นทางแยกของคอนโทรลเลอร์ และสองฟิลด์จีนจะได้รับตามวิธีการควบคุม
คุณสามารถใช้พื้นที่ HuggingFace ออนไลน์เพื่ออัปโหลดรูปภาพและข้อความพรอมต์ภาษาจีนเพื่อดูผลลัพธ์ผลลัพธ์ เนื่องจากมีการปรับใช้และใช้กับ CPU ฉันขอแนะนำให้คุณดาวน์โหลดโครงการเหล่านี้ในเครื่องและเรียกใช้โดยใช้ GPU ของคุณ (เนื่องจากการตั้งค่าของ "is_available" มันจะเปลี่ยนอุปกรณ์แบบไดนามิกโดยขึ้นอยู่กับว่ามี GPU)
| ชื่อ | ลิงค์โมเดล HuggingFace | ลิงค์ Space HuggingFace |
|---|---|---|
| Controlnet โดย Canny Chinese? | https://huggingface.co/svjack/canny-control-lora-zh | https://huggingface.co/spaces/svjack/controlnet-canny-chinese |
| Controlnet โดย Pose Chinese? | https://huggingface.co/svjack/pose-control-lora-zh | https://huggingface.co/spaces/svjack/controlnet-pose-chinese |
pip install -r requirements.txtหลังจากการติดตั้งคุณสามารถ CD ลงใน Controlnet-canny-chinese และ Controlnet-pose-chinese เพื่อเรียกใช้แยกต่างหาก
python app.pyเปิดเบราว์เซอร์ของคุณและไปที่ http: // localhost: 7860 เพื่อทดสอบในเบราว์เซอร์
| ชื่อ | แจ้ง | ภาพต้นฉบับ | ภาพกระดูกสันหลัง | ภาพเปลี่ยนภาพ |
|---|---|---|---|---|
| Controlnet โดย Canny Chinese? | ตัวตลกขี้เล่น | ![]() | ![]() | ![]() |
| Controlnet โดย Canny Chinese? | คืนที่เต็มไปด้วยอุกกาบาต | ![]() | ![]() | ![]() |
| Controlnet โดย Canny Chinese? | แวมไพร์แมว | ![]() | ![]() | ![]() |
| Controlnet โดย Pose Chinese? | ผู้เฝ้าดูข้าวสาลี | ![]() | ![]() | ![]() |
| Controlnet โดย Pose Chinese? | นายทหารทหารในเครื่องแบบทหาร | ![]() | ![]() | ![]() |
LORA: การปรับระดับต่ำของแบบจำลองภาษาขนาดใหญ่ LORA ลดจำนวนพารามิเตอร์การฝึกอบรมโดยการเรียนรู้คู่เมทริกซ์การสลายตัวของอันดับและการแช่แข็งน้ำหนักดั้งเดิม สิ่งนี้จะช่วยลดข้อ จำกัด ในการจัดเก็บข้อมูลของงานดาวน์สตรีมการปรับจูนและการสลับงานโดยรุ่นใหญ่เปิดศักยภาพการอนุมานเมื่อปรับใช้ LORA ยังมีโมเดลการปรับอื่น ๆ อีกมากมาย (เช่นอะแดปเตอร์การปรับแต่งคำนำหน้าและการปรับแต่ง)
ในฟิลด์การแพร่กระจายที่เสถียรฉันยังให้แบบจำลองการแพร่กระจายที่เสถียร 3 แบบปรับแต่งโดยใช้ LORA ชุดข้อมูล CC3M ถูกดาวน์โหลดและแปลงโดย SVJACK/IMG2Dataset-PQ2HF-Transform-Toolkit
| ชื่อ | ลิงค์โมเดล HuggingFace | ภาษา | ปรับแต่งชุดข้อมูล |
|---|---|---|---|
| SVJACK/POKENOM-SD-LORA-ZH | https://huggingface.co/svjack/pokemon-sd-lora-zh | ชาวจีน | svjack/pokemon-blip-captions-en-zh |
| svjack/concept-caption-3m-sd-lora-en | https://huggingface.co/svjack/concept-caption-3m-sd-lora-en | ภาษาอังกฤษ | คำอธิบายแนวความคิด (CC3M) |
| svjack/concept-caption-3m-sd-lora-zh | https://huggingface.co/svjack/concept-caption-3m-sd-lora-zh | ชาวจีน | คำอธิบายแนวความคิด (CC3M) |
คุณสามารถค้นพบวิธีการใช้โมเดลเหล่านี้ผ่านการ์ดรุ่น
svjack - [email protected] - [email protected]
ลิงค์โครงการ: https: //github.com/svjack/controllora-chinese