รายงานตัวแก้ไขดาวน์โค้ด: ทีมสร้างสรรค์ของ Alibaba ได้ใช้โมเดลการซ่อมแซมอิมเมจ AI อันทรงพลังแบบโอเพ่นซอร์ส - FLUX-Controlnet-Inpainting โมเดลนี้ใช้สถาปัตยกรรม FLUX.1-dev และใช้ชุดข้อมูลขนาดใหญ่สำหรับการฝึก โดยมีความละเอียดสูงสุด 768x768 และมีการสร้างอิมเมจคุณภาพสูงและความสามารถในการซ่อมแซมที่แม่นยำ ไม่เพียงซ่อมแซมส่วนที่ขาดหายไปของรูปภาพเท่านั้น แต่ยังเพิ่ม ลบวัตถุ และแม้แต่เปลี่ยนสไตล์ของรูปภาพตามคำอธิบายข้อความที่ผู้ใช้ให้ไว้ ซึ่งแสดงความสามารถในการประมวลผลภาพ AI ที่น่าทึ่ง โมเดลดังกล่าวเป็นโอเพ่นซอร์สบนแพลตฟอร์ม Hugging Face และมีบทช่วยสอนโดยละเอียดและโค้ดตัวอย่างเพื่ออำนวยความสะดวกให้ผู้ใช้สามารถเริ่มต้นได้อย่างรวดเร็ว
เมื่อเร็วๆ นี้ ทีมสร้างสรรค์ของ Alimama ได้เปิดตัวโมเดลการซ่อมแซมรูปภาพ AI แบบโอเพ่นซอร์สที่เรียกว่า FLUX-Controlnet-Inpainting โมเดลดังกล่าวใช้สถาปัตยกรรมโมเดล FLUX.1-dev และได้รับการฝึกอบรมเกี่ยวกับอิมเมจ laion2B จำนวน 12 ล้านอิมเมจ และชุดข้อมูลภายในของอาลีบาบา โดยมีความละเอียดสูงสุด 768x768 ซึ่งสามารถซ่อมแซมอิมเมจคุณภาพสูงได้
เครื่องมือนี้ไม่เพียงสืบทอดความสามารถในการสร้างภาพคุณภาพสูงของรุ่น FLUX.1-dev เท่านั้น แต่ยังผสานรวมข้อดีของ ControlNet อย่างชาญฉลาดอีกด้วย สามารถซ่อมแซมภาพได้อย่างแม่นยำตามข้อมูล เช่น ขอบ การวาดเส้น และแผนที่เชิงลึก และสร้างเนื้อหาในพื้นที่ที่กำหนดซึ่งสอดคล้องกับสภาพแวดล้อมโดยรอบ นำชีวิตใหม่มาสู่ชิ้นส่วนภาพที่เสียหายหรือสูญหาย
จุดเด่นประการหนึ่งของโมเดลนี้คือสามารถเข้าใจคำอธิบายด้วยวาจาของผู้ใช้และซ่อมแซมรูปภาพตามคำอธิบายได้อย่างแม่นยำ เช่น การเพิ่มหรือลบวัตถุออกจากรูปภาพตามคำอธิบายข้อความที่ผู้ใช้ให้ไว้ และแม้แต่การเปลี่ยนสไตล์ ของภาพ
ขณะนี้โมเดล FLUX-Controlnet-Inpainting เป็นโอเพ่นซอร์สบนแพลตฟอร์ม Hugging Face และให้บทช่วยสอนการใช้งานโดยละเอียดและโค้ดตัวอย่าง ผู้ใช้สามารถติดตั้งไลบรารีตัวกระจายสัญญาณผ่าน pip และโคลนโค้ดโปรเจ็กต์จาก GitHub เพื่อสัมผัสประสบการณ์ฟังก์ชันอันทรงพลังของโมเดลได้อย่างรวดเร็ว .
ทีมสร้างสรรค์ของ Alimama ระบุว่าโมเดล FLUX-Controlnet-Inpainting ที่เปิดตัวในปัจจุบันยังอยู่ในขั้นตอนการทดสอบอัลฟ่า และจะดำเนินการเพิ่มประสิทธิภาพของโมเดลต่อไปในอนาคต และวางแผนที่จะเผยแพร่เวอร์ชันอัปเดตในอนาคต
ที่อยู่โครงการ: https://github.com/alimama-creative/FLUX-Controlnet-Inpainting
ที่อยู่การดาวน์โหลดเวิร์กโฟลว์: https://huggingface.co/alimama-creative/FLUX.1-dev-Controlnet-Inpainting-Alpha/resolve/main/images/alimama-flux-controlnet-inpaint.json
โดยรวมแล้ว โอเพ่นซอร์สของโมเดล FLUX-Controlnet-Inpainting ได้นำความก้าวหน้าครั้งใหม่มาสู่ด้านการฟื้นฟูภาพ AI เราหวังว่าจะพบกับความประหลาดใจเพิ่มเติมในเวอร์ชันต่อๆ ไป! บรรณาธิการของ Downcodes จะยังคงให้ความสนใจกับการพัฒนาในภายหลังต่อไป