รายงานตัวแก้ไข Downcodes: X-Portrait2 เทคโนโลยีแอนิเมชั่นแนวตั้งล่าสุดของ ByteDance ได้รับความสนใจอย่างกว้างขวางสำหรับความสามารถในการสร้างแอนิเมชั่นที่มีประสิทธิภาพและต้นทุนต่ำเป็นพิเศษ เทคโนโลยีนี้สามารถสร้างวิดีโอแอนิเมชั่นที่สมจริงและแสดงออกได้โดยใช้เพียงภาพนิ่งและวิดีโอที่ขับเคลื่อนด้วยประสิทธิภาพ ซึ่งช่วยให้กระบวนการผลิตแอนิเมชั่นแบบเดิมง่ายขึ้นอย่างมาก แกนหลักของ X-Portrait2 อยู่ที่โมเดลตัวเข้ารหัสการแสดงออกขั้นสูง ซึ่งสามารถจับภาพและถ่ายโอนการแสดงออกเล็กๆ น้อยๆ ได้อย่างแม่นยำ แม้แต่การแสดงออกที่ซับซ้อน เช่น การมุ่ยและลิ้นยื่นออกมา ก็สามารถนำเสนอได้อย่างสมบูรณ์แบบ ในขณะเดียวกันก็รักษาความเที่ยงตรงทางอารมณ์ในระดับสูง เทคโนโลยีนี้คาดว่าจะนำมาซึ่งการเปลี่ยนแปลงที่ปฏิวัติวงการในด้านต่างๆ เช่น ภาพยนตร์แอนิเมชันและตัวแทนเสมือน
หัวใจของเทคโนโลยีอยู่ที่โมเดลตัวเข้ารหัสนิพจน์ขั้นสูง ซึ่งได้รับการฝึกฝนกับชุดข้อมูลขนาดใหญ่เพื่อเข้ารหัสนิพจน์เล็กๆ ในอินพุตโดยปริยาย เมื่อรวมกับโมเดลการแพร่กระจายอันทรงพลัง X-Portrait2 สามารถสร้างวิดีโอที่ราบรื่นและแสดงออกได้สูง ถ่ายทอดการแสดงออกทางสีหน้าอันละเอียดอ่อนของนักแสดง แม้กระทั่งการแสดงออกที่ท้าทาย เช่น การมุ่ย ลิ้นยื่นออกมา แก้มพอง และการขมวดคิ้ว ในขณะเดียวกัน วิดีโอที่สร้างขึ้นยังรักษาความเที่ยงตรงสูงในแง่ของการแสดงออกทางอารมณ์
เมื่อฝึกตัวเข้ารหัสนิพจน์ ทีมพัฒนาจะตรวจสอบให้แน่ใจว่ามีการแยกลักษณะและการเคลื่อนไหวอย่างชัดเจน ทำให้ตัวเข้ารหัสสามารถมุ่งเน้นไปที่ข้อมูลที่เกี่ยวข้องกับการแสดงออกในวิดีโอ การออกแบบนี้ช่วยให้โมเดลบรรลุการถ่ายโอนการแสดงออกข้ามสไตล์และข้ามโดเมน ซึ่งเหมาะสำหรับสถานการณ์ที่หลากหลาย เช่น การเล่าเรื่องที่สมจริง แอนิเมชั่นของตัวละคร เอเจนต์เสมือน และเอฟเฟ็กต์ภาพ
เมื่อเปรียบเทียบกับวิธีการล้ำสมัยที่มีอยู่ เช่น X-Portrait และ Runway Act-One แล้ว X-Portrait2 แสดงให้เห็นถึงความแม่นยำที่สูงกว่าในการเคลื่อนไหวของศีรษะอย่างรวดเร็ว การเปลี่ยนแปลงการแสดงออกเล็กน้อย และการส่งผ่านอารมณ์ส่วนบุคคล ซึ่งมีความสำคัญอย่างยิ่งต่อภาพเคลื่อนไหวคุณภาพสูง การสร้างเนื้อหาถือเป็นสิ่งสำคัญ เช่น ในการผลิตแอนิเมชั่นและภาพยนตร์
ที่อยู่: https://byteaigc.github.io/X-Portrait2/
ด้วยความสามารถในการสร้างแอนิเมชั่นที่มีประสิทธิภาพและมีความเที่ยงตรงสูง X-Portrait2 คาดว่าจะกลายเป็นความก้าวหน้าทางเทคโนโลยีที่สำคัญในด้านการผลิตแอนิเมชั่น ทำให้ผู้สร้างมีเครื่องมือที่สะดวกและทรงพลังมากขึ้น เราหวังว่าจะมีการใช้ X-Portrait2 ในสาขาอื่นๆ มากขึ้นในอนาคต และนำผลงานแอนิเมชั่นที่น่าตื่นเต้นมาสู่เรามากขึ้น