การถ่ายโอนสไตล์ Fonts-Fonts
ปรับปรุงการโยกย้ายรูปแบบตัวอักษรจีนตาม EMD
เครือข่าย:
จำกัด :
- โมเดล EMD แปลงฟอนต์ดั้งเดิมเป็นตัวแทนเวกเตอร์ผ่านตัวเข้ารหัสสไตล์ ในสาระสำคัญมันคือการฝึกอบรมเครือข่ายการโยกย้ายแบบอักษรแบบมีเงื่อนไข อินพุตสไตล์ถูกสร้างขึ้นเป็นเงื่อนไขเท่านั้น ด้วยวิธีนี้รูปแบบที่ผ่านการฝึกอบรมจะมีผลลัพธ์ที่แย่มากเมื่อพบแบบอักษรสไตล์ที่ไม่ปรากฏในชุดการฝึกอบรม
- ในทางกลับกัน EMD ใช้ภาพตัวอักษรสามตัวคงที่สำหรับการฝึกอบรมซึ่งแก้การถ่ายโอนสไตล์ของภาพตัวอักษรโดยพลการในระดับหนึ่ง เนื่องจากข้อ จำกัด ของภาพสามภาพแต่ละตัวอักษรจึงต้องการแบบอักษรเดียวกันและเนื่องจากภาพของแบบอักษรบางตัวจึงมีผลลัพธ์ที่ไม่ดีน้อยลง
การปรับปรุง:
- ใช้รูปแบบ encoder เป็นตัวเข้ารหัสสไตล์จริงเพื่อป้อนสไตล์ที่ได้อย่างต่อเนื่องลงในโมดูลเครือข่ายตัวถอดรหัสโดยบรรเทาการโยกย้ายสไตล์ตัวอักษรของสไตล์ที่ไม่รู้จักในระดับหนึ่ง ในกรณีพิเศษตัวอย่างเช่นแบบอักษรของภาพเดียวกันในชุดการฝึกอบรมนั้นหายากมากซึ่งสามารถปรับปรุงผลลัพธ์ของโมเดลดั้งเดิมได้อย่างมาก
- เพิ่มการสูญเสียของ Gan และฝึกฝนการเลือกปฏิบัติสองคนตามลำดับ discriminator หนึ่งตัวถูกใช้เพื่อตรวจสอบว่าตัวอักษรที่สร้างขึ้นนั้นเหมือนกับตัวอักษรอินพุตหรือไม่และ Discriminator อื่น ๆ ใช้เพื่อตรวจสอบว่าตัวอักษรที่สร้างขึ้นนั้นเหมือนกับแบบอักษรสไตล์อินพุตหรือไม่ ในเวลาเดียวกันเนื่องจากลักษณะคงที่สไตล์ที่มีอยู่ข้อมูลสไตล์ดั้งเดิมคือการป้อนข้อมูลและตัดสินว่าเป็นตัวอย่าง
- โมเดลสามารถขยายไปสู่การโยกย้ายแบบอักษรที่ไม่ได้รับการดูแล, วนลูปแบบอักษรที่สร้างขึ้นในเครื่องกำเนิดไฟฟ้าอีกครั้งและทำการเปลี่ยนแปลงที่ตรงกันข้ามเพื่อ จำกัด
ตัวอย่าง:
ข้อมูลอ้างอิง:
- การแยกสไตล์และเนื้อหาสำหรับการถ่ายโอนสไตล์ทั่วไป Yexun Zhang, Ya Zhang, Wenbin Cai
- การถ่ายโอนสไตล์โดยพลการแบบเรียลไทม์ด้วยการปรับให้เป็นมาตรฐานแบบปรับตัว Xun Huang, Serge Onie
- สถาปัตยกรรมเครื่องกำเนิดสไตล์ตามสไตล์สำหรับเครือข่ายที่มีความเป็นคู่ปรับ Tero Karras, Samuli Laine, Timo Aila
