dctts pytorch ดาวน์โหลด - dctts pytorch ซอร์สโค้ดดาวน์โหลดดาวน์โหลด

dctts pytorch

โค้ดแหล่งที่มา AI

1.0.0

ดาวน์โหลด

DC-TTS

การใช้งาน Pytorch ของ Papar อย่างมีประสิทธิภาพระบบ text-to-speech ที่ได้รับการฝึกอบรมอย่างมีประสิทธิภาพโดยใช้เครือข่ายที่ลึกล้ำด้วยความสนใจ

ขอบคุณสำหรับ Kyubyong/DC_TTS ซึ่งช่วยฉันได้มากในการเอาชนะปัญหาบางอย่าง

ชุดข้อมูล

ชุดข้อมูลคำพูด LJ ชุดข้อมูลคำพูดโดเมนสาธารณะประกอบด้วยคลิปเสียงสั้น ๆ 13,100 คลิปของลำโพงหญิงคนเดียว

รถไฟ

ฉันได้ปรับพารามิเตอร์ไฮเปอร์และฝึกอบรมแบบจำลองด้วยชุดข้อมูล LJ Speech พารามิเตอร์ไฮเปอร์อาจไม่ดีที่สุดและแตกต่างจากที่ใช้ในกระดาษต้นฉบับเล็กน้อย

เพื่อฝึกอบรมแบบจำลองด้วยชุดข้อมูล LJ Speech:

ดาวน์โหลดชุดข้อมูลและแยกออกเป็นไดเรกทอรีตั้งค่าไดเรกทอรีใน pkg/hyper.py
ใช้การประมวลผลล่วงหน้า
```
 python3 main.py --action preprocess
```
ฝึกอบรมเครือข่าย text2mel คุณสามารถเปลี่ยนอุปกรณ์เพื่อฝึกอบรม text2mel ใน pkg/hyper.py
```
 python3 main.py --action train --module Text2Mel
```
ฝึกอบรมเครือข่าย SSRN ก็เป็นไปได้ที่จะเปลี่ยนอุปกรณ์การฝึกอบรม
```
 python3 main.py --action train --module SuperRes
```

ตัวอย่าง

ตัวอย่างสังเคราะห์บางตัวอย่างมีอยู่ใน synthesis ไดเรกทอรี ประโยคตามแสดงไว้ใน sentences.txt โมเดลที่ผ่านการฝึกอบรมล่วงหน้าสำหรับ Text2Mel และ Superres (ประหยัดอัตโนมัติที่ logdir/text2mel/pkg/trained.pkg และ logdir/superres/pkg/trained.pkg ในขั้นตอนการฝึกอบรม) จะโหลดเมื่อทำการสังเคราะห์

คุณสามารถตัวอย่างการสังเคราะห์ที่ระบุไว้ใน sentences.txt ด้วย

 python3 main.py --action synthesis

เมทริกซ์ความสนใจ สำหรับประโยค: "ซึ่งมาก่อน ... ไก่หรือไข่? จักรวาลมีจุดเริ่มต้น ... และถ้าเป็นเช่นนั้นเกิดอะไรขึ้นก่อนหน้านั้นจักรวาลมาจากไหน ... และมันจะไปไหน"

รูปแบบที่ผ่านการฝึกอบรมมาก่อน

ตัวอย่างใน synthesis ไดเรกทอรีจะถูกสุ่มตัวอย่างด้วย 410K แบทช์ text2mel ที่ผ่านการฝึกอบรม 2 และ 190k แบทช์ที่ผ่านการฝึกอบรมมาแล้ว

ผลลัพธ์ในปัจจุบันไม่น่าพึงพอใจมากสระบางตัวจะถูกข้าม หวังว่าใครบางคนสามารถหาพารามิเตอร์ไฮเปอร์ที่ดีกว่าและฝึกอบรมโมเดลที่ดีกว่า โปรดบอกฉันว่าคุณสามารถเป็นนางแบบที่ยอดเยี่ยมได้หรือไม่

คุณสามารถดาวน์โหลดโมเดลที่ผ่านการฝึกอบรมมาก่อนจาก Dropbox ของฉัน