เครื่องมือแปลวิดีโอ AI ของ Panjaya BodyTalk กำลังปฏิวัติอุตสาหกรรมการแปลวิดีโอ มันสามารถแปลงเสียงของตัวละครในวิดีโอเป็นภาษาอื่นได้อย่างถูกต้องและสามารถซิงโครไนซ์การแสดงออกทางสีหน้าและการเคลื่อนไหวของตัวละครได้อย่างสมบูรณ์แบบเพื่อให้ได้เอฟเฟกต์การแปลงภาษาที่เป็นธรรมชาติสูง เทคโนโลยีนี้แบ่งผ่านข้อ จำกัด ของการทำสำเนาแบบดั้งเดิมและเป็นโซลูชั่นใหม่สำหรับการเผยแพร่เนื้อหาวิดีโอทั่วโลก BodyTalk ก่อตั้งขึ้นโดยผู้เชี่ยวชาญด้านการเรียนรู้ลึกของอิสราเอลสองคนและนำโดยซีอีโอที่มีประสบการณ์ด้วยทีมที่แข็งแกร่งและเทคโนโลยีชั้นนำ
การเริ่มต้นที่เรียกว่า Panjaya กำลังปฏิวัติเกมการแปลวิดีโอ หลังจากสามปีของการวิจัยและพัฒนาลับ บริษัท ได้เปิดตัว Breakthrough Product BodyTalk ซึ่งเป็นเครื่องมือ AI ที่แปลงเสียงของตัวละครในวิดีโอเป็นภาษาอื่น ๆ ได้อย่างแม่นยำ ซึ่งแตกต่างจากการทำสำเนาแบบดั้งเดิม BodyTalk ไม่เพียง แต่จำลองคุณสมบัติอะคูสติกดั้งเดิมของลำโพงอย่างสมบูรณ์ แต่ยังปรับการแสดงออกทางสีหน้าและการเคลื่อนไหวของตัวละครในวิดีโอโดยอัตโนมัติเพื่อให้ตรงกับรูปแบบเสียงของภาษาใหม่
Panjaya ก่อตั้งขึ้นโดยผู้เชี่ยวชาญด้านการเรียนรู้เชิงลึกของรัฐบาลอิสราเอลสองคน Hilik Shani และ Ariel Shalom ในปี 2021 ทั้งสองออกจากแผนกรัฐบาลเพื่อเริ่มต้นธุรกิจและต้อนรับ Guy Piekarz ซึ่งมีประสบการณ์ในอุตสาหกรรมที่หลากหลายในฐานะซีอีโอ Matcha ซึ่งเป็นแพลตฟอร์มการค้นหาสื่อสตรีมมิ่งและแพลตฟอร์มคำแนะนำที่ก่อตั้งขึ้นโดย Piquetz ก่อนหน้านี้ได้ซื้อโดย Apple ในปี 2013
ปัจจุบัน BodyTalk รองรับการแปลใน 29 ภาษา เวิร์กโฟลว์ครั้งแรกเกี่ยวข้องกับการแปลเสียงจากนั้นสร้างเสียงใหม่ที่เลียนแบบลำโพงอะคูสติกและในที่สุดก็ปรับรูปร่างและการเคลื่อนไหวของริมฝีปากของลำโพงโดยอัตโนมัติในวิดีโอเพื่อให้ตรงกับการแสดงออกของภาษาใหม่ แม้ว่าเวลาในการประมวลผลจะใกล้เคียงกับเวลาจริง แต่ก็ยังใช้เวลาหลายนาทีในการประมวลผลวิดีโอให้เสร็จสมบูรณ์
ในระดับเทคนิค Panjaya ใช้กลยุทธ์ไฮบริดซึ่งไม่เพียง แต่ใช้แบบจำลองภาษาขนาดใหญ่ของบุคคลที่สามเท่านั้น แต่ยังพัฒนาเทคโนโลยีหลักอย่างอิสระ จากข้อมูลของ Piquetz เอ็นจิ้นการซิงโครไนซ์ริมฝีปากของ บริษัท ได้รับการพัฒนาอย่างสมบูรณ์โดยทีมวิจัย AI ภายในเนื่องจากไม่มีวิธีแก้ปัญหาในตลาดที่สามารถตอบสนองความต้องการของสถานการณ์ทางธุรกิจที่ซับซ้อนเช่นหลายมุมและหลายลำโพง
บริษัท กำลังมุ่งเน้นไปที่ตลาด B2B และได้รับความร่วมมือกับสถาบันต่าง ๆ เช่น JFrog และ TED เท็ดกล่าวว่าจำนวนมุมมองของวิดีโอบรรยายที่ขนานนามว่าใช้เครื่องมือ Panjaya เพิ่มขึ้น 115%และอัตราการดูเต็มรูปแบบเพิ่มขึ้นเป็นสองเท่า บริษัท วางแผนที่จะขยายแอปพลิเคชันด้านกีฬาการศึกษาการตลาดและการแพทย์ต่อไป
เพื่อหลีกเลี่ยงการละเมิดทางเทคนิค Panjaya ควบคุมการใช้เครื่องมือและแผนการพัฒนาฟังก์ชั่นเช่นลายน้ำเพื่อระบุเนื้อหาวิดีโอสังเคราะห์อย่างเคร่งครัด แม้ว่าคำบรรยายจะกลายเป็นมาตรฐานสำหรับเนื้อหาวิดีโอ - มากกว่าครึ่งหนึ่งของผู้ชมชาวอเมริกันจะเปิดคำบรรยายเมื่อดูตลาดต่างประเทศยังคงมีความต้องการอย่างมากสำหรับเนื้อหาการพากย์ ข้อมูลจาก บริษัท วิจัย CSA แสดงให้เห็นว่าเนื้อหาภาษาพื้นเมืองสามารถนำไปสู่การมีส่วนร่วมของผู้ใช้ที่สูงขึ้นโดยเฉพาะในสาขา B2B
รอบการจัดหาเงินทุน 9.5 ล้านดอลลาร์นี้เข้าร่วมโดยสถาบันการลงทุนและบุคคลจำนวนมากรวมถึง Viola Ventures กิจการ R-Squared และผู้ร่วมก่อตั้ง JFrog และ CEO Shlomi Ben Haim ในอนาคต Panjaya วางแผนที่จะเปิดตัวอินเทอร์เฟซ API และปรับปรุงความเร็วในการประมวลผลเพิ่มเติมและก้าวไปสู่เป้าหมายของการประมวลผลแบบเรียลไทม์
การเกิดขึ้นของ BodyTalk แสดงให้เห็นว่าเทคโนโลยีการแปลวิดีโอมีความสูงใหม่ด้วยศักยภาพในการพัฒนาในอนาคต .