flexatar virtual webcam

เว็บแคมเสมือนจริงของ Flexatar

Flexatar Virtual Webcam เป็นเทคโนโลยีที่

1. สร้างโมเดล 3 มิติ (เรียกว่า Flexatar ) จากภาพถ่ายเพียงภาพเดียวในไม่กี่วินาที
2. เสียงเคลื่อนไหวด้วย Flexatar ใน เบราว์เซอร์ (บนอุปกรณ์, Inc Mobile) ในแบบเรียลไทม์

เทคโนโลยีของเราได้รับการออกแบบมาโดยเจตนาสำหรับ WEBRTC !

การสาธิต

ในการเริ่มต้นโปรดดูตัวอย่างของภาพเคลื่อนไหว Flexatar ด้วยเว็บวิทยุในเบราว์เซอร์ของคุณ

คุณสามารถค้นหาตัวอย่างเบื้องต้นได้ที่นี่

สถานการณ์

สถานการณ์ที่ 1: เว็บแคมเสมือนจริงของ WebRTC?

ข้อได้เปรียบที่สำคัญของเทคนิค Flexatar คือสามารถใช้ในการสร้างแทร็กเสียงของผู้ใช้จากไมโครโฟนซึ่งทำหน้าที่เป็นเว็บแคมเสมือนจริงสำหรับ WEBRTC

เรากำลังวางแผนที่จะส่งตัวอย่างการบูรณาการกับผู้นำ WebRTC SFU เช่น Janus, LiveKit ฯลฯ อย่าลังเลที่จะเสนอผู้สมัคร

ขั้นตอนมีดังนี้:

1. getusermedia () ด้วย เสียงเท่านั้น
2. เสียงถูกส่งไปยัง FlexatarsDK
3. Flexatarsdk จัดหาทั้งแทร็ กเสียง และ วิดีโอ ให้แน่ใจว่า lipsyncing

  navigator.mediaDevices
    .getUserMedia({audio: true,})
    .then((stream) => {
        flexatarSDK.audioInputByMediaStrem(stream)
    })

เรากำลังวางแผนที่จะแบ่งปันตัวอย่างของการเชื่อมต่อ pion เร็ว ๆ นี้

สถานการณ์ที่ 2: ภาพเคลื่อนไหวสำหรับผู้ใช้

เรากำลังกำหนดเป้าหมายแอพพลิเคชั่นที่ชัดเจนเช่นผู้ช่วยเสมือนบอท ฯลฯ การสาธิตให้แนวคิดวิธีการทำงาน

สิ่งที่คุณต้องการคือ

• init flexatarimator พร้อมโทเค็นและเชื่อมโยงไปยัง Flexatar
• ให้เสียง
• เชื่อมต่อเอาต์พุตกับองค์ประกอบวิดีโอ

 videoElement.srcObject = ftar.FlexatarSDK.mediaStreamFactory(
    "<token>",
    "<flexatar link from telegram bot>",
    mediaStream, // media stream with audio track
    (success) => {
        if (success){
            // Do your awesome stuff ...
        }else{
            console.log("Flexatar media stream is unavailable")
        }
    }
)

ในบริบทของสถานการณ์ที่กล่าวถึงเรากำลังทำงานเกี่ยวกับการรวมเข้ากับ

• กรอบการทำงานส่วนหน้า
• บริการ Text-to-Speech (TTS) ยอดนิยม

คอยติดตาม!

สถานการณ์ที่ 3: การสร้างภาพคงที่ "เวทมนตร์"?

เหมือนในภาพยนตร์เวทมนตร์: ภาพถ่ายเริ่มเคลื่อนไหว จากมุมมองทางเทคนิค: ไม่จำเป็นต้องดึงคุณสมบัติเสียงและเคลื่อนไหวตามข้างต้นรูปแบบภาพเคลื่อนไหวก็เพียงพอแล้ว

การใช้ Flexatar SDK บนเว็บไซต์ของคุณ

b2b callflow

เรากำลังให้ FlexatarsDK เป็น B2B ให้กับพันธมิตรของเรา

โดยค่าเริ่มต้นบริการของเราจะถูกจัดเตรียมล่วงหน้า หลังจากจ่ายเงินเรากำลังแบ่งปัน ความลับ

ในการเปิดใช้งาน SDK Flexatar ของเราสำหรับลูกค้าของคุณคุณจะต้องได้รับ โทเค็น จากแบ็กเอนด์ของเราและมอบให้กับลูกค้าของคุณ

เมื่อผู้ใช้ต้องการบริการจากพันธมิตรของเรา (1) พันธมิตรจำเป็นต้องทำการร้องขอการ โพสต์ (2) ไปยังแบ็กเอนด์ของเราโดยมี ความลับ ในส่วนหัวของผู้ถือและ JSON ใน Body Request JSON มีข้อมูลผู้ใช้และภาษี ("การสมัครสมาชิก") ที่จะใช้

การตอบสนอง (3) มี JSON พร้อม โทเค็น ที่จะมอบให้กับผู้ใช้พร้อมกับหน้าเว็บและ Flexatar SDK (4)

เมื่อ SDK ต้องการสร้างหรือดาวน์โหลด Flexatar (5) สำหรับผู้ใช้ โทเค็น จะเกี่ยวข้อง

พารามิเตอร์ B2B โพสต์

ขอส่วนหัว:

 "Content-Type: application/json" 
"Authorization: Bearer <Secret>"

โพสต์คำขอฟิลด์ JSON:

 "subscription": "<the tariff to be used>",
"authtype": "<the way how the end-user was authenticated, like gmail.com>",
"user": "<user id>",
"resubscribe": true   __optional, if the user is to be charged as a new one__

โพสต์ฟิลด์ตอบกลับ:

 "token": "<token for the given end-user>",
"ExpiresAt": "when the token expires",
"is_expired": <bool>  __if the token expires, either time-based or resources consumed__
"exists": <bool> __if the token is charged now or have already been charged earlier__

ชำระเงิน

เราจะยอมรับการชำระเงินแถบเร็ว ๆ นี้ เราเปิดกว้างเพื่อหารือเกี่ยวกับทางเลือกอื่น

คำถามที่พบบ่อย

1. Flexatar มีไว้เพื่ออะไร?

• Flexatar เป็นรูปแบบของการจัดเก็บ รูปแบบ 3 มิติของใบหน้ามนุษย์ ที่มีความสามารถในการเคลื่อนไหวออนไลน์ ในเบราว์เซอร์แบบเรียลไทม์โดยใช้ WebGL

2. ฉันสามารถสร้าง ความยืดหยุ่น ได้ด้วยตัวเอง?

• แน่นอน. เพียงแค่ส่งรูปถ่ายไปยังบอทโทรเลขของเรา

3. มันคือ 3D?

• ใช่! เราสามารถส่งออก Flexatar เป็นไฟล์ . obj ทั่วไปพร้อมโมเดล 3 มิติและพื้นผิว หากคุณเป็นนักพัฒนาเกมและต้องการแบบ 3D แบบกำหนดเองหรือแบบจำลองที่จำเพาะได้โปรดติดต่อเรา

4. อะไรอยู่ใต้ประทุน?

• คณิตศาสตร์ภายในของเราทำงานบนแบ็กเอนด์เพื่อคำนวณและจัดเก็บ ความยืดหยุ่น
• การแสดงผลจะดำเนินการใน JS ด้วย WebGL

5. ใช้เวลามากแค่ไหนในการสร้าง ความยืดหยุ่น ?

• ใช้เวลาสองสามวินาทีในการคำนวณ ความยืดหยุ่น บน GPU ด้วยภาพถ่ายและอีกไม่กี่วินาทีในการส่ง/คิว ฯลฯ การทำ flexatar คุณภาพสูงด้วยปากที่กำหนดเองใช้เวลาประมาณ 10 วินาที

6. เทคโนโลยีสามารถปรับขนาดได้หรือไม่?

• ใช่. แบ็กเอนด์ทำงานบน AWS และมีจุดประสงค์เพื่อปรับขนาดได้อย่างมากทั้งในแง่ของการสร้างและการใช้งาน แบบยืดหยุ่น

7. Mobile SDK?

• ที่กำหนดไว้

8. ข้อ จำกัด ใด ๆ ?

• Flexatars ทั้งหมดจะต้องเก็บไว้ในทรัพยากรของเราโดยเฉพาะ เป็นสิ่งต้องห้ามในการจัดเก็บหรือแคช Flexatars
• Flexatars เป็นของทั้งบุคคลที่เป็นเจ้าของภาพและเราที่สร้างมันขึ้นมาและไม่สามารถใช้งานด้านใดก็ได้โดยไม่มีข้อตกลงร่วมกัน
• เราจะเรียกเก็บเงินสำหรับการใช้เทคโนโลยีในเชิงพาณิชย์ของเรา
• ใบอนุญาตจะถูกเผยแพร่เร็ว ๆ นี้