flexatar virtual webcam

Webcam Virtual Flexatar

Webcam Virtual Flexatar adalah teknologi itu

1. Membuat model 3D (disebut flexatar ) dari hanya satu foto dalam beberapa detik.
2. Audio hidup dengan flexatar di browser (di perangkat, Inc Mobile) secara realtime yang sulit

Teknologi kami sengaja dirancang untuk WEBRTC !

Demo

Untuk mulai dengan, silakan lihat demo kami menjiwai flexatar dengan radio web di browser Anda.

Anda dapat menemukan contoh pendahuluan di sini

Skenario

Skenario 1: Webcam Virtual WebRTC?

Keuntungan utama dari teknik Flexatar adalah dapat digunakan untuk menghidupkan trek audio pengguna dari mikrofon, sehingga bertindak sebagai webcam virtual untuk WEBRTC .

Kami berencana untuk melakukan contoh integrasi untuk memimpin WebRTC SFU seperti Janus, LiveKit dll. Jangan ragu untuk menawarkan kandidat.

Prosedurnya adalah sebagai berikut:

1. getusermedia () dengan audio saja
2. Audio dikirim ke FlexatarsDK
3. FlexatarsDK memasok trek audio dan video yang memastikan lipsyncing

  navigator.mediaDevices
    .getUserMedia({audio: true,})
    .then((stream) => {
        flexatarSDK.audioInputByMediaStrem(stream)
    })

Kami berencana untuk membagikan contoh interfacing pion segera

Skenario 2: Menganalisis audio untuk pengguna

Kami menargetkan aplikasi yang jelas seperti asisten virtual, bot, dll. Demo ini memberikan ide cara kerjanya.

Yang Anda butuhkan hanyalah

• init flexataranimator dengan token dan tautan ke flexatar
• berikan audio
• Hubungkan output ke elemen video

 videoElement.srcObject = ftar.FlexatarSDK.mediaStreamFactory(
    "<token>",
    "<flexatar link from telegram bot>",
    mediaStream, // media stream with audio track
    (success) => {
        if (success){
            // Do your awesome stuff ...
        }else{
            console.log("Flexatar media stream is unavailable")
        }
    }
)

Dalam konteks skenario yang disebutkan, kami bekerja pada integrasi dengan

• Berbagai kerangka kerja frontend
• Layanan Text-to-Speech (TTS) Populer

Pantau terus!

Skenario 3: Membuat gambar statis "sihir"?

Seperti dalam film ajaib: Sebuah foto mulai bergerak. Dari sudut pandang teknis: Tidak perlu mengambil fitur audio dan menghidupkan seperti di atas, pola animasi sudah cukup.

Menggunakan Flexatar SDK di situs web Anda

B2B CallFlow

Kami memberikan FlexatarsDK sebagai B2B untuk mitra kami.

Secara default, layanan kami disediakan sebagai prabayar. Setelah uang yang dibayarkan, kami berbagi rahasia .

Untuk mengaktifkan SDK Flexatar kami untuk pelanggan Anda, Anda perlu menerima token dari backend kami dan memberikannya kepada pelanggan Anda.

Ketika pengguna membutuhkan layanan dari mitra kami (1), mitra perlu membuat permintaan pasca (2) ke backend kami, dengan Secret in Bearer Header dan JSON di Badan Permintaan. JSON berisi data pengguna dan tarif ("berlangganan") untuk digunakan.

Respons (3) berisi JSON dengan token yang akan diberikan kepada pengguna, bersama dengan halaman web dan Flexatar SDK (4).

Ketika SDK perlu membuat atau mengunduh Flexatar (5) untuk pengguna, token terlibat.

Parameter post B2B

Minta header:

 "Content-Type: application/json" 
"Authorization: Bearer <Secret>"

Posting Permintaan JSON Fields:

 "subscription": "<the tariff to be used>",
"authtype": "<the way how the end-user was authenticated, like gmail.com>",
"user": "<user id>",
"resubscribe": true   __optional, if the user is to be charged as a new one__

Bidang respons pos:

 "token": "<token for the given end-user>",
"ExpiresAt": "when the token expires",
"is_expired": <bool>  __if the token expires, either time-based or resources consumed__
"exists": <bool> __if the token is charged now or have already been charged earlier__

Melakukan pembayaran

Kami akan segera menerima pembayaran strip. Kami terbuka untuk membahas alternatif lain.

FAQ

1. Apa yang diperjuangkan oleh Flexatar ?

• Flexatar adalah format kami untuk menyimpan model 3D wajah manusia , yang mampu menjiwai secara online di browser secara realtime menggunakan WebGL .

2. Bisakah saya membuat flexatar sendiri?

• Tentu. Kirim saja foto ke bot telegram kami

3. Apakah itu 3D?

• Ya! Kami dapat mengekspor Flexatar sebagai file .obj konvensional dengan model dan tekstur 3D. Jika Anda seorang pengembang game dan membutuhkan 3D kustom atau model morfable, jangan ragu untuk menghubungi kami

4.Apa di bawah tenda?

• Matematika in-house kami berjalan di backend untuk menghitung dan menyimpan flexatars
• Rendering dilakukan di JS dengan WebGL

5. Berapa banyak waktu yang dibutuhkan untuk membuat flexatar ?

• Dibutuhkan beberapa detik untuk menghitung flexatar pada GPU dengan foto, dan beberapa detik lagi untuk mengirimkan/mengantri dll. Membuat Flexatar berkualitas tinggi dengan mulut khusus membutuhkan waktu sekitar 10 detik

6. Apakah teknologi itu dapat diskalakan?

• Ya. Backend berjalan pada AWS dan dimaksudkan untuk sangat terukur, baik dalam hal pembuatan dan penggunaan flexatar

7.mobile SDK?

• Dijadwalkan

8. Ada pembatasan?

• Semua flexatar harus disimpan pada sumber daya kami secara eksklusif. Itu dilarang menyimpan atau cache flexatar
• Flexatars milik orang yang memiliki gambar dan kita yang membuatnya dan tidak dapat digunakan oleh sisi mana pun tanpa kesepakatan bersama
• Kami akan mengenakan biaya untuk penggunaan komersial teknologi kami
• Lisensi akan segera dipublikasikan