flexatar virtual webcam

Flexatar虚拟网络摄像头

Flexatar虚拟网络摄像头是该技术

1. 仅在几秒钟内仅一张照片创建一个3D模型（称为Flexatar ）。
2. 使用FlexAtar在浏览器中使用FlexAtar（在Device，Inc Mobile）中进行音频动画，并在Hard Realtime中

我们的技术是故意为WEBRTC设计的！

演示

首先，请查看我们在浏览器中使用网络收音机为Flexatar动画的演示。

您可以在这里找到初步示例

方案

方案1：WEBRTC虚拟网络摄像头？

FlexaTar技术的关键优势在于，它可用于从麦克风中为用户的音轨动画，从而充当WEBRTC的虚拟网络摄像头。

我们计划将集成示例提交给Webrtc SFU，例如Janus，Livekit等。随时提供候选人。

该过程如下：

1. GetUsermedia（）仅带有音频
2. 音频已传递到Flexatarsdk
3. Flexatarsdk提供音频和视频轨道，以确保Lipsyning

  navigator.mediaDevices
    .getUserMedia({audio: true,})
    .then((stream) => {
        flexatarSDK.audioInputByMediaStrem(stream)
    })

我们计划很快分享接口触发的例子

方案2：为用户动画音频

我们正在针对虚拟助手，机器人等明显的应用程序等。演示提供了一个想法。

您所需要的只是

• 带有令牌并链接到flexatar的Init flexataranimator
• 提供音频
• 将输出连接到视频元素

 videoElement.srcObject = ftar.FlexatarSDK.mediaStreamFactory(
    "<token>",
    "<flexatar link from telegram bot>",
    mediaStream, // media stream with audio track
    (success) => {
        if (success){
            // Do your awesome stuff ...
        }else{
            console.log("Flexatar media stream is unavailable")
        }
    }
)

在上述方案的背景下，我们正在与

• 各种前端框架
• 流行的文本到语音（TTS）服务

敬请关注！

方案3：制作静态图像“魔术”？

就像在魔术电影中：照片开始移动。从技术的角度来看：无需像上面的音频功能并动画，动画模式就足够了。

在您的网站上使用Flexatar SDK

B2B呼叫流

我们正在为合作伙伴提供Flexatarsdk作为B2B。

默认情况下，我们的服务作为预付费提供。付款后，我们将分享一个秘密。

为了使我们的客户启用Flexatar SDK ，您需要从我们的后端获得令牌并提供给客户。

当用户需要我们合作伙伴的服务（1）时，合作伙伴需要向我们的后端提出后请求（2），并在请求主体中使用Bearer Header和JSON秘密。 JSON包含要使用的用户数据和关税（“订阅”）。

响应（3）包含带有代币的JSON，并与网页和Flexatar SDK一起提供给用户（4）。

当SDK需要为用户创建或下载FlexAtar（5）时，涉及令牌。

B2B邮政参数

请求标题：

 "Content-Type: application/json" 
"Authorization: Bearer <Secret>"

发布请求JSON字段：

 "subscription": "<the tariff to be used>",
"authtype": "<the way how the end-user was authenticated, like gmail.com>",
"user": "<user id>",
"resubscribe": true   __optional, if the user is to be charged as a new one__

响应后字段：

 "token": "<token for the given end-user>",
"ExpiresAt": "when the token expires",
"is_expired": <bool>  __if the token expires, either time-based or resources consumed__
"exists": <bool> __if the token is charged now or have already been charged earlier__

付款

我们将尽快接受条纹付款。我们愿意讨论其他替代方案。

常问问题

1.弹性代表什么？

• FlexAtar是我们存储3D模型的人脸的格式，可以使用WebGL实时在浏览器中进行在线动画。

2.我可以自己做一个弹性吗？

• 当然。只需将照片发送到我们的电报机器人

3.是3D？

• 是的！我们可以将FlexAtar导出为具有3D模型和纹理的常规.OBJ文件。如果您是游戏开发人员，需要自定义3D或可变形的模型，请随时与我们联系

4.在引擎盖下是什么？

• 我们的内部数学在后端运行以计算和存储弹性
• 使用WebGL在JS中执行渲染

5.创建一个弹性需要花多少时间？

• 通过照片计算GPU上的Flexatar需要几秒钟的时间，再提供几秒钟才能交付/队列等。用自定义的嘴巴制作高质量的弹性，大约需要10秒钟

6.技术可扩展吗？

• 是的。后端在AWS上运行，旨在在Flexatar创建和使用方面非常可扩展

7. Mobile SDK？

• 计划

8.任何限制？

• 所有的灵活性都必须专门存储在我们的资源上。禁止存储或缓存弹性
• FlexaTars既属于拥有图像的人，也属于创建图像的人，并且在没有相互同意的情况下不能被任何方面使用
• 我们将向我们的技术进行商业使用费用
• 许可即将发布