vtbai
1.1-py
vits vits Quelle
Moegoe Vits Chinese
vits_with_chatgpt-gpt3 TTS Argumenting Referenz
blühend kriechen die Live -Broadcast Room -Informationen von B Station
Demonstrationsmodell vits Modell (kommerzielle Verwendung, bitte verfeinern Sie die von der natürliche Person vereinbarte Rechtsquelle oder verwenden Sie Azure).
Schnappen Sie sich Barrage und Geschenke aus dem Bilibili Live -Broadcast -Raum, erhalten Sie sie und senden Sie sie an den offiziellen Chatgpt, warten Sie auf die GPT -Rückrufnachricht und verwenden Sie Vits, um TTS -Inferenz durchzuführen, und lösen Sie dann Ausdrücke aus und spielen Sie Sounds basierend auf der Keywords/VTS -API aus. Beim Spielen entspricht VTS der Lippenform entsprechend dem Klang.
Es sei denn, das Unternehmen oder der Chef ist es sehr wichtig, Live2d von Hand zu reiben. Erstens ist es zeitaufwändig, und zweitens können VTS und PrPrlive verwendet werden, um Ausdrucksverknüpfungsschlüssel mit Schlüsselwörtern auszulösen, und der VTS-API-Live-Broadcast-Effekt ist immer noch in Ordnung.
Dieser Live -Broadcast -Prozess wird nur unter Gewinn getestet und übergeben. Theoretisch können Linux und Mac auch in einer geeigneten PY -Umgebung verwendet werden. Die PY -Version ist Conda 3.10.10
Hinweis: Diejenigen, die fähig sind
BLOSGEMM (GRABE Live Broadcast Room Information) -> OpenAI (Katzenmädchen -Dialog) -> Vits (TTS -Text zur Sprache) -> VTS (Stimme zu Lippen, Ausdruck von Abschlusstasten) -> Obs (Push -Stream)
Die Hauptgeschwindigkeit besteht darin, OpenAI und CPU -Inferenz anzufordern, und die Verwendung von GPU wird viel schneller sein. Da Sie homophonempfindliche Wörter erkennen müssen, um Explosionen zu verhindern, kann SSE nicht verwendet werden.
OBS, VTS und Quehun AI sind vollständig geöffnet. Die CPU -Last beträgt bei der Argumentation etwa 70%. Theoretisch kann der Bettler 5600G mit einem Budget von 2K ebenfalls laufen, der Stromverbrauch beträgt nicht mehr als 100 W und ITX kann laufen und was Fahrrad benötigt wird. In der tatsächlichen Situation verwenden Sie bitte die N -Karten -GPU, um besser zu laufen.
Bitte stellen Sie sicher, dass Sie Conda, OBS, VTS, VSCODE installiert haben
Bitte verwenden Sie Conda, um eine neue Python 3.10 -Umgebung zu erstellen und VSCODE zu starten
git clone -b 1.1-py https://github.com/newreport/vtbai.git
cd vtbai
start.bat
# configmy_config.ini 填写房间号和 openai key
python main.py
# 弹幕，将 resource 中的 hmtl 拖到 obs 里]
