vtbai
1.1-py
VITS VITS SOURCE
Moegoe vite le chinois
vits_with_chatgpt-gpt3 Référence du raisonnement TTS
BLIVIEDM Crawl the Live Broadcast Room Informations de la station B
Modèle de démonstration VITS (Utilisation commerciale, veuillez affiner la source sonore légale convenue par la personne naturelle ou utilise Azure)
Saisissez le barrage et les cadeaux de la salle de diffusion de Bilibili Live, recevez-les et envoyez-les au Chatgpt officiel, attendez le message de rappel GPT et utilisez des vites pour effectuer une inférence TTS, puis déclenchez des expressions et lecture des sons en fonction de l'API de mots clés / VTS. En jeu, VTS correspond à la forme des lèvres selon le son.
À moins que l'entreprise ou le patron, il est très important de frotter Live2D à la main. Premièrement, il prend du temps, et deuxièmement, VTS et PRPRLive peuvent être utilisés pour déclencher des touches de raccourci d'expression avec des mots clés, et l'effet de diffusion en direct de l'API VTS est toujours OK.
Ce processus de diffusion en direct n'est testé que sous victoire. Théoriquement, Linux et Mac peuvent également être utilisés dans un environnement PY approprié. La version py est conda 3.10.10
Remarque: Ceux qui sont capables peuvent étendre les tuyaux de souris et d'huile de la même manière, py thread coroutine process shark me
BLIVEDM (Grab Informations sur la salle de diffusion en direct) -> Openai (Cat Girl Dialogue) -> VITS (TTS TTS TO VOCH) -> VTS (voix à lèvre, touches de raccourci expression) -> Obs (Stream push)
La vitesse principale consiste à demander l'inférence OpenAI et CPU, et l'utilisation de GPU sera beaucoup plus rapide. Étant donné que vous devez détecter les mots sensibles à l'homophone pour éviter les explosions, SSE ne peut pas être utilisé.
OBS, VTS et Quehun Ai sont complètement ouverts. La charge du processeur est d'environ 70% lors du raisonnement. Théoriquement parlant, le mendiant 5600G avec un budget de 2k peut également fonctionner, la consommation d'énergie n'est pas supérieure à 100 W, et ITX peut fonctionner et quel vélo est nécessaire. Dans la situation réelle, veuillez utiliser N Card GPU pour mieux fonctionner.
Veuillez vous assurer que vous avez installé Conda, Obs, VTS, VSCODE
Veuillez utiliser Conda pour créer un nouvel environnement Python 3.10 et lancer VSCODE
git clone -b 1.1-py https://github.com/newreport/vtbai.git
cd vtbai
start.bat
# configmy_config.ini 填写房间号和 openai key
python main.py
# 弹幕，将 resource 中的 hmtl 拖到 obs 里]]
