nonebot plugin fishspeech tts Download - nonebot plugin fishspeech tts Código fonte download

nonebot plugin fishspeech tts

Código-Fonte de IA

v2024.12.09-07.43.52

Baixar

Notbot-Plugin-FishSpeech-tts

Chamada de Notbot2 para peixe-audio online ou plug-in offline de geração de texto tts API de expressão de peixe

Chinês simplificado | Inglês

introduzir

Apenas um material de voz de 5 segundos pode ser usado ~~para clonar perfeitamente~~ o som original! Basta preparar a voz do personagem que você deseja clonar e rotular seu nome de arquivo de voz (veja abaixo) para gerar rapidamente a voz.

Ou use a API online oficial -> Fish -Audio para desfrutar de uma geração de voz rápida em nuvem.

Isenção de responsabilidade

Cuidado

Esse plug-in é apenas para fins de aprendizado e pesquisa , e os usuários devem assumir o risco de usar o plug-in por seu próprio risco. O autor não é responsável por quaisquer perdas ou problemas causados pelo uso do plug -in. Por favor, use o plug-in razoavelmente e cumpra leis e regulamentos relevantes. Ao usar este plug-in, você leu e concorda em cumprir o aviso acima . Se você não concordar ou não cumprir a instrução acima, não use este plug-in.

? Instalar

Instalar

Instalação pipx

pipx install nonebot-plugin-fishspeech-tts -U

[! NOTA] Adicione este plugin em pyproject.toml de nonbot

Instalação nb-cli

nb plugin install nonebot-plugin-fishspeech-tts -U

Instalação git clone (não recomendado)

Execute -se sob a janela de comando cmd

git clone https://github.com/Cvandia/nonebot-plugin-fishspeech-tts

Copie a pasta nonebot-plugin-fishspeech-tts na janela Executar para src/plugins no diretório raiz do bot (ou outro nome xxx/plugins ao criar o bot)

Perceber

Download de site de espelho recomendado

Tsinghua fonte https://pypi.tuna.tsinghua.edu.cn/simple

Alibaba Source https://mirrors.aliyun.com/pypi/simple/

Configuração

Adicione a seguinte configuração em .env

Configuração básica	tipo	Obrigatório	valor padrão	ilustrar
TTS_IS_ONLINE	bool	sim	Verdadeiro	Se deve usar a API em nuvem
tts_chunk_length	literal	não	"normal"	O comprimento do fragmento de áudio é normal quando solicitado, opcional: curto, normal, longo
TTS_MAX_NEW_TOKENS	int	não	800	Comprimento máximo de áudio, o padrão é 800, a configuração para 0 é ilimitada
TTS_AUDIO_PATH	str	não	"./data/reference áudio"	Caminho do material de voz, o padrão é "./data/reference áudio"
tts_prefix	str	não	Nenhum	Gatilho prefixo, padrão para nenhum

Nota: O formato do nome do arquivo do áudio de referência é: [Nome do papel] O rótulo de texto correspondente ao áudio. [Nome do sufixo de áudio]

Clique aqui para selecionar para baixar o áudio de referência recomendado reference_audio.zip , descompacte e colocar o áudio no data/参考音频no diretório de arquivos bot.

! Apoie diferentes vozes do mesmo personagem!

Para obter detalhes sobre o suporte ao sufixo de áudio, consulte AUDIO_FILE_SUFFIX em files.py

Se você deseja usar a API oficial, defina o item de configuração tts_is_online como True e configure o seguinte

Itens de configuração	tipo	Obrigatório	valor padrão	ilustrar
online_api_url	str	não	"https://api.fish-audio.cn"	O endereço da API oficial do site pode ser selecionado em https://api.fish.audio (murado) ou valor padrão
Online_authorization	str	sim	"xxxxx"	Chave oficial de autenticação da API, consulte o link para obter detalhes
online_model_first	bool	não	Verdadeiro	Se você deseja chamar o modelo oficial, personalize o tom do personagem por meio de seu próprio áudio de referência, defina -o como `False` . Obviamente, se você não preparar o áudio de referência, também chamará o tom já disponível no site oficial. Para detalhes, consulte o link
online_api_proxy	str	não	Nenhum	Endereço de proxy, como: http://127.0.0.1:7890

Se você deseja usar a API do seu próprio projeto de fala de peixes, defina o item de configuração tts_is_online para Fasle e configurar o seguinte

Itens de configuração	tipo	Obrigatório	valor padrão	ilustrar
OFFLINE_API_URL OFFLINE_API_URL	str	sim	"http://127.0.0.1:8080"	Seu endereço de API `fish-speech`

usar

Observação

Observe o seu COMMAND_START e os itens de configuração acima.

instrução:

instrução	precisar@	escopo	ilustrar	Permissões
XXX diz xxxx	De acordo com a configuração	todos	Geração de voz TTS	todos
Lista de voz	sim	todos	Obtenha uma lista de todas as funções	todos
Balanço de voz	sim	todos	Consulta Balanço da API	todos

? Pendência

Adicione mais itens de configuração
Ainda não há planos

Se você gosta, lembre -se de clicar em uma estrela

? Obrigado especial

NotBot2: O básico deste projeto, uma estrutura de robô de bate-papo muito fácil de usar.
Fish-fala: zero amostra e amostra pequena tts: insira uma amostra sonora de 10 a 30 segundos para gerar saída TTS de alta qualidade

Ajuda adicional

Breve tutorial sobre a criação de janelas offline

Antes de usar

CUDA Toolkit garante que a versão correta do CUDA seja instalada antes de usar

Prepare fish-speech

1. Faça o download do código release do repositório de fish-speech ( Source code (zip) ) para o local
2. Descompactar para o local
3. Abra o diretório raiz de fish-speech
4. Execute install_env.bat para instalar o ambiente virtual e as dependências necessárias
5. Run start.bat pela primeira vez
6. Modifique API_FLAGS.txt e inicie -o novamente

Inicie o serviço da API

1. Modificar API_FLAGS.txt para ser aproximadamente o seguinte conteúdo, ou seja, cancele # na frente api

 # --infer
--api
--listen 0.0.0.0:8080  #监听接口
...

Parâmetros adicionais que podem ser adicionados em API_FLAGS.txt

1. --complie -> Se deve iniciar o modelo compilado (geração mais rápida de TTS, mas uma startup mais lenta)
2. --workers 数字> Iniciar multi-coroutinas数字(certifique-se de definir, porque o padrão é fácil de bloquear)
3. --device cpu -> Use a CPU para gerar TTS (se estiver usando a GPU, ignore)
4. --half -> Use metade da precisão para gerar TTS
5. --max-text-length > Digite o comprimento máximo do texto