Hedra Labs lançou recentemente uma versão prévia de pesquisa do Character-1, uma incrível ferramenta de geração de vídeo de IA. Ele pode gerar vídeos dinâmicos realistas com base em fotos e conteúdo de voz fornecidos pelos usuários, dando vida aos personagens das fotos, falando ou cantando, e seus formatos de lábios, expressões e gestos estão perfeitamente sincronizados com a voz. Esta tecnologia rompe com os métodos tradicionais de produção de vídeo e traz infinitas possibilidades para a criação de conteúdo. Sua operação conveniente e saída de alta qualidade proporcionam aos usuários uma experiência sem precedentes.
Recentemente, o Hedra Labs lançou uma versão prévia de pesquisa do Character-1, uma tecnologia que permite aos usuários gerar vídeos dinâmicos de indivíduos falando e cantando com base em fotos e conteúdo de voz de qualquer pessoa.
Imagine que você carrega a foto de uma pessoa e adiciona qualquer conteúdo de voz, e um vídeo dinâmico pode ser gerado em um instante, fazendo com que a pessoa na foto pareça ganhar vida, comece a falar ou cantar, e o formato dos lábios, expressão, e a postura são consistentes com o conteúdo da voz. Você está um pouco animado?
Vídeo de demonstração oficial do Hedra Labs
Principais recursos e destaques funcionais:
Compatibilidade multiplataforma: os usuários podem usar facilmente o Character-1 em desktops e dispositivos móveis.
Geração de duração ilimitada: a versão atual de visualização aberta suporta geração de vídeo de 30 segundos. Se o H100 tiver fornecimento suficiente, 90 segundos de conteúdo podem ser gerados a cada 60 segundos.
Suporta múltiplas formas de expressão: Character-1 não só suporta diálogo, mas também pode lidar com formas de expressão como canto e rap.
Hedra fornece uma interface amigável para que mesmo os não especialistas possam começar rapidamente. Os usuários podem visitar o site oficial do Hedra, usar a função de conversão de texto em fala ou fazer upload de arquivos de áudio diretamente, inserir uma descrição do personagem e gerar um vídeo dinâmico.
A tecnologia de IA da Hedra garante a alta qualidade e fidelidade do conteúdo do vídeo, seja na expressão do personagem, postura ou sincronização de voz, podendo alcançar resultados satisfatórios.
A julgar pelos casos oficiais, o Personagem-1 pode perfeitamente cantar, atuar e expressar papéis com emoções diferentes. A tecnologia não se limita a personagens humanos, mas pode até gerar objetos inanimados expressivos, desde que tenham características faciais distintas.
O método de utilização também é muito simples, os passos específicos são os seguintes:
Endereço da experiência Hedra aberta: https://top.aibase.com/tool/hedra
Depois de entrar na página, você pode ver esta interface de operação
A interface é muito simples. Na primeira caixa, insira as falas do seu personagem e selecione uma voz. Claro, se você não quiser usar o áudio gerado, você também pode importar seu próprio áudio.
Aqui eu simplesmente digito "Olá, este é um vídeo falado criado pela AIbase. Hoje vou levá-lo para experimentar o Hedra, tornando a geração de vídeo tão fácil quanto respirar."
Depois carregue a foto da qual quero falar na segunda caixa, e aqui carregue a foto de uma linda mulher que fiz antes.
Caso não tenha uma imagem pronta, você pode inserir seu personagem diretamente na caixa de texto abaixo e clicar em Criar para gerá-lo.
Após o upload da imagem, clique em Gerar vídeo na terceira caixa.
Aqui está o efeito de vídeo resultante:
Percebe-se que no vídeo falado gerado por Hedra os personagens são relativamente ágeis. Não só a boca se move, mas outras partes do corpo também se movem, e também há expressões. No entanto, como há poucas vozes para escolher na plataforma, o sotaque do estrangeiro não combina muito bem com o personagem da minha imagem. Outra desvantagem é que o vídeo gerado é muito mais desfocado do que a minha imagem original. Espero que a plataforma melhore. a qualidade da imagem no futuro.
Aqui eu mesmo carreguei um áudio. Gerei o áudio diretamente usando clipping, selecionei a voz de uma garota, digitei o texto diretamente e depois li em voz alta.
Tente novamente:
Selecione importar áudio
O efeito gerado é o seguinte:
Então, o problema de desfoque pode ser resolvido usando a função de aprimoramento de vídeo do krea ai. No entanto, observe que, para teste gratuito, a duração do vídeo não pode exceder 10 segundos, você só poderá cortá-lo. E não escolha uma taxa de quadros muito alta. Escolhi 60 quadros por segundo. No meio, tive que pagar para atualizar e desmaiei no banheiro de tanto chorar.
Em suma, o Character-1 mostra o grande potencial da tecnologia de IA no campo da geração de vídeo. Embora ainda existam algumas deficiências, vale a pena esperar pelas suas perspectivas de desenvolvimento futuro. Acredito que à medida que a tecnologia continua a melhorar, o Personagem-1 nos trará mais surpresas.