Hedra Labs недавно выпустила исследовательскую предварительную версию Feature-1, потрясающего инструмента для создания видео с использованием искусственного интеллекта. Он может создавать реалистичные динамические видеоролики на основе фотографий и голосового контента, предоставленных пользователями, оживляя персонажей на фотографиях, говоря или поя, а их формы губ, выражения и жесты идеально синхронизируются с голосом. Эта технология выходит за рамки традиционных методов производства видео и открывает безграничные возможности для создания контента. Ее удобное управление и высококачественный результат предоставляют пользователям беспрецедентные возможности.
Недавно Hedra Labs запустила исследовательскую предварительную версию «Character-1», технологии, которая позволяет пользователям создавать динамические видео людей, говорящих и поющих, на основе фотографий и голосового контента любого человека.
Представьте, что вы загружаете фотографию человека и добавляете любой голосовой контент, и в одно мгновение можно создать динамическое видео, благодаря чему человек на фотографии как будто оживает, начинает говорить или петь, а форма губ, выражение лица, и поза соответствуют голосу. Голосовой контент идеально соответствует! Вы немного взволнованы?
Официальное демонстрационное видео Hedra Labs
Основные характеристики и функциональные особенности:
Мультиплатформенная совместимость: пользователи могут легко использовать Символ-1 как на настольных, так и на мобильных устройствах.
Генерация неограниченной продолжительности: текущая открытая предварительная версия поддерживает создание 30-секундного видео. Если H100 имеется в достаточном количестве, 90-секундный контент может создаваться каждые 60 секунд.
Поддерживает несколько форм выражения: Персонаж-1 не только поддерживает диалог, но также может обрабатывать такие формы выражения, как пение и рэп.
Hedra предоставляет удобный интерфейс, поэтому даже неспециалисты могут быстро приступить к работе. Пользователи могут посетить официальный сайт Hedra, использовать функцию преобразования текста в речь или напрямую загружать аудиофайлы, ввести описание персонажа, а затем создать динамическое видео.
Технология искусственного интеллекта Hedra обеспечивает высокое качество и точность видеоконтента, будь то выражение лица, поза или синхронизация голоса, и позволяет достичь удовлетворительных результатов.
Судя по официальным кейсам, Персонаж-1 прекрасно умеет петь, играть и выражать разные эмоции. Технология не ограничивается человеческими персонажами, но может создавать даже выразительные неодушевленные объекты, если у них есть четкие черты лица.
Метод использования также очень прост, конкретные шаги заключаются в следующем:
Адрес открытого опыта Hedra: https://top.aibase.com/tool/hedra
После входа на страницу вы можете увидеть этот рабочий интерфейс.
Интерфейс очень простой. В первом поле введите реплики вашего персонажа и выберите голос. Конечно, если вы не хотите использовать сгенерированный звук, вы также можете импортировать свой собственный звук.
Здесь я просто набираю «Здравствуйте, это говорящее видео, созданное AIbase. Сегодня я покажу вам Hedra, с помощью которой генерировать видео так же легко, как дышать».
Затем загрузите фотографию, о которой я хочу поговорить, во второе поле, а сюда загрузите фотографию красивой женщины, которую я сделал раньше.
Если у вас нет готового изображения, вы можете напрямую ввести своего персонажа в текстовое поле ниже и нажать «Создать», чтобы сгенерировать его.
После загрузки изображения нажмите «Создать видео» под третьим полем.
Вот получившийся видеоэффект:
Видно, что в говорящем видео, созданном Hedra, персонажи относительно подвижны. Двигается не только рот, но и другие части тела, а также есть выражения лиц. Однако, поскольку у платформы очень мало голосов на выбор, акцент иностранца не очень хорошо соответствует персонажу на моей картинке. Еще одним недостатком является то, что сгенерированное видео намного более размыто, чем мое исходное изображение. Надеюсь, платформа улучшит изображение. в будущем качество.
Здесь я сам загрузил аудио, сгенерировал его напрямую с помощью обрезки, выбрал голос девушки, сразу ввел текст и затем прочитал его вслух.
Попробуйте еще раз:
Выберите импорт аудио
Создаваемый эффект следующий:
Тогда проблему размытия можно решить с помощью функции улучшения видео krea ai. Однако обратите внимание, что в бесплатной пробной версии продолжительность видео не может превышать 10 секунд. Если она превышает, вы можете обрезать его только самостоятельно. И не выбирайте слишком высокую частоту кадров. Я выбрал 60 кадров в секунду. На полпути мне пришлось заплатить за обновление, и я упал в обморок в туалете от слез~.
В целом, «Character-1» показывает большой потенциал технологии искусственного интеллекта в области генерации видео. Хотя некоторые недостатки все еще есть, перспективы ее дальнейшего развития заслуживают внимания. Я верю, что по мере дальнейшего совершенствования технологий Персонаж-1 преподнесет нам еще больше сюрпризов.