Hedra Labs近日發布了Character-1的研究預覽版,這是一款令人驚豔的AI影片產生工具。它能夠根據用戶提供的照片和語音內容,生成逼真的動態視頻,讓照片中的人物栩栩如生,開口說話或唱歌,唇形、表情和姿態都與語音完美同步。這項技術突破了傳統的影片製作方式,為內容創作帶來了無限可能,其便利的操作和高品質的輸出,為用戶提供了前所未有的體驗。
最近,Hedra Labs推出了Character-1的研究預覽版,該技術允許用戶根據任意人物照片和語音內容生成個人說話和唱歌的動態影片。
想像一下,你上傳一張人物照片,再配上任意的語音內容,瞬間就能生成一段動態視頻,讓照片中的人物彷彿有了生命,開始說話或者唱歌,而且唇形、表情、姿態都和語音內容完美搭配!是不是有點小激動呢?
Hedra Labs官方示範視頻
主要特性和功能亮點:
多平台相容性:無論是桌面還是行動設備,使用者都可以輕鬆使用Character-1。
無限時長生成:目前開放預覽版支援30秒的影片生成,如果H100供應充足,每60秒可產生90秒的內容。
支持多種表達形式:Character-1不僅支持對話,還能處理歌唱和說唱等表達形式。
Hedra提供了一個用戶友好的介面,即使是非專業人士也能快速上手。使用者可以存取Hedra的官網,透過文字轉語音功能或直接上傳音訊文件,輸入角色描述,然後產生動態視訊。
Hedra的AI技術確保了視訊內容的高品質和逼真度,無論是人物的表情、姿態或語音的同步性,都能達到令人滿意的效果。
從官方提供的案例來看,Character-1可以完美演繹唱歌、演戲以及表現不同情緒的角色。這項技術不僅限於人類角色,甚至還能產生表現豐富的無生命物體,只要這些物體有明顯的臉部特徵。
使用方法也非常簡單,具體步驟如下:
開啟hedra體驗網址:https://top.aibase.com/tool/hedra
進入頁面後可以看到這個操作介面

介面很簡單,第一個框輸入你的角色台詞,並選擇一個聲音,當然如果你不想用生成的音頻也可以導入自己的音頻

在這裡我簡單輸入一句「哈囉,這是由AIbase創建的說話視頻,今天帶大家體驗一下Hedra,讓視頻生成變得像呼吸一樣簡單」。
然後在第二個方塊上傳我想要說話的圖片,這裡上傳一張我之前製作的美女寫真。

沒有現成圖片的也可以直接在下面的文字方塊中輸入你的角色,並點擊創建來產生。
圖片上傳完成後,在第三個框下方點擊生成影片即可。

下面是產生的影片效果:
可以看到,Hedra生成的說話視頻,人物是比較靈動的,不是只有嘴巴動,身體的其他部位也會動,而且還會有表情。不過由於平台可供選擇的聲音很少,老外的口音和我的圖片人物不是很搭,還有一個美中不足的是,生成後的視頻要比我原圖模糊了不少,希望平台後續提升一下畫質。
這裡我自己上傳一段音頻,音頻我直接用剪映生成,選擇了一個女生的音色,直接輸入文字然後朗讀。

重新測試一下:
選擇導入音訊

生成效果如下:
然後模糊的問題可以使用krea ai的影片增強功能解決,不過要注意,免費體驗的,影片長度不能超過10秒,超過的只能自己裁剪一下了。而且幀率不要選太高,我選的60格每秒,弄到一半要付費升級了,哭暈在廁所~

總而言之,Character-1展現了AI技術在視訊生成領域的巨大潛力,雖然目前仍存在一些不足,但其未來發展前景值得期待。相信隨著科技的不斷完善,Character-1將會為我們帶來更多驚喜。