최근 AI 기술 분야는 이정표 혁신을 안내했습니다. 캡션은 공식적으로 새로운 AI 모델 Mirage를 발표했습니다. Mirage는 스크립트 또는 오디오 클립을 분석하여 가상 문자가 재생하는 사용자 생성 컨텐츠 (UGC) 스타일 비디오를 생성 할 수 있습니다. 얼굴 표정과 신체 언어의 진위는 이전 기술을 훨씬 뛰어 넘어 AI 비디오 제작의 새로운 시대에 입력하는 것을 표시합니다.
Mirage의 핵심 강점은 "0에서 생성하는"능력에 있습니다. 기존 비디오 제작 방법과 달리 Mirage는 사전 녹음 된 재료 또는 복잡한 립 온 도구에 의존 할 필요가 없습니다. 사용자가 입력 한 오디오 또는 텍스트를 기반으로 독창적 인 문자, 배경, 음성 및 완전한 스크립트를 직접 생성 할 수 있습니다. 이 혁신적인 기술은 비디오 제작 과정을 크게 단순화 할뿐만 아니라 제작자에게 전례없는 유연성을 제공합니다.
캡션 팀에 따르면 Mirage는 고급 생성 AI 기술을 사용하며 교육 데이터는 많은 실제 인간 성능 샘플을 다룹니다. 이것은 Mirage에 의해 생성 된 안면 미세 표현력과 자연 운동이 사실적이어서 진실을 말하기가 어렵습니다. 기존의 립 동기화 및 더빙 기술과 비교할 때 Mirage가 생성 한 캐릭터는 입술 모양이 정확할뿐만 아니라 컨텍스트와의 눈 및 끄덕임과 같은 고품질의 세부 사항이있어 비디오의 사실주의를 더욱 향상시킵니다.
업계 내부자들은 일반적으로 Mirage의 출시가 광고 마케팅 및 컨텐츠 생성 분야에 중대한 영향을 미칠 것이라고 믿습니다. 스크립트 입력부터 전체 비디오 생성에 이르기까지 전체 프로세스는 배우, 스튜디오 또는 복잡한 사후 편집없이 몇 분 밖에 걸리지 않으므로 비용과 시간이 크게 줄어 듭니다. 또한 Mirage는 현재 29 개 이상의 언어로 비디오 생성을 지원하여 글로벌 시장 홍보를위한 편의성을 제공합니다.
사용자 테스트 결과에 따르면 Mirage가 생성 한 "존재하지 않는 문자"는 UGC 비디오에서 매우 자연스럽고 시청자가 AI 제품임을 감지하기가 어렵습니다. 캡션은 향후 모델을 더욱 최적화하고 다른 사용자의 요구를 충족시키기 위해 더 많은 사용자 정의 옵션을 추가 할 것을 약속합니다. AI의 Lip-On 기술에서의 이러한 도약은 창의적 효율성을 크게 향상시킬뿐만 아니라 가상 캐릭터의 현실감을 새로운 차원으로 끌어 올리므로 업계의 후속 개발에 대한 심층적 인 관심을받을 가치가 있습니다.
이 기술에 관심이 있으시면 다음 링크를 통해 시도해 볼 수 있습니다. https://www.captions.ai/mirage