Snap은 AWE에서 스마트폰에서 실시간으로 생생한 증강 현실 경험을 생성하는 획기적인 실시간 온디바이스 이미지 확산 모델을 발표하고 AR 제작자를 위한 새로운 생성 AI 도구인 Lens Studio 5.0을 출시했습니다. 이러한 움직임은 AR 기술 개발의 흥미롭고 새로운 단계를 의미하며, 이는 AR 콘텐츠가 생성되는 방식을 크게 변화시키고 사용자에게 더욱 풍부하고 몰입감 있는 AR 경험을 제공할 것입니다. Snap의 이러한 혁신은 AR 콘텐츠 생성의 효율성을 향상시킬 뿐만 아니라 창작의 문턱을 낮추어 더 많은 창작자들에게 AR 세계의 문을 열어줍니다.
Augmented World Expo에서 Snap은 생생한 증강 현실(AR) 경험을 생성할 수 있는 실시간 온디바이스 이미지 확산 모델의 초기 버전을 시연했습니다. 이 회사는 또한 AR 제작자를 위해 설계된 생성 AI 도구도 출시했습니다.
스냅의 공동 창업자이자 최고 기술 책임자인 바비 머피(Bobby Murphy)는 이 행사에서 이 모델은 스마트폰에서 실행할 수 있을 만큼 작고 텍스트 프롬프트를 기반으로 실시간으로 프레임을 다시 렌더링할 수 있을 만큼 빠르다고 말했습니다. 그는 생성적 AI 이미지 확산 모델의 출현이 흥미롭지만 증강 현실에 중요한 영향을 미치려면 이러한 모델이 훨씬 더 빨라야 하므로 Snap 팀은 기계 학습 모델을 가속화하기 위해 노력해 왔습니다.
Snapchat 사용자는 앞으로 몇 달 안에 이 생성 모델을 기반으로 한 렌즈 효과를 볼 수 있을 것으로 알려졌으며 Snap은 연말 이전에 제작자에게 이를 홍보할 계획입니다. Bobby Murphy는 "이 실시간 온디바이스 생성 기계 학습 모델과 미래 모델은 증강 현실의 흥미롭고 새로운 방향을 제시하며 우리가 AR 경험을 렌더링하고 생성하는 방식을 다시 생각하게 만듭니다."라고 말했습니다.
또한 Murphy는 개발자에게 그 어느 때보다 빠르게 AR 효과를 생성하여 몇 주 또는 몇 달의 시간을 절약할 수 있는 새로운 생성 AI 도구를 제공하는 Lens Studio 5.0의 출시도 발표했습니다. AR 제작자는 새로운 도구를 사용하여 매우 사실적인 기계 학습 얼굴 효과를 생성하여 셀카 영상을 빠르게 생성할 수 있으며, 사용자의 얼굴, 신체 및 주변 환경을 포괄하는 맞춤형 스타일 효과를 실시간으로 생성할 수도 있습니다. 또한 몇 분 안에 3D 영상을 생성하고 이를 샷에 적용할 수도 있습니다.
또한 AR 제작자는 회사의 안면 메시 기술을 활용하여 텍스트 또는 이미지 프롬프트를 통해 외계인, 마법사 및 기타 캐릭터를 생성할 수 있으며 마스크, 텍스처 및 재료도 몇 분 안에 생성할 수 있습니다. Lens Studio의 최신 버전에는 AR 제작자가 가질 수 있는 질문에 답할 수 있는 AI 도우미도 포함되어 있습니다. Snap은 이러한 새로운 도구가 AR 제작 방식을 획기적으로 변화시켜 제작자가 창의적인 아이디어를 더 빨리 실현할 수 있을 것으로 기대합니다.
Snap이 이번에 출시한 실시간 기기측 이미지 확산 모델과 Lens Studio 5.0은 AR 기술의 활발한 발전을 예고하며, 이는 앞으로 사용자에게 더욱 다채로운 증강 현실 경험을 제공하고 AR 산업을 새로운 차원으로 끌어올릴 것입니다. 나는 가까운 미래에 이 기술을 기반으로 한 더욱 혁신적인 응용 프로그램을 보게 될 것이라고 믿습니다.