Snap анонсировала на AWE свою революционную модель распространения изображений в режиме реального времени на устройстве, которая создает яркие впечатления от дополненной реальности в реальном времени на смартфонах, и запустила Lens Studio 5.0, новый генеративный инструмент искусственного интеллекта для создателей AR. Этот шаг знаменует собой новый захватывающий этап в развитии технологии AR, который значительно изменит способ создания AR-контента и предоставит пользователям более богатый и захватывающий опыт AR. Это нововведение Snap не только повышает эффективность создания AR-контента, но и снижает порог создания, открывая дверь в мир AR для большего количества авторов.
На выставке Augmented World Expo компания Snap продемонстрировала раннюю версию модели распространения изображений на устройстве в реальном времени, которая может генерировать яркие впечатления в дополненной реальности (AR). Компания также запустила инструменты генеративного искусственного интеллекта, предназначенные для создателей AR.

Модель достаточно мала, чтобы работать на смартфоне, и достаточно быстра, чтобы повторно отображать кадры в реальном времени на основе текстовых подсказок, заявил на мероприятии соучредитель и главный технический директор Snap Бобби Мерфи. Он отметил, что, хотя появление моделей распространения изображений с генеративным ИИ является захватывающим, эти модели должны быть значительно быстрее, чтобы оказать существенное влияние на дополненную реальность, поэтому команда Snap работает над ускорением моделей машинного обучения.
Сообщается, что пользователи Snapchat начнут видеть эффекты линз, основанные на этой генеративной модели, в ближайшие несколько месяцев, и Snap планирует продвигать ее создателям до конца года. «Эта модель генеративного машинного обучения на устройстве в режиме реального времени и будущие модели знаменуют новое захватывающее направление для дополненной реальности и заставляют нас переосмыслить способы рендеринга и создания AR-опыта», — сказал Бобби Мерфи.
Кроме того, Мерфи также объявил о выпуске Lens Studio 5.0, которая предоставляет разработчикам новые инструменты генеративного искусственного интеллекта, которые помогут им создавать AR-эффекты быстрее, чем когда-либо прежде, экономя недели или даже месяцы времени. Создатели AR могут использовать новые инструменты для быстрого создания видеороликов для селфи, создавая высокореалистичные эффекты лица, полученные машинным обучением, а также создавать собственные эффекты стиля в реальном времени, охватывающие лицо, тело и окружение пользователя. Они также могут за считанные минуты создавать 3D-материалы и применять их к своим снимкам.
Кроме того, создатели AR могут использовать технологию лицевой сетки компании для создания инопланетян, волшебников и других персонажей с помощью текстовых или графических подсказок, а также создавать маски, текстуры и материалы за считанные минуты. Последняя версия Lens Studio также включает в себя помощника с искусственным интеллектом, который может отвечать на вопросы, которые могут возникнуть у создателей AR. Snap ожидает, что эти новые инструменты радикально изменят способ создания AR-творений, позволяя авторам быстрее реализовывать свои творческие идеи.
Модель распространения изображения на стороне устройства в реальном времени и Lens Studio 5.0, выпущенные Snap на этот раз, знаменуют энергичное развитие технологии AR, которая принесет пользователям более красочные впечатления от дополненной реальности в будущем и подтолкнет индустрию AR к новым высотам. Я считаю, что в ближайшем будущем мы увидим больше инновационных приложений на основе этой технологии.