A Snap anunciou na AWE seu inovador modelo de difusão de imagens em tempo real no dispositivo que gera experiências vívidas de realidade aumentada em tempo real em smartphones, e lançou o Lens Studio 5.0, uma nova ferramenta generativa de IA para criadores de AR. Esta mudança marca uma nova e emocionante etapa no desenvolvimento da tecnologia AR, que mudará enormemente a forma como o conteúdo AR é criado e proporcionará aos usuários uma experiência AR mais rica e envolvente. Esta inovação do Snap não só melhora a eficiência da geração de conteúdo AR, mas também reduz o limite de criação, abrindo a porta para o mundo AR para mais criadores.
Na Augmented World Expo, o Snap demonstrou uma versão inicial de um modelo de difusão de imagens em tempo real no dispositivo que pode gerar experiências vívidas de realidade aumentada (AR). A empresa também lançou ferramentas generativas de IA projetadas para criadores de AR.
O modelo é pequeno o suficiente para rodar em um smartphone e rápido o suficiente para renderizar novamente quadros em tempo real com base em instruções de texto, disse o cofundador e diretor de tecnologia da Snap, Bobby Murphy, no evento. Ele observou que, embora o surgimento de modelos generativos de difusão de imagens de IA seja empolgante, esses modelos precisam ser significativamente mais rápidos para ter um impacto significativo na realidade aumentada, por isso a equipe do Snap tem trabalhado na aceleração de modelos de aprendizado de máquina.
É relatado que os usuários do Snapchat começarão a ver efeitos de lente baseados neste modelo generativo nos próximos meses, e o Snap planeja promovê-lo aos criadores antes do final do ano. “Este modelo de aprendizado de máquina generativo em tempo real no dispositivo e os modelos futuros marcam uma nova direção empolgante para a realidade aumentada, fazendo-nos repensar a maneira como renderizamos e criamos experiências de AR”, disse Bobby Murphy.
Além disso, Murphy também anunciou o lançamento do Lens Studio 5.0, que fornece aos desenvolvedores novas ferramentas generativas de IA para ajudá-los a criar efeitos AR mais rápido do que nunca, economizando semanas ou até meses de tempo. Os criadores de AR podem usar novas ferramentas para gerar rapidamente imagens de selfie, gerando efeitos faciais altamente realistas aprendidos por máquina, e também podem gerar efeitos de estilo personalizados em tempo real que cobrem o rosto, o corpo e os arredores do usuário. Eles também podem gerar imagens 3D em minutos e aplicá-las às suas fotos.
Além disso, os criadores de AR podem aproveitar a tecnologia de malha facial da empresa para gerar alienígenas, bruxos e outros personagens por meio de prompts de texto ou imagem, e também podem gerar máscaras, texturas e materiais em minutos. A versão mais recente do Lens Studio também inclui um assistente de IA que pode responder a perguntas que os criadores de AR possam ter. Snap espera que essas novas ferramentas mudem drasticamente a forma como a criação de AR é criada, permitindo que os criadores concretizem suas ideias criativas com mais rapidez.
O modelo de difusão de imagem do lado do dispositivo em tempo real e o Lens Studio 5.0 lançado pela Snap desta vez anunciam o vigoroso desenvolvimento da tecnologia AR, que trará aos usuários experiências de realidade aumentada mais coloridas no futuro e levará a indústria de AR a novos patamares. Acredito que num futuro próximo veremos aplicações mais inovadoras baseadas nesta tecnologia.