SnapはAWEで、スマートフォン上で鮮やかな拡張現実体験をリアルタイムで生成する画期的なリアルタイムオンデバイス画像拡散モデルを発表し、ARクリエイター向けの新しい生成AIツールであるLens Studio 5.0を発売した。この動きは、AR テクノロジーの開発におけるエキサイティングな新たな段階を示すもので、AR コンテンツの作成方法が大きく変わり、より豊かで没入型の AR 体験をユーザーにもたらします。 Snap のこのイノベーションは、AR コンテンツ生成の効率を向上させるだけでなく、創作の敷居を下げ、より多くのクリエイターに AR の世界への扉を開きます。
Augmented World Expo で、Snap は、鮮やかな拡張現実 (AR) 体験を生成できるリアルタイムのオンデバイス画像拡散モデルの初期バージョンをデモンストレーションしました。同社はまた、ARクリエイター向けに設計された生成AIツールも発売した。
Snapの共同創設者兼最高技術責任者のボビー・マーフィー氏はイベントで、このモデルはスマートフォン上で実行できるほど小さく、テキストプロンプトに基づいてフレームをリアルタイムで再レンダリングできるほど高速であると語った。同氏は、生成AI画像拡散モデルの出現は刺激的だが、拡張現実に大きな影響を与えるためにはこれらのモデルを大幅に高速化する必要があるため、Snapのチームは機械学習モデルの高速化に取り組んでいると述べた。
報道によると、Snapchatユーザーは今後数カ月以内にこの生成モデルに基づくレンズ効果を目にし始める予定で、Snapは年末までにクリエイターにこのモデルを宣伝する予定だという。 「このリアルタイムのオンデバイス生成機械学習モデルと将来のモデルは、拡張現実のエキサイティングな新しい方向性を示すものであり、AR エクスペリエンスをレンダリングおよび作成する方法を再考させられます」とボビー マーフィー氏は述べています。
さらに、マーフィー氏は、Lens Studio 5.0 のリリースも発表しました。Lens Studio 5.0 は、これまでよりも迅速に AR エフェクトを作成できる新しい生成 AI ツールを開発者に提供し、数週間、場合によっては数か月の時間を節約します。 AR クリエイターは、新しいツールを使用して、非常にリアルな機械学習による顔のエフェクトを生成することで自撮り映像を迅速に生成できます。また、ユーザーの顔、体、周囲をカバーするカスタム スタイルのエフェクトをリアルタイムで生成することもできます。また、3D 映像を数分で生成し、ショットに適用することもできます。
さらに、AR クリエイターは同社の顔メッシュ技術を活用して、テキストや画像のプロンプトを通じてエイリアン、魔法使い、その他のキャラクターを生成したり、マスク、テクスチャ、マテリアルを数分で生成したりすることもできます。 Lens Studio の最新バージョンには、AR クリエイターが持つ可能性のある質問に答えることができる AI アシスタントも含まれています。 Snap は、これらの新しいツールが AR の作成方法を劇的に変え、クリエイターがクリエイティブなアイデアをより早く実現できるようになると期待しています。
今回Snapがリリースしたリアルタイムデバイス側画像拡散モデルとLens Studio 5.0は、AR技術の精力的な発展を予告するもので、将来的にはユーザーによりカラフルな拡張現実体験をもたらし、AR業界を新たな高みに押し上げることになるだろう。近い将来、この技術に基づいた革新的なアプリケーションがさらに登場すると信じています。