共计 611 个字符,预计需要花费 2 分钟才能阅读完成。
在最近的增强现实世界博览会上,Snap 展示了其创新的实时、设备上的图像扩散模型,这一模型能够带来生动的增强现实体验。Snap 的联合创始人兼首席技术官 Bobby Murphy 表示,该模型不仅体积小,适合在智能手机上运行,而且速度极快,能够根据文本提示实时重新渲染帧。
Murphy 指出,尽管生成式 AI 图像扩散模型的出现令人兴奋,但为了对增强现实产生实质性影响,这些模型需要显著提升处理速度。因此,Snap 团队一直在致力于加速机器学习模型的发展。
Snapchat 用户将在未来几个月内开始体验到使用这种生成模型的镜头,Snap 计划在今年年底前向创作者提供此模型。
Murphy 强调,这种及未来的实时设备上生成式 ML 模型预示着增强现实的一个新方向,为构想渲染和创建 AR 体验提供了新的可能性。
此外,Snap 今天发布了 Lens Studio 5.0,为开发者提供了新的生成式 AI 工具,这将帮助他们更快地创建 AR 效果,节省数周甚至数月的时间。AR 创作者可以通过生成高度逼真的 ML 面部效果来创建自拍镜头,或生成自定义风格化效果,实时对用户的面部、身体和周围环境进行逼真的转换。创作者还可以在几分钟内生成一个 3D 资产,并将其包含在他们的镜头中。
AR 创作者还可以使用公司的 Face Mesh 技术,通过文本或图像提示快速生成外星人或巫师等虚拟角色,以及面部面具、纹理和材料。Lens Studio 的最新版本还包括一个 AI 助手,可以回答 AR 创作者可能有的问题。