(资料图片仅供参考)
“Neuralangelo”是英伟达研究院(NVIDIA Research)开发的新型人工智能模型,该模型基于神经网络以将2D视频内容转换为详细的3D结构——可生成建筑物、雕塑和其他现实世界物体的逼真虚拟复制品。
如同生成的栩栩如生米开朗基罗3D雕塑,Neuralangelo可实现具有复杂细节和纹理的3D结构。然后,创意专业人士可以将这些3D内容导入设计应用,以进一步编辑并应用于艺术、游戏开发、机器人和工业数字孪生。
Neuralangelo将复杂材料(包括屋顶瓦片、玻璃板和光滑大理石)的纹理从2D视频格式转换为3D资产的解决方案大大超过了以前的方法。这使得高保真度3D重建更加容易,开发者和创意专业人士将能基于智能手机摄像头为项目快速创建可用的虚拟对象。
“Neuralangelo 3D内容重建功能将为创作者带来巨大好处,并帮助创作者在数字世界构建真实世界。该工具最终将使开发者能够将详细的对象——无论是小型雕像还是大型建筑物——导入游戏或工业数字孪生虚拟环境。”
Neuralangelo采用即时神经图形基元(构建NVIDIA Instant NeRF的技术)以捕捉更精细细节。
基于从不同角度拍摄的物体或场景2D视频,Neuralangelo从中选择不同视点的帧——就像艺术家从多个侧面考虑一个物体不同深度、大小和形状。
一旦确定了每一帧的相机位置,Neuralangelo AI就会创建场景的粗略3D表示,如同雕刻家开始凿出物体对象的形状一样。
之后,Neuralangelo会优化渲染以锐化细节,最终结果是生成的3D内容可应用于虚拟现实应用、数字孪生或机器人开发的3D对象或大型场景。
来源:英伟达
AI