HQBET环球体育:Nvidia公布能将2D视频转成3D的AI模型Neuralangelo
Nvidia本周公布能将2D视频片段转成3D的AI模型Neuralangelo。
由Nvidia研究院发展的Neuralangelo利用神经网络,能将2D视频片段转化成细节丰富、具备纹理的3D结构,像是建筑、雕刻及其他真实物体,让创作者可产生3D对象,导入其设计应用、或进一步编辑用于艺术、电玩开发、机器人或产业数字分身(digital twins)HQBET环球体育。
传统重建3D场景的AI模型无法精确捕捉重复性质地样式、同质色彩及变化太大的色彩。Neuralangelo使用即时神经绘图原语(instant neural graphics primitives)来捕捉这些微妙的细节。即时神经绘图原语也是Nvidia图像渲染技术Instant NeRF背后的技术。
Nvidia强调,Neuralangelo最厉害之处在于在2D转3D过程中,呈现复杂材料的质地如屋顶瓦片、玻璃窗格及平滑的大理石的能力。这使得专业及艺术创作者能以智能手机拍摄的视频为素材,产出可用对象集成到其项目中。
Neuralangelo模型以不同角度拍摄的对象2D视频为素材,从中选择多个不同角度的影格,过程和人类艺术家会以不同角度的画面创造深度、大小及形状相似。Neuralangelo一旦决定每个影格的相机位置后,就会产出初步的3D再现图片,再开始加入细节,一如人类雕刻家将素材变成雕像的作业方式。最后成果就是可用于VR应用、数字分身、机器人等的3D对象或场景。
Neuralangelo是Nvidia研究院预定在6月18到22日举行的计算机视觉与样式识别(Computer Vision and Pattern Recognition,CVPR)大会上发布的近30项项目之一。在预定发布的视频中,Nvidia展示Neuralangelo可重建上如米开朗基罗的著名雕刻《大卫》或下到平板拖车的普通对象,它也可以3D重现建筑物室内装潢或室外设计,如Nvidia湾区的办公室。
除了Neuralangelo外,Nvidia还将展出名为DiffCollage模型,它是一种可扩展的几率模型(probabilistic model),能生成360度全景图或循环动态图像等大尺寸图像。在以标准长宽比的图片为资料集训练时,DiffCollage会将这些图像视为大型拼贴画的一部分。这种方法训练出的模型能生成具连续感的大型图像,但不需同等大小的训练图像HQBET环球体育。这方法也能用以将文本提示转成一系列视频。HQBET环球体育
HQBET环球体育 HQBET环球体育 HQBET环球体育
同类文章排行
- 精雕机的错位原因有那些?
- cnc高光机在使用时候需要注意什么
- 数控精雕机主轴加工后的保养方法
- 一个高端数控系统对精雕机的重要性
- 精雕机不归零加工完闭后不回工作原点?
- 主轴达不到指定转速?
- 高光机主轴轴承容易坏的原因
- 手机边框高光机的特点
- 五金高光机的质量判断的四大标准
- 开机无反应,机床没电,手柄无反应,不显示?