深圳市HQBET环球体育有限公司官网! 收藏本站 联系方式 HQBET环球体育
HQBET环球体育

定制高速高光机、精雕机设备研发生产厂家

寿命长达10年,精准度达0.01MM,效率高

免费打样咨询:
400-123-4567
当前位置: HQBET环球体育 > HQBET环球体育新闻资讯 > 行业资讯

HQBET环球体育:Nvidia公布能将2D视频转成3D的AI模型Neuralangelo

文章作者:yebuyugz9B 人气:发表时间:2024-04-29 10:07:24
HQBET环球体育:Nvidia公布能将2D视频转成3D的AI模型Neuralangelo(图1)

Nvidia本周公布能将2D视频片段转成3D的AI模型Neuralangelo。

由Nvidia研究院发展的Neuralangelo利用神经网络,能将2D视频片段转化成细节丰富、具备纹理的3D结构,像是建筑、雕刻及其他真实物体,让创作者可产生3D对象,导入其设计应用、或进一步编辑用于艺术、电玩开发、机器人或产业数字分身(digital twins)HQBET环球体育。

传统重建3D场景的AI模型无法精确捕捉重复性质地样式、同质色彩及变化太大的色彩。Neuralangelo使用即时神经绘图原语(instant neural graphics primitives)来捕捉这些微妙的细节。即时神经绘图原语也是Nvidia图像渲染技术Instant NeRF背后的技术。

HQBET环球体育:Nvidia公布能将2D视频转成3D的AI模型Neuralangelo(图2)

Nvidia强调,Neuralangelo最厉害之处在于在2D转3D过程中,呈现复杂材料的质地如屋顶瓦片、玻璃窗格及平滑的大理石的能力。这使得专业及艺术创作者能以智能手机拍摄的视频为素材,产出可用对象集成到其项目中。

HQBET环球体育:Nvidia公布能将2D视频转成3D的AI模型Neuralangelo(图3)

Neuralangelo模型以不同角度拍摄的对象2D视频为素材,从中选择多个不同角度的影格,过程和人类艺术家会以不同角度的画面创造深度、大小及形状相似。Neuralangelo一旦决定每个影格的相机位置后,就会产出初步的3D再现图片,再开始加入细节,一如人类雕刻家将素材变成雕像的作业方式。最后成果就是可用于VR应用、数字分身、机器人等的3D对象或场景。

Neuralangelo是Nvidia研究院预定在6月18到22日举行的计算机视觉与样式识别(Computer Vision and Pattern Recognition,CVPR)大会上发布的近30项项目之一。在预定发布的视频中,Nvidia展示Neuralangelo可重建上如米开朗基罗的著名雕刻《大卫》或下到平板拖车的普通对象,它也可以3D重现建筑物室内装潢或室外设计,如Nvidia湾区的办公室。

除了Neuralangelo外,Nvidia还将展出名为DiffCollage模型,它是一种可扩展的几率模型(probabilistic model),能生成360度全景图或循环动态图像等大尺寸图像。在以标准长宽比的图片为资料集训练时,DiffCollage会将这些图像视为大型拼贴画的一部分。这种方法训练出的模型能生成具连续感的大型图像,但不需同等大小的训练图像HQBET环球体育。这方法也能用以将文本提示转成一系列视频。HQBET环球体育

HQBET环球体育:Nvidia公布能将2D视频转成3D的AI模型Neuralangelo(图4)


HQBET环球体育 HQBET环球体育 HQBET环球体育