七棵中芦门户网站

 当前位置:七棵中芦门户网站»母婴育儿»小勐拉银河国际官方|NV新研究能让机器人眼中的你更"立体"

小勐拉银河国际官方|NV新研究能让机器人眼中的你更"立体"

2020-01-11 15:47:49 | 七棵中芦门户网站

小勐拉银河国际官方|NV新研究能让机器人眼中的你更

小勐拉银河国际官方,众所周知,电脑善于在2d的屏幕上显示渲染好的诸如cg电影和游戏角色等3d模型,然而电脑却并未被赋予将拍摄的2d图像转化为3d模型的能力。不过随着机器学习的流行和相应技术的进步,通过二维图像建立三维模型的梦想似乎也将变为现实。

nvidia研究人员创造了一种通过人工智能将获取的二维信息精确转换为三维对象的渲染框架,dib-r(differentiable interpolation-based renderer)便是这个渲染器的名称,而该渲染器则基于一个名为pytorch的机器学习框架。

通过机器学习将2d信息转为3d模型本质上是显卡gpu工作的"逆应用",这一切对在显卡和机器学习领域浸淫多年的nvidia来说这简直不能再熟悉了。dib-r通过分析一幅2d图像,然后可以通过机器学习框架生成一个高保真的3d物件,其中包含了物件的形状、纹理、颜色和照明等。接下来就进入了极为熟悉的gpu渲染3d图像的过程了:编解码器从多边形球面开始构筑物件结构,利用2d图像中给定的信息对其进行塑型。

通过该框架完成整个过程用时仅十分之一秒,但是使用单nvidia v 100 gpu训练神经网络则需耗时两天。nvidia更是声称,使用其他gpu进行训练将需要几个星期的时间。在给出的样例中,在用几张包含鸟类图片的数据集合进行训练之后,dib-r能够在给出一幅图像的同时就精确地创建出对应的3d模型。

虽然实验中使用的样例是鸟,不过该研究项目的研究人员表示该系统可以将任何二维图像渲染成三维模型。

"这将是你第一次将拍摄的任何二维图像转换为相对应的预估三维模型"

研究人员认为,该系统可用于赋予自主机器人进行深度感知的能力,使其能够理解周边事物的3d属性,能够更好地进行导航和对它们负责处理的对象进行操作,以提高它们在现实环境工作中的安全性和准确性。

而nvidia也将dib-r加入到了kaolin(一个用于加速3d深度学习研究的pytorch库)中以帮助研究人员更好的进行3d深度学习实验。

(编辑:祖峰)

新闻

栏目资讯

推荐

Copyright 2018-2019 jessnall.com 七棵中芦门户网站 Inc. All Rights Reserved.