【usd接口是什么】英伟达正在3D互联网上重建图形基础。

英伟达(Nvidia)正在深刻改变基本图形技术，以便在将互联网从2D世界转变为交互式3D世界时树立行业领导地位。

英伟达实验室正在酝酿的一些技术旨在为生成、渲染和操作3D图像和视频以及将这些内容传输到设备奠定新的基础。这些技术将人工智能与视频和图像渲染相结合，定位为新一代3D图形工具的通道。

为了促进这种想法的发展，英伟达本周在加拿大温哥华举行的SPECIAL INTEREST GROUP FOR CHAPHICS(SPECIEREST GROUP )32

人工智能研究副总裁英伟达(Nvidia)桑雅费德勒(Sanja Fidler)在新闻发布会上说：“人工智能使图形焕然一新，带动了这一领域的重大发展。”

英伟达将新的3D图形增强技术称为“神经图形”(neural graphics)，这个术语是英伟达创造的，旨在将人工智能作为图形工作流的关键要素。该公司已拥有深度学习超级采样深度学习(DLSS)等人工智能技术，这是一种可以实时改善图形的光线跟踪技术。

神经图形工作流描述

该公司的愿景是为虚拟3D世界实时制作、增强和图像处理，注入适量的人工智能，取得更好的结果。图形(例如真实图像)传到云后，桌面系统将提供第一层增强功能。在线服务提供商将通过云或数据中心的人工智能技术进一步完善这些图像。

英伟达还致力于减小文件大小，以容纳更多的三维成像数据，从而减少处理图形信息所需的开销和时间。

“我们可以为当今的图形创造更强大的视觉效果，为艺术家和创作者提供新的机会。这可能是以前想象不到的。”费德勒说。

但是，一些附加条件——所有基于人工智能的3D图形技术的处理必须通过英伟达的GPU，包括用于这些加速的组件。英伟达采取了关闭源代码的方法，以加强软件，在硬件上获得最佳结果。

“3D比2D多一个维度，但可以认为比2D难50%。但是它的难度是数百倍，并且对计算能力有着永远不能满足的需求。”英伟达Omniverse和模拟技术副总裁里夫莱巴雷丁(Rev Lebaredian)在与媒体的电话会议上说。

因为用户“总是受到设备计算功能的限制，特别是那些写在头上或放在口袋里的设备，所以3D web图像将移动到云中。

英伟达构想解决了当今2D图形工作过程中实现人工智能的几个课题。来自Topaz Labs等公司的基于人工智能的2D图像升级受到欢迎。因为用户上传视频的GUI很简单，剩下的工作是人工智能完成的。

但是，可自定义的降噪和图形放大操作需要神经网络、视频数据集和脚本的知识。不仅如此，还需要高端GPU。这可能对台式机很贵。谷歌的视频2x Colab Notebook为视频升级提供了对基于云的GPU的访问，但不像上传文件那么简单。英伟达通过Launchpad服务提供对基于云计算的GPU的访问，但主要面向企业用户。

英伟达分享了关于神经图形处理管道的详细信息，以提供2D数据和增强的3D内容。此过程有助于通过明暗器、光线跟踪和AI专用GPU内核过滤图形2D元素(如动画和照明)来创建3D场景。然后可以使用DLSS等工具增强3D图像或视频。

在SIGGRAPH会议上，英伟达正在解决虚拟世界内容制作的问题。图像可以通过导入可重建为3D标准的实际2D或3D图像来创建。现在已经有相应的工具，但艺术家有一些麻烦。它包括许多不同的工具。

英伟达将加快这一进程的工具。“开发者可以在几秒钟内完成这个过程。这是真正的重大突破。”费德勒说。“你可以把它放在你拥有的任何图形软件里。这只是几秒钟的事，看起来很漂亮。”

该公司将3D内容制作工具捆绑在元宇宙中，元宇宙是复制真实世界的平行3D数字世界。人工智能”从3D内容创建

英伟达的研究人员还将展示一篇关于应用强化学习来自动创建虚拟角色的论文，虚拟角色通过观察人体运动数据来学习如何在物理模拟的环境中移动。AI控制这个角色，它会对环境的物理变化做出反应。这几乎就是婴儿学习的方式，通过看着他们的父母四处移动，这在动画质量和能力上带来了重大飞跃，为角色塑造了不同的技能。

英伟达还瞄准了VR眼镜和头盔等硬件的用户体验，并将讨论优化3D硬件光学设计的突破。

“在英伟达的最新研究中，我们展示了这种优化设计可以在不到现有VR显示设备一半大小的情况下提供全彩3D全息图像。这是体验方面真正的突破性成就。”费德勒说。

英伟达正在开发一套通用的工具，通过减小文件大小来快速将3D图形传输到耳机上。同时正在推动NeuralVDB，这是OpenVDB的人工智能和3D世界版本，OpenVDB是奥斯卡奖提名的行业标准。

通过NeuralVDB对稀疏的数据集进行AI和GPU优化，最多可以减少100倍的内存占用。“使用机器学习，NeuralVDB极大地减少了内存占用，这意味着我们现在可以表示更高分辨率的3D数据，”费德勒说。

NeuralVDB就像“我们可以把PNG图像转换成JPEG，它们要小得多，如果你做对了，它看起来和原来的没有什么不同。”

英伟达还宣布投资USD文件格式，该公司认为USD文件格式是3D互联网的基础，就像HTML是2D互联网的基础一样。

英伟达阿凡达（Avatar）云引擎接口

USD文件格式最初是由皮克斯公司开发的，但英伟达正在积极推广它，以在即将到来的元宇宙文件格式大战中获得早期领先地位。许多其他公司已经围绕着Khronos集团支持的glTF格式创建了3D内容，这是另一种被称为3D世界JPEG的竞争格式。

英伟达将其所有的元宇宙产品整合到一个名为Omniverse的平台上。Omniverse和Omniverse工具包以及模拟引擎和工具包都是建立在USD基础上的。

该公司还宣布了许多更新的Omniverse创建，模拟和渲染工具。一款新产品是万能化身云引擎(ACE)，它可以创建更逼真的化身。ACE运行在公共云(Azure和Oracle)或嵌入式系统中。这款虚拟形象产品结合了英伟达针对基于人工智能的计算机视觉、自然语言处理、语音、推荐和动画引擎的人工智能技术。