英伟达新王牌！盒子里的人工智能，几分钟就能构建AI应用

编辑：Yuki | ID：YukiYuki1108（北京时间7月30日）在美国丹佛市举行的SIGGRAPH 2024大会上，英伟达展示了在渲染、仿真和生成式AI领域的多项最新进展。这些技术创新再次巩固了英伟达在AI领域的领导地位。Nvidia NIM：生成式AI的全新升级去年SIGGRAPH大会上，英伟达推出的GH200、L40S显卡和ChatUSD令人瞩目。而今年的主角则是全新升级的“Nvidia NIM”，它将生成式AI应用于USD（通用场景描述），开拓了AI在3D世界中的广阔可能性。NIM的升级：福音与挑战并存英伟达宣布，Nvidia NIM在优化和标准化AI模型部署方面取得了重大突破。黄仁勋多次对NIM带来的创新表示高度赞赏，称其为“盒子里的人工智能”。尽管英伟达的软件生态系统非常丰富，但对缺乏AI基础开发能力的传统行业来说，这些分散的系统仍然复杂难掌握。为了解决这一问题，英伟达在今年3月的GTC大会上推出了NIM（Nvidia Inference Microservices）云原生微服务，将所有软件集成在一起，简化和加速AI应用部署。NIM将模型作为优化的“容器”，可部署在云端、数据中心或工作站上，让开发人员能够在几分钟内完成生成式AI应用程序的开发。NIM生态系统的广泛应用目前，Nvidia的NIM生态系统已提供多种预训练AI模型，覆盖理解、数字人、三维开发、机器人技术和数字生物学等领域。例如：理解方向：使用Llama 3.1和NeMo Retriever，提升文本处理能力；数字人方向：提供Parakeet ASR和FastPitch HiFiGAN等模型，支持高保真语音合成和自动语音识别；三维开发：USD Code和USD Search简化三维场景的创建和操作；机器人技术：推出MimicGen和Robocasa模型，加速机器人研发；数字生物学：DiffDock和ESMFold在药物发现和蛋白质折叠预测方面提供先进解决方案。此外，Nvidia宣布Hugging Face推理即服务平台也由NIM支持，进一步提升了云端运行能力。生成性AI在3D世界中的突破在SIGGRAPH大会上，英伟达展示了生成性AI在开放USD和Omniverse平台上的应用。Nvidia构建了首个能够理解基于OpenUSD语言、几何、材料、物理和空间的生成性AI模型，并将其打包为NIM微服务。这些服务包括USD Code、USD Search和USD Validate，为开发者提供强大的工具。通过这些新功能，各行各业可以构建基于物理的虚拟世界和数字孪生。例如，在2019年巴黎圣母院火灾后，育碧的设计师利用3D建模技术对教堂进行了数字复原。这一过程若应用AI技术，将大大加速复原速度。未来的展望与挑战英伟达的创新不仅提升了AI开发效率，还为行业带来了前所未有的工具和解决方案。然而，这些技术也对程序员提出了新的挑战。尽管NIM简化了AI模型的开发和部署，但可能导致普通程序员的就业机会减少，因为企业可以用更少的人力完成更多工作。通过Nvidia NIM引入USD，通过大模型更好地理解物理世界和构建虚拟世界，这是一笔宝贵的数字资产。Nvidia还宣布即将推出几种新的NIM微服务，包括USD Layout、USD Smart Material和FDB Mesh Generation，以进一步提升开发者在开放USD平台上的应用能力和效率。今年NVIDIA Research携20多篇论文参会，展示了在合成数据生成器和逆渲染工具方面的创新成果，其中两篇获得了技术最佳论文奖。这些研究表明，AI在提升图像质量和解锁新的3D表示方式方面取得了重大进展。