📢 转载信息
原文链接：https://blogs.nvidia.com/blog/smart-city-ai-agents-urban-operations/
原文作者：Esther Lee
编者按：本文属于“步入Omniverse”系列文章，该系列重点介绍开发人员、3D从业者和企业如何利用OpenUSD和NVIDIA Omniverse的最新进展来改变其工作流程。
随着城市人口激增和基础设施难以跟上步伐，全球城市正面临前所未有的挑战。
交通拥堵和协调紧急服务等运营挑战，因数据管道碎片化、地方政府流程孤立以及系统不兼容而加剧。技术壁垒阻碍了城市获取有效决策和城市管理所需的全面、实时洞察力。
领先的城市和技术合作伙伴正在部署 NVIDIA 智能城市AI蓝图（NVIDIA Blueprint for smart city AI）。这是一个参考应用程序，提供了在可用于仿真的（SimReady）数字孪生中构建、测试和运行AI代理所需的完整软件堆栈。
OpenUSD 是一个开放且可扩展的框架，可连接到这个物理AI工作流的每个阶段。启用了 OpenUSD 的数字孪生充当 SimReady 环境，城市可以在其中模拟“假设”场景并生成物理上准确的传感器数据。
该蓝图支持一个三阶段工作流程：1）使用 NVIDIA Cosmos 平台和 NVIDIA Omniverse 库进行模拟，以生成合成数据；2）训练和微调视觉AI模型；3）使用 NVIDIA Metropolis 平台和 NVIDIA 视频搜索和摘要蓝图 (VSS) 部署实时视频分析AI代理。这使得城市能够从被动转向主动运营。
基于这些模拟，城市可以部署运营平台，将天气数据、交通传感器和紧急响应系统汇集起来，从而支持对罕见场景的快速测试、实时监控、城市基础设施规划以及城市系统的优化。
从中国台湾高雄市通过街道级AI将事故响应时间缩短 80%，到美国北卡罗来纳州罗利市实现 95% 的车辆检测准确率，再到法国铁路网络将能耗优化 20%，全球各地的城市正在利用数字孪生和AI代理大规模改造城市运营。
智能城市的实践案例
Akila 与 SNCF Gares&Connexions 合作，利用数字孪生改进铁路运营
Akila 的数字孪生应用程序 帮助法国铁路运营商 SNCF Gares&Connexions 通过实时情景规划（涉及太阳能加热、气流和人群移动）来优化其近 14,000 趟每日列车的网络。启用 OpenUSD 的数字孪生实现了能耗降低 20%、预防性维护准时率 100%，以及停机时间和响应时间减少 50%。
Linker Vision 利用物理AI实现街道级智能
Linker Vision 的物理AI系统 能够在高雄市识别基础设施事件，如路灯损坏和倒下的树木，从而消除了人工城市检查，并实现了更快的紧急响应。为了将其街道级智能扩展到更多城市，Linker Vision 使用 Omniverse 库进行模拟、使用 Cosmos Reason 进行世界理解，并使用由 OpenUSD 驱动的 VSS 蓝图进行部署。
Esri 和微软在北卡罗来纳州罗利市实现全面的城市智能
罗利市利用 NVIDIA DeepStream 软件开发工具包实现了 95% 的车辆检测准确率，提升了工程师的交通分析工作流程。这些数据增强了罗利市的数字孪生，该数字孪生由 Esri 的 ArcGIS 地理空间平台支持，用于关键基础设施规划和管理的可视化和分析。将此计算机视觉管道与由 NVIDIA VSS 蓝图驱动的视觉AI代理集成，可在 ArcGIS on Azure Cloud 中提供全面的实时可见性和洞察力。
Milestone Systems 的 VLM 自动化视频审查
Milestone Systems 即将推出其 Hafnia VLM，其中将包含一个用于其视频管理软件 XProtect 的 VLM 插件，以及一项 VLM 即服务。Hafnia VLM 在超过 75,000 小时的视频数据上进行了微调，通过自动化视频审查和过滤掉误报，可以将操作员的警报疲劳度降低高达 30%。它使用 NVIDIA Cosmos Reason VLM 和 Metropolis 开发而成。Hafnia VLM 插件将使 XProtect 操作员和用户更容易访问生成式AI。
K2K 分析意大利视频流
K2K 的平台使用 NVIDIA Cosmos Reason 和 VSS 蓝图分析意大利巴勒莫市的 1000 多个视频流，每年处理 70 亿个事件，并在提取和分析关键情况时通过自然语言查询和视频事件自动通知市政官员。
通过观看点播的 NVIDIA GTC 会议“改造公共服务的领导战略”，了解更多关于城市如何通过模拟、视觉AI和数字孪生进行转型的知识。
开始使用智能城市AI
通过以下资源了解更多关于 OpenUSD 和计算机视觉工作流程的信息：
- 观看本视频，了解如何利用 NVIDIA 智能城市AI蓝图将物理AI带入城市。
- 阅读这篇技术博客，了解如何使用 VSS 蓝图将计算机视觉管道与生成式AI和推理集成。
- 在新 Cookbook 中获取智能交通系统工作流程和技术配方，用于 NVIDIA Cosmos Predict、NVIDIA Cosmos Transfer 和 NVIDIA Cosmos Reason。
请通过订阅NVIDIA Omniverse 新闻、加入 Omniverse 社区，并在 Discord、Instagram、LinkedIn、Threads, X 和 YouTube 上关注 Omniverse，保持最新动态。
🚀 想要体验更好更全面的AI调用？
欢迎使用青云聚合API，约为官网价格的十分之一，支持300+全球最新模型，以及全球各种生图生视频模型，无需翻墙高速稳定，文档丰富，小白也可以简单操作。
评论区