AI 赋能的多摄像头追踪

加快下一波视觉 AI 的发展,用于测量并帮助管理大空间内的基础设施和运营。

工作负载

计算机视觉/视频分析

行业

智慧城市/空间
零售/消费品
制造业
医疗健康和生命科学

 

业务目标

投资回报率
风险缓解

产品

NVIDIA Metropolis
NVIDIA Omniverse
NVIDIA TAO
NVIDIA AI Enterprise

什么是多摄像头追踪?

想象一下这样一个世界:工厂安全高效地自动运转,零售场所针对购物者体验进行优化,医院、机场和高速公路等公共空间更加安全、精简。这些空间太大,单个摄像头无法覆盖,因此通常需要数百个摄像头进行监控。跨摄像头和空间跟踪物体并准确测量活动称为多摄像头跟踪,可让您有效地监控和管理您的空间。

AI 赋能的多摄像头应用开发

NVIDIA 的可定制多摄像头追踪工作流为您提供了一个起点,无需从头开始即可进行开发,并可节省数月的开发时间。该工作流还提供了经过验证的生产路径。

该解决方案包括在真实和合成数据集上预训练的先进的 AI 模型,您可以根据您的用例进行自定义。它涵盖了从仿真到分析的整个生命周期,并集成了 NVIDIA 的先进工具,包括 Isaac SIM™、Omniverse™、TAO 和 DeepStream。此工作流包含实时视频流模组,并建立在可扩展的原生云微服务体系架构上。无需额外费用,只需基础设施和工具许可证。此外,您还可以通过 NVIDIA AI Enterprise 获得专家支持和新的产品更新,以加速您的视觉 AI 项目。

如何使用多摄像头追踪?

制造和仓储自动化:通过优化自主机器人、设备和工人的路线来改善车间运营。AI 赋能的分析功能有助于识别拥堵、瓶颈和风险,从而做出数据驱动的决策,提高生产力,改善员工安全。 

零售店布局优化:通过分析整个商店的客户导航,您可以重新配置通道和产品陈列位置,更大限度地提高销售及收入。多摄像头追踪有助于识别瓶颈、追踪客户行为并模拟布局场景以预测对销售和客户体验的影响。 

住院患者护理:对医院内的患者进行持续监控,进一步提升安全性。该解决方案可实现实时警报和通知,确保在需要时及时得到关注和关怀。

将实时 AI 与数字孪生融合

在此演示中,使用 NVIDIA Omniverse 平台构建的仓库的数字孪生可作为数十名数字工作者和多个自主机器人的模拟环境。集成到 Mega 虚拟工厂工作流中的多摄像头跟踪工作流程支持创建包含 100 个模拟摄像头的整个仓库的集中式地图,从而提供物理空间的实时感知。

多摄像头追踪的端到端工作流

该工作流包括整个开发工作流 (从数据生成到模型训练再到应用开发),以帮助开发者为大型空间构建复杂的视觉 AI 应用。

NVIDIA 软件工具支持端到端工作流,可以更快地构建此类应用:

 

  • 使用 NVIDIA Omniverse 创建真实世界环境的 3D 数字孪生。

  • 使用 NVIDIA Omniverse (一个用于构建和运行元宇宙应用的平台),开发者可以构建现实世界空间的 3D 数字孪生,定位虚拟摄像头以捕捉各种合成数据,生成用于训练感知模型的真值标记数据,并在实际部署之前验证端到端应用。

 

  • 使用 NVIDIA Isaac Sim 生成合成数据以优化训练。

  • Isaac Sim 中使用 Omni.Replicator.Agent (ORA) 可以简化智能体 (包括人员和自主移动的机器人) 仿真,从场景中生成合成数据的过程也更加简单。

 

  • 使用 NVIDIA TAO 工具套件,利用真实数据和合成数据简化模型开发。

  • NVIDIA TAO 工具套件简化了人员检测和重新识别等任务的模型训练和优化。开发者可以使用合成数据和真实数据对预训练模型进行调优,并通过量化和剪枝来优化以提高推理性能。

 

  • 使用 Metropolis 微服务作为 AI 应用开发的灵活基础模组。

  • NVIDIA Metropolis 微服务为开发者提供了一套全面的原生云基础模组,以加速 AI 开发。微服务包括用于摄像头发现和管理的媒体服务,用于人员检测、追踪和重新识别的感知服务,用于跨多个摄像头提供实时洞察的时空服务,以及分析服务。

 

  • 采用原生云设计,可实现从边缘到云的可扩展部署。

  • 使用 Docker、Kubernetes 和 GPU Operator 轻松容器化应用,以便在 NVIDIA Jetson™、x86 和 dGPU 上部署原生云解决方案。

 

借助 NVIDIA 的加速端到端工作流,快速启动多摄像头视觉 AI 应用的开发 – 从用于合成数据生成的 Omniverse 仿真到用于简化模型开发的 TAO,再到用于模组化、原生云应用基础模组的 Metropolis 微服务。

加速多摄像头追踪 AI 应用的开发。