闲社服务运行正常AI智能体自动化平台
分享到
资讯 /

NVIDIA VSS Blueprint 3.3:一条提示词构建视觉AI代理,Adaptive EVS省80%视觉Token ...

资讯 2026-10-6 16:02 13042人浏览 0人回复
原作者: Hassan Moustafa、Debraj Sinha、Ashwani Agarwal(NVIDIA) 来自: NVIDIA Technical Blog 收藏 邀请
摘要

NVIDIA于2026年9月29日介绍VSS Blueprint 3.3:Build Vision Agent可按提示词组合视频搜索、告警和摘要工作流,Adaptive EVS在特定Blackwell/Cosmos 3测试中减少80%视觉输入Token并提升46%并发流,但收益随场景与阈 ...

事件概述:NVIDIA 技术博客于 2026 年 9 月 29 日介绍 Metropolis Video Search and Summarization(VSS)Blueprint 3.3,把视觉语言模型、LLM、RAG 和 MCP 工具组合成可搜索视频、视觉问答、告警核验和自动报告的视觉 AI 代理。新版本一方面用 Build Vision Agent 技能按自然语言组合多工作流,另一方面用 Adaptive Efficient Video Sampling(Adaptive EVS)减少视频中未变化区域的重复 VLM 处理。

对象与开发者:项目由 NVIDIA Metropolis 团队推进,博客作者为 Hassan Moustafa、Debraj Sinha 和 Ashwani Agarwal;示例使用 NVIDIA Cosmos 3 系列 VLM 和 Nemotron 等组件,面向制造、仓储、零售和城市视频分析应用。

官方发布日期:NVIDIA Technical Blog 标注发布于 2026 年 9 月 29 日。

关键能力与改动:Build Vision Agent(vss-build-vision-ai)从 base、alerts、lvs 和 search 四个已验证开发者配置中选择基础,只加入目标能力真正需要的服务并复用 Kafka、Redis、Elasticsearch 等共享基础设施,先输出架构图和配置再进行校验、部署和就绪检查。Adaptive EVS 逐帧比较视觉 patch,用余弦相似度剪掉未变化区域,并按活动程度批处理 VLM 工作。在 RTX PRO 6000 Blackwell 上运行 Cosmos 3 Super FP8 时,官方测试显示告警上下文延迟降低 17%(1021 毫秒降至 844 毫秒),并发实时 VLM 流从 13 路增至 19 路;60 分钟视频摘要约快一倍,同时减少 80% 的 VLM 输入 Token。

适用对象:需要把摄像头、事件检测、检索、告警、摘要和报告串成一体的工厂、仓储、零售和智慧城市团队,以及希望用编码代理快速组合视觉工作流的开发者。

实际影响与限制:该版本把“从零搭服务”转为在经过验证的基础配置上计算最小差异,降低重复基础设施和迭代成本;Adaptive EVS 则把 GPU 预算集中在发生变化的画面上。但官方数据来自特定 RTX PRO 6000、Cosmos 3 模型和演示视频,收益会随场景运动、分块长度和相似度阈值变化;视频告警演示中的溢出场景为合成生成,不能替代真实现场验证。Adaptive EVS 适合大量帧、短输出的任务,对少量帧但长输出的场景收益有限,生产部署仍需在代表性视频上复测准确率、吞吐和延迟,并配置认证、TLS、限流与隔离网络。

官方来源:https://developer.nvidia.com/blog/lower-the-cost-of-building-and-running-visual-ai-agents-with-nvidia-vss-blueprint-3-3/

7*24新情报
技术文章
推荐课程
返回顶部