groundingLMM
★ 969
vs
video-search-and-summarization
★ 1.9k
groundingLMM vs video-search-and-summarization
groundingLMM:GLaMM(接地大型多模态模型)是一个端到端训练的大型多模态模型,能够生成与对象分割掩码集成的自然语言响应,实现了视觉接地,并支持在多层次粒度上与图像进行灵活交互。它引入了新颖的接地对话生成(GCG)任务,支持指代表达式分割和区域级图像描述等多种下游应用,并以大规模的GranD数据集为基础。;video-search-and-summarization:NVIDIA视频搜索与摘要(VSS)蓝图提供了开发视觉代理和AI驱动视频分析的参考架构,集成了加速视觉微服务、视觉语言模型(VLM)和大语言模型(LLM)。它支持基于自然语言的视频代理,用于对存储和流式视频数据进行搜索、摘要、视觉问答和实时警报,从而提高运营效率和决策能力。
01
简评
groundingLMMVision / Multimodal · ★ 969
理解并响应用户关于特定图像区域查询的交互式视觉助手。
video-search-and-summarizationVision / Multimodal · ★ 1.9k
智能空间监控和仓库自动化
02
并排对比
字段
分类
视觉/多模态
视觉/多模态
Stars
★ 969
★ 1.9k
许可证
Apache-2.0
NOASSERTION
安装方式
git clone https://github.com/mbzuai-oryx/groundingLMM.git
git clone https://github.com/NVIDIA-AI-Blueprints/video-search-and-summarization.git && cd video-search-and-summarization/deploy && docker compose up -d
更新时间
1个月前
1天前
开源
是
是
标签
多模态人工智能, 计算机视觉, 自然语言处理
视频搜索, 视频摘要, 视觉AI
03
功能特性
01生成与对象分割掩码无缝集成的自然语言响应。
02支持新颖的接地对话生成(GCG)任务,并提供全面的评估协议。
03执行详细的区域级图像描述和回答基于推理的视觉问题。
04通过从基于文本的查询创建分割掩码,擅长指代表达式分割。
05提供高质量的图像描述和会话式问答。
01支持特征提取和嵌入的实时视频智能
02用于自然语言视频搜索、问答和摘要的代理工作流
03用于元数据丰富和警报验证的下游分析
04利用NVIDIA NIM微服务、VLM和LLM进行AI驱动的视频分析
04
使用场景
↳理解并响应用户关于特定图像区域查询的交互式视觉助手。
↳用于创建密集、像素级接地数据集的自动化标注工具。
↳需要视觉理解和带有分割的详细文本描述的高级图像分析任务。
↳智能空间监控和仓库自动化
↳SOP验证和提高运营效率
↳对海量视频数据进行自然语言搜索和问答
↳从视频流中进行实时警报验证和异常检测
↳长视频摘要,用于扩展素材分析
05
适合场景
—
必备神器时下流行
FAQ
常见问题
groundingLMM 和 video-search-and-summarization 有什么区别?
groundingLMM 和 video-search-and-summarization 都属于 Vision / Multimodal 类别。groundingLMM 有 969 Stars,video-search-and-summarization 有 1.9k Stars。
groundingLMM 和 video-search-and-summarization 哪个更好?
最佳选择取决于你的具体需求。理解并响应用户关于特定图像区域查询的交互式视觉助手。 时选 groundingLMM,智能空间监控和仓库自动化 时选 video-search-and-summarization。
groundingLMM 是免费的吗?
是的,groundingLMM 在 GitHub 开源(Apache-2.0)。
video-search-and-summarization 是免费的吗?
是的,video-search-and-summarization 在 GitHub 开源(NOASSERTION)。
推荐云部署
Ad在 DigitalOcean 上一键部署
为你的 MCP 服务、Docker 容器与智能体提供即开即用云服务器,新用户立享 $200 免费额度(60天有效)。
→