groundingLMM logo
groundingLMM
★ 969
vs
virtualhome logo
virtualhome
★ 644

groundingLMM vs virtualhome

groundingLMM:GLaMM(接地大型多模态模型)是一个端到端训练的大型多模态模型,能够生成与对象分割掩码集成的自然语言响应,实现了视觉接地,并支持在多层次粒度上与图像进行灵活交互。它引入了新颖的接地对话生成(GCG)任务,支持指代表达式分割和区域级图像描述等多种下游应用,并以大规模的GranD数据集为基础。;virtualhome:VirtualHome 是一个交互式平台,旨在使用程序和Python API模拟复杂的家庭活动。它支持丰富的环境交互、多智能体活动,并可作为具身AI和强化学习智能体训练的环境。

01

简评

groundingLMM logo
groundingLMMVision / Multimodal · ★ 969

理解并响应用户关于特定图像区域查询的交互式视觉助手。

virtualhome logo
virtualhomeVision / Multimodal · ★ 644

训练具身AI和强化学习智能体。

02

并排对比

字段
groundingLMM logogroundingLMM
virtualhome logovirtualhome
分类
视觉/多模态
视觉/多模态
Stars
★ 969
★ 644
许可证
Apache-2.0
MIT
安装方式
git clone https://github.com/mbzuai-oryx/groundingLMM.git
pip install virtualhome
更新时间
1个月前
5个月前
开源
是
是
标签
多模态人工智能, 计算机视觉, 自然语言处理
模拟, 具身智能, 强化学习
03

功能特性

groundingLMM logogroundingLMM
01生成与对象分割掩码无缝集成的自然语言响应。
02支持新颖的接地对话生成(GCG)任务,并提供全面的评估协议。
03执行详细的区域级图像描述和回答基于推理的视觉问题。
04通过从基于文本的查询创建分割掩码,擅长指代表达式分割。
05提供高质量的图像描述和会话式问答。
virtualhome logovirtualhome
01通过Python API和程序模拟复杂的家庭活动。
02支持与环境进行丰富的交互,包括拾取物体和操作电器。
03具备程序生成能力,可创建无限多样的独特环境。
04支持多智能体活动,并允许动态修改环境。
05提供地面真实数据流(分割、光流、深度)和类OpenAI Gym的强化学习环境。
04

使用场景

groundingLMM logogroundingLMM
↳理解并响应用户关于特定图像区域查询的交互式视觉助手。
↳用于创建密集、像素级接地数据集的自动化标注工具。
↳需要视觉理解和带有分割的详细文本描述的高级图像分析任务。
virtualhome logovirtualhome
↳训练具身AI和强化学习智能体。
↳通过程序模拟和可视化复杂的家庭活动。
↳为研究生成大规模的程序和环境状态数据集。
FAQ

常见问题

groundingLMM 和 virtualhome 有什么区别?
groundingLMM 和 virtualhome 都属于 Vision / Multimodal 类别。groundingLMM 有 969 Stars,virtualhome 有 644 Stars。
groundingLMM 和 virtualhome 哪个更好?
最佳选择取决于你的具体需求。理解并响应用户关于特定图像区域查询的交互式视觉助手。 时选 groundingLMM,训练具身AI和强化学习智能体。 时选 virtualhome。
groundingLMM 是免费的吗?
是的,groundingLMM 在 GitHub 开源(Apache-2.0)。
virtualhome 是免费的吗?
是的,virtualhome 在 GitHub 开源(MIT)。
推荐云部署
Ad

在 DigitalOcean 上一键部署

为你的 MCP 服务、Docker 容器与智能体提供即开即用云服务器,新用户立享 $200 免费额度(60天有效)。

立即领取 $200 免费额度
→

相关链接