chinese-llm-benchmark
★ 6.5k
vs
toolport
★ 235
chinese-llm-benchmark vs toolport
chinese-llm-benchmark:ReLE评测(原名CLiB)是一个持续更新的中文AI大模型能力评测项目,已覆盖337个商用及开源大模型。它提供多维度能力评测和综合排行榜,并包含超200万的大模型缺陷库,以帮助社区研究和改进模型。;toolport:Toolport是一个本地模型上下文协议(MCP)网关,它允许所有AI客户端共享一个工具配置,避免重复设置。通过懒惰发现机制,它仅按需提供元工具,显著降低了令牌消耗,最高可节省91%的总令牌。
01
简评
chinese-llm-benchmarkLLM Infra · ★ 6.5k
对比和选择特定应用场景下表现最佳的大模型。
toolportLLM Infra · ★ 235
从单一入口管理多个AI客户端(如Claude、Cursor、Codex)的工具访问和认证。
02
并排对比
03
功能特性
01广泛覆盖337+个商用及开源中文大模型。
02支持教育、医疗等7大领域及约300个细分维度的多维度能力评测。
03提供全面细致的各类能力排行榜。
04拥有超200万的大模型缺陷库,便于研究分析和改进大模型。
05为私有大模型提供免费评测服务和定制化选型支持。
01减少令牌消耗:通过懒惰发现机制,可将工具定义开销降低多达99.6%,总令牌消耗降低多达91%。
02统一配置,适用于所有AI客户端:一次设置服务器,所有连接的客户端即可共享。
03供应链安全:检测工具完整性问题,如“甩盘”、工具投毒以及针对代理劫持的内容防御。
04基于代理的作用域:为不同的AI客户端分配特定的服务器,实现细粒度的访问控制。
05内置工具游乐场:在连接AI客户端之前,使用自动生成的表单测试任何MCP工具。
04
使用场景
↳对比和选择特定应用场景下表现最佳的大模型。
↳发现并改进大语言模型的能力缺陷。
↳对私有或定制化大模型进行基准测试,以优化性能和成本。
↳从单一入口管理多个AI客户端(如Claude、Cursor、Codex)的工具访问和认证。
↳为需要与大量工具或API交互的AI代理显著降低令牌成本。
↳通过检测恶意工具变更或内容注入,增强AI代理操作的安全性。
↳无需单独配置客户端,即可简化AI代理新MCP服务器和工具的开发与测试。
↳允许团队共享一套受治理的AI工具和API集成,同时确保成员密钥的独立安全性。
05
适合场景
必备神器时下流行
—
FAQ
常见问题
chinese-llm-benchmark 和 toolport 有什么区别?
chinese-llm-benchmark 和 toolport 都属于 LLM Infra 类别。chinese-llm-benchmark 有 6.5k Stars,toolport 有 235 Stars。
chinese-llm-benchmark 和 toolport 哪个更好?
最佳选择取决于你的具体需求。对比和选择特定应用场景下表现最佳的大模型。 时选 chinese-llm-benchmark,从单一入口管理多个AI客户端(如Claude、Cursor、Codex)的工具访问和认证。 时选 toolport。
chinese-llm-benchmark 是免费的吗?
是的,chinese-llm-benchmark 在 GitHub 开源。
toolport 是免费的吗?
是的,toolport 在 GitHub 开源(MIT)。
推荐云部署
Ad在 DigitalOcean 上一键部署
为你的 MCP 服务、Docker 容器与智能体提供即开即用云服务器,新用户立享 $200 免费额度(60天有效)。
→