chinese-llm-benchmark
★ 6.5k
vs
deltallm
★ 20
chinese-llm-benchmark vs deltallm
chinese-llm-benchmark:ReLE评测(原名CLiB)是一个持续更新的中文AI大模型能力评测项目,已覆盖337个商用及开源大模型。它提供多维度能力评测和综合排行榜,并包含超200万的大模型缺陷库,以帮助社区研究和改进模型。;deltallm:DeltaLLM是一个自托管的AI网关,为100多个LLM提供商提供统一的OpenAI兼容API。它通过内置的路由、成本跟踪和安全防护等企业级功能,简化了LLM集成。
01
简评
chinese-llm-benchmarkLLM Infra · ★ 6.5k
对比和选择特定应用场景下表现最佳的大模型。
deltallmLLM Infra · ★ 20
集中式LLM访问管理:通过单一入口简化多个LLM提供商的API密钥管理和开发者集成。
02
并排对比
字段
分类
大模型基础设施
大模型基础设施
Stars
★ 6.5k
★ 20
许可证
—
MIT
安装方式
git clone https://github.com/jeinlee1991/chinese-llm-benchmark.git
MASTER_KEY=$(python3 -c 'import secrets; print("sk-" + secrets.token_hex(20) + "A1")') && SALT_KEY=$(python3 -c 'import secrets; print(secrets.token_hex(32))') && git clone https://github.com/deltawi/deltallm.git && cd deltallm && cp config.example.yaml config.yaml && echo "DELTALLM_MASTER_KEY=$MASTER_KEY" > .env && echo "DELTALLM_SALT_KEY=$SALT_KEY" >> .env && echo "OPENAI_API_KEY=sk-your-openai-key" >> .env && echo "[email protected]" >> .env && echo "PLATFORM_BOOTSTRAP_ADMIN_PASSWORD=ChangeMe123!" >> .env && docker compose --profile single up -d --build
更新时间
2天前
1天前
开源
是
是
标签
大模型评测, 中文大模型, AI基准测试
AI 网关, LLM 管理, OpenAI API 代理
03
功能特性
01广泛覆盖337+个商用及开源中文大模型。
02支持教育、医疗等7大领域及约300个细分维度的多维度能力评测。
03提供全面细致的各类能力排行榜。
04拥有超200万的大模型缺陷库,便于研究分析和改进大模型。
05为私有大模型提供免费评测服务和定制化选型支持。
01统一的OpenAI兼容API,支持100多个LLM提供商。
02虚拟API密钥,具备预算、速率限制和模型限制等精细控制。
03先进的路由和故障转移策略,支持自动重试。
04内置安全防护措施,包括PII检测和提示注入保护。
05全面的开销跟踪,按密钥、团队和模型进行成本归属。
04
使用场景
↳对比和选择特定应用场景下表现最佳的大模型。
↳发现并改进大语言模型的能力缺陷。
↳对私有或定制化大模型进行基准测试,以优化性能和成本。
↳集中式LLM访问管理:通过单一入口简化多个LLM提供商的API密钥管理和开发者集成。
↳成本控制与优化:实施预算并跟踪开销,以优化团队和模型之间的LLM使用成本。
↳增强安全性和合规性:在LLM交互中应用PII检测和提示注入保护等安全防护。
↳多供应商LLM策略:根据性能、成本或可用性在不同LLM提供商之间路由请求,避免供应商锁定。
05
适合场景
必备神器时下流行
—
FAQ
常见问题
chinese-llm-benchmark 和 deltallm 有什么区别?
chinese-llm-benchmark 和 deltallm 都属于 LLM Infra 类别。chinese-llm-benchmark 有 6.5k Stars,deltallm 有 20 Stars。
chinese-llm-benchmark 和 deltallm 哪个更好?
最佳选择取决于你的具体需求。对比和选择特定应用场景下表现最佳的大模型。 时选 chinese-llm-benchmark,集中式LLM访问管理:通过单一入口简化多个LLM提供商的API密钥管理和开发者集成。 时选 deltallm。
chinese-llm-benchmark 是免费的吗?
是的,chinese-llm-benchmark 在 GitHub 开源。
deltallm 是免费的吗?
是的,deltallm 在 GitHub 开源(MIT)。
推荐云部署
Ad在 DigitalOcean 上一键部署
为你的 MCP 服务、Docker 容器与智能体提供即开即用云服务器,新用户立享 $200 免费额度(60天有效)。
→