deltallm
★ 20
vs
rllm
★ 5.9k
deltallm vs rllm
deltallm:DeltaLLM是一个自托管的AI网关,为100多个LLM提供商提供统一的OpenAI兼容API。它通过内置的路由、成本跟踪和安全防护等企业级功能,简化了LLM集成。;rllm:rLLM是一个开源框架,旨在使用强化学习对语言代理进行后训练。它使用户能够轻松构建、训练和部署自定义代理和环境,以应对实际工作负载。
01
简评
deltallmLLM Infra · ★ 20
集中式LLM访问管理:通过单一入口简化多个LLM提供商的API密钥管理和开发者集成。
rllmLLM Infra · ★ 5.9k
训练用于代码生成和错误修复等任务的强大编码模型。
02
并排对比
字段
分类
大模型基础设施
大模型基础设施
Stars
★ 20
★ 5.9k
许可证
MIT
Apache-2.0
安装方式
MASTER_KEY=$(python3 -c 'import secrets; print("sk-" + secrets.token_hex(20) + "A1")') && SALT_KEY=$(python3 -c 'import secrets; print(secrets.token_hex(32))') && git clone https://github.com/deltawi/deltallm.git && cd deltallm && cp config.example.yaml config.yaml && echo "DELTALLM_MASTER_KEY=$MASTER_KEY" > .env && echo "DELTALLM_SALT_KEY=$SALT_KEY" >> .env && echo "OPENAI_API_KEY=sk-your-openai-key" >> .env && echo "[email protected]" >> .env && echo "PLATFORM_BOOTSTRAP_ADMIN_PASSWORD=ChangeMe123!" >> .env && docker compose --profile single up -d --build
uv pip install "rllm[verl] @ git+https://github.com/rllm-org/rllm.git"
更新时间
1天前
1周前
开源
是
是
标签
AI 网关, LLM 管理, OpenAI API 代理
强化学习, 语言代理, 大型语言模型
03
功能特性
01统一的OpenAI兼容API,支持100多个LLM提供商。
02虚拟API密钥,具备预算、速率限制和模型限制等精细控制。
03先进的路由和故障转移策略,支持自动重试。
04内置安全防护措施,包括PII检测和提示注入保护。
05全面的开销跟踪,按密钥、团队和模型进行成本归属。
01基于强化学习的语言代理后训练开源框架。
02支持构建、训练和部署自定义代理和环境。
03提供包括'verl'和'tinker'在内的多种训练后端。
04支持LoRA和VLM训练,用于高级模型。
05包含AgentWorkflowEngine,用于训练任意代理程序。
04
使用场景
↳集中式LLM访问管理:通过单一入口简化多个LLM提供商的API密钥管理和开发者集成。
↳成本控制与优化:实施预算并跟踪开销,以优化团队和模型之间的LLM使用成本。
↳增强安全性和合规性:在LLM交互中应用PII检测和提示注入保护等安全防护。
↳多供应商LLM策略:根据性能、成本或可用性在不同LLM提供商之间路由请求,避免供应商锁定。
↳训练用于代码生成和错误修复等任务的强大编码模型。
↳开发用于自动化任务的复杂软件工程代理。
↳使用强化学习技术构建和评估多代理系统。
05
适合场景
—
时下流行
FAQ
常见问题
deltallm 和 rllm 有什么区别?
deltallm 和 rllm 都属于 LLM Infra 类别。deltallm 有 20 Stars,rllm 有 5.9k Stars。
deltallm 和 rllm 哪个更好?
最佳选择取决于你的具体需求。集中式LLM访问管理:通过单一入口简化多个LLM提供商的API密钥管理和开发者集成。 时选 deltallm,训练用于代码生成和错误修复等任务的强大编码模型。 时选 rllm。
deltallm 是免费的吗?
是的,deltallm 在 GitHub 开源(MIT)。
rllm 是免费的吗?
是的,rllm 在 GitHub 开源(Apache-2.0)。
推荐云部署
Ad在 DigitalOcean 上一键部署
为你的 MCP 服务、Docker 容器与智能体提供即开即用云服务器,新用户立享 $200 免费额度(60天有效)。
→