llama-cpp-agent
★ 661
vs
AgentRunKit
★ 37
llama-cpp-agent vs AgentRunKit
llama-cpp-agent：llama-cpp-agent 是一个用于与 llama.cpp 模型交互的 Python 框架，提供聊天、结构化函数调用和 JSON 格式输出的统一接口。即使模型未专门针对函数调用微调，框架也能正常工作。开发者可以定义工具和可调用函数，由智能体直接调用，适合构建无需云端依赖的本地 Agent 工作流。；AgentRunKit：AgentRunKit 是一个轻量级的 Swift 6 框架，用于构建具有类型安全工具调用的 LLM 驱动代理。它拥有零依赖、完全 Sendable 支持、async/await 并发，并通过 MCP 兼容云端和本地模型。
01
简评
llama-cpp-agentLLM Infra · ★ 661
基于开源 LLM 构建本地 Agent 流水线
AgentRunKitLLM Infra · ★ 37
构建集成工具的人工智能聊天机器人
02
并排对比
03
功能特性
llama-cpp-agent01支持 llama.cpp 模型的结构化函数调用
02即使模型未做函数调用微调也可输出 JSON 结构数据
03支持多轮对话的聊天接口
04Python 原生工具/函数定义与绑定
05完全本地部署，无需云端依赖
AgentRunKit01具有可配置迭代限制和令牌预算的代理循环
02使用 AsyncThrowingStream 和 @Observable SwiftUI 包装器的流式传输
03带有编译时 JSON 模式验证的类型安全工具
04具有深度控制和流传播的子代理组合
05多模态输入：图像、音频、视频、PDF
04
使用场景
llama-cpp-agent↳基于开源 LLM 构建本地 Agent 流水线
↳无需微调即可从 LLM 响应中提取结构化数据
↳在消费级硬件上快速原型化函数调用工作流
AgentRunKit↳构建集成工具的人工智能聊天机器人
↳使用 LLM 代理自动化复杂工作流
↳创建用于本地或云端推理的智能助手
05
适合场景
llama-cpp-agent宝藏工具
AgentRunKit—
FAQ
常见问题
llama-cpp-agent 和 AgentRunKit 有什么区别？
llama-cpp-agent 和 AgentRunKit 都属于 LLM Infra 类别。llama-cpp-agent 有 661 Stars，AgentRunKit 有 37 Stars。
llama-cpp-agent 和 AgentRunKit 哪个更好？
最佳选择取决于你的具体需求。基于开源 LLM 构建本地 Agent 流水线 时选 llama-cpp-agent，构建集成工具的人工智能聊天机器人 时选 AgentRunKit。
llama-cpp-agent 是免费的吗？
是的，llama-cpp-agent 在 GitHub 开源（NOASSERTION）。
AgentRunKit 是免费的吗？
是的，AgentRunKit 在 GitHub 开源（MIT）。
推荐云部署
Ad在 DigitalOcean 上一键部署
为你的 MCP 服务、Docker 容器与智能体提供即开即用云服务器，新用户立享 $200 免费额度（60天有效）。
→