AgentIndex icon
AgentIndex
工具MCP 服务HOT分类热门最新选型清单对比指南
提交工具
工具MCP 服务HOT分类热门最新选型清单对比指南
首页/
大模型基础设施/
llmtrim
llmtrim logo

llmtrim

活跃·★ 255·AGPL-3.0·更新于 2026-10-20

llmtrim 是一个本地代理,位于你的 AI 工具(Claude Code、Codex、Cursor 或自己的应用)与 LLM 提供商之间。它会去掉每个请求中浪费的 token,例如 200 行构建日志里只有两行是错误、同一份工具模式被重复发送几十次、或包含近乎相同行的 JSON 数组,然后转发更小的请求,回复则原样返回。README 称在 112 组 A/B 测试中测得输入 token 减少 31%、输出 token 减少 74%,回答质量无变化。

它可以作为代理、命令行、MCP 服务,或 Python、Ruby、Swift、Kotlin 的库使用,可通过 npm、安装脚本、Homebrew、cargo、scoop 或 Docker 安装。每个压缩步骤都会用提供商的分词器重新测量,没有节省 token 就撤销;如果提供商拒绝压缩后的请求,就重新发送原始请求。安装时会生成一张仅限 LLM API 域名的私有证书,并修改 shell 代理设置和添加一个登录服务,`llmtrim uninstall` 可以全部还原,提示词不会写入磁盘。

本文根据项目 README 和公开仓库数据整理,我们没有实际试用过该工具。数据截至 2026-10-17。

许可证
MPL-2.0
最新发布
v0.13.7 · 2026-09-16
最近提交
2026-10-01
贡献者
5
复刻数
23
未关闭的 issue 和 PR
12
首次发布
2026-06-07
npm 包
@llmtrim/cli 0.13.4 · 172 上周下载
PyPI 包
llmtrim 0.13.7 · 183 上周下载

来源:GitHub、npm 和 PyPI 的公开接口。

#LLM代理#Token压缩#成本优化#上下文管理#提示优化#API优化#开发工具
$ 安装
$ npm install -g @llmtrim/cli@latest && llmtrim setup
↗ 访问官网★ GitHub
01

功能特性

01通过本地代理透明压缩LLM API请求
02针对多种数据类型(日志、代码、上下文、JSON)的智能内容优化
03通过自动回滚无效压缩,确保响应质量和成本节省
04灵活的集成选项:命令行工具、多语言库(Python, Ruby, Swift, Kotlin)和MCP服务器
02

为什么选择它

+在发送前压缩提示词、历史、工具输出和代码,不需要额外模型。
+每个步骤都用提供商的分词器重新测量,没有节省 token 的步骤会被撤销。
+如果提供商拒绝压缩后的请求,会回退为发送原始请求。
+可作为代理、命令行、MCP 服务或库使用,并支持多种包管理器安装。
03

权衡点

!安装会部署本地 HTTPS 代理,包含私有 CA 证书、shell 代理设置和登录服务,部分用户会希望先审查。
!README 说明 Anthropic 和 Gemini 的 token 数是近似值,代理本身也不实时测量输出端的节省。
!默认模式是有质量把关的有损压缩,而非无损;需要逐字节一致时要使用 safe 预设。许可证为 AGPL-3.0。
04

维护状况检查

活跃检查日期: 2026-10-19
最近提交
2026-09-29
近 90 天提交数
100+
近 90 天发布数
22
最新发布
v0.13.7 (2026-09-16)
未关闭 issue
13
近期 issue 至少有一条评论的比例
9/13
近 12 周每周提交数
近 12 周每周提交数: 9, 10, 28, 0, 4, 5, 13, 0, 1, 0, 0, 0

最早的一周在左边,最近 4 周为橙色。数据来源:GitHub 提交统计。

状态规则:GitHub 上已归档 = 已归档;最近提交在 90 天内 = 活跃;91 到 365 天 = 放缓;更久 = 停滞。所有数字来自所示日期的 GitHub API。

讨论最多的未关闭 issue

  • #273 feat: Codex localhost gateway without MITM proxy1 条评论 · 2026-08-28
  • #156 feat: `sub` hot swapping1 条评论 · 2026-07-12
  • #297 mcp install: add a DeepSeek Harness (DSH) target0 条评论 · 2026-09-16

issue 标题引自 GitHub。请打开链接确认该问题是否仍适用于你使用的版本。

05

兼容性

Python
语言
已通过文档验证
Ruby
语言
已通过文档验证
Swift
语言
已通过文档验证
Kotlin
语言
已通过文档验证
Rust
语言
已通过文档验证
CLI
接口
已通过文档验证
06

快速开始

1
$ npm install -g @llmtrim/cli@latest
2
$ llmtrim setup
07

使用场景

↳降低AI代理(如Claude Code, Cursor, Aider)的LLM API成本。
↳在自定义LLM应用程序和SDK中优化Token使用。
↳为RAG系统压缩长上下文窗口(例如,粘贴的文档、对话历史)。
↳缩减发送给LLM的冗长工具输出,如构建日志、差异或大型JSON数组。
08

同类工具

⚡热门对决:
VSconduit★235→VScodex-pooler★233→VSfastmcp-ts★78→VSmcpmu★19→
conduit logo
conduit★ 235
Conduit是一个本地MCP(模型上下文协议)网关,旨在通过将多个服务器工具整合为少量元工具,优化AI代理的工具使用和上下文管理,从而大幅减少令牌消耗并简化多服务器集成。
VS对比→
codex-pooler logo
codex-pooler★ 233
Codex Pooler是一个自托管网关,用于在代理、工具和团队之间共享Codex账户容量。
VS对比→
fastmcp-ts logo
fastmcp-ts★ 78
一个用于构建模型上下文协议(MCP)服务器、客户端和应用程序的TypeScript框架。
VS对比→
mcpmu logo
mcpmu★ 19
mcpmu 是一个多路复用 MCP 网关,通过统一的 stdio 或 Streamable HTTP 端点公开多个 MCP 服务器。
VS对比→
projectmem logo
projectmem★ 868
projectmem 是一个本地优先的 AI 编码记忆和判断层,旨在为 AI 编码代理提供项目经验,节省高达 50% 的 AI token 并避免重复过去的错误。
VS对比→
aoci-code logo
aoci-code★ 1.7k
AOCI-CODE 是一个由编码代理编写、由本地MCP服务器管理的持久的、Git版本化的代码库全景图。
VS对比→
harnessrouter logo
harnessrouter★ 3.2k
HarnessRouter 是一个统一的代理工具层接口,用于将现有代理工具集(如 Codex 和 Claude Code)转换为即插即用的代理后端。
VS对比→
GoodMemory logo
GoodMemory★ 20
GoodMemory 是一个为 AI 产品和编程代理设计的记忆层。
VS对比→
查看全部替代品 →

评论

登录后发表评论

暂无评论,来发表第一条吧

本页内容
01功能特性02为什么选择它03权衡点04维护状况检查05兼容性06快速开始07使用场景08同类工具
fkiene /
llmtrim
↗

在本地压缩 LLM 请求以降低 token 费用的代理

25523AGPL-3.0
最后更新3天前
状态活跃
分类大模型基础设施
贡献者5
最新发布v0.13.7
链接
文档↗讨论↗问题↗版本↗
推荐云部署
Ad

在 DigitalOcean 上一键部署

为你的 MCP 服务、Docker 容器与智能体提供即开即用云服务器,新用户立享 $200 免费额度(60天有效)。

立即领取 $200 免费额度
© 2026 AgentIndex.app|由十年 iOS 开发者构建。
按场景挑选关于我们联系我们广告合作隐私政策使用条款QYSGitHub请作者喝咖啡 ☕

按分类浏览

MCP 服务器代码助手工作流自动化RAG / 知识库多智能体浏览器自动化大模型基础设施开发者工具可观测性

与 Anthropic, OpenAI 或 Microsoft 无关。