AReaL

AReaL 是清华叉院与蚂蚁集团推出的强化学习系统，用于训练大型推理与智能体模型。核心思路是全异步 RL：生成与训练解耦，v0.3 报告比同步系统快 2.77 倍且效果相当或更好。另有面向研究者的轻量 AReaL-lite API，便于以算法为先快速原型。

AReaL 2.0（2026 年 7 月）重构为独立的训练、推理、智能体和权重更新服务。一大特色是黑盒智能体在线 RL：把现有智能体的 base_url 和 api_key 指向 AReaL 服务即可训练，无需改智能体代码；仓库附有 OpenClaw 示例以及 Hermes、SWE 训练循环。

推理默认用 SGLang，也可用 vLLM；训练可在 Ray 集群上扩展，昇腾 NPU 在独立分支支持。安装默认 CUDA GPU 和预编译 flash-attn，因此它是研究基础设施，而不是可直接塞进应用的库。许可为 Apache-2.0。