🦾 LLM Agent¶
💬 ACL2026 · 82 篇论文解读
📌 同领域跨会议浏览: 📷 CVPR2026 (42) · 🔬 ICLR2026 (162) · 🧪 ICML2026 (59) · 🤖 AAAI2026 (33) · 🧠 NeurIPS2025 (39) · 📹 ICCV2025 (4)
🔥 高频主题: Agent ×30 · LLM ×29 · 推理 ×6 · 对抗鲁棒 ×5 · 多模态 ×3
- AdaRubric: Task-Adaptive Rubrics for Reliable LLM Agent Evaluation and Reward Learning
-
本文指出 "LLM-as-Judge + 固定 rubric"(Helpfulness/Safety/Fluency)对评估目标导向的 agent 轨迹严重不匹配,提出 AdaRubric——由 LLM 根据任务描述自动生成任务专属的 N 维评估 rubric,再用置信度加权的逐步评估产出密集 reward 信号;并设计 DimensionAwareFilter 在 DPO 数据构建中防止"维度掩盖",在 WebArena/ToolBench/AgentBench 上 Pearson r=0.79,DPO 训练带来 +6.8~+8.5% 任务成功率提升。
- AgencyBench: Benchmarking the Frontiers of Autonomous Agents in 1M-Token Real-World Contexts
-
提出AgencyBench——一个包含138个真实世界任务的综合基准,评估6种核心智能体能力,每个场景平均需90次工具调用和100万token,通过用户模拟agent和Docker沙箱实现全自动化评估。
- Agent-GWO: Collaborative Agents for Dynamic Prompt Optimization in Large Language Models
-
本文提出 Agent-GWO,将灰狼优化器的领导者-追随者机制引入多智能体框架,联合优化 prompt 模板和解码超参数(温度、top-p 等),在 11 个数学和混合推理基准上持续超越现有提示优化方法。
- AnchorMem: Anchored Facts with Associative Contexts for Building Memory in Large Language Models
-
提出AnchorMem记忆框架,受普鲁斯特现象启发,将检索单元(原子事实)与生成上下文(原始交互)解耦,通过关联事件图连接碎片化记忆,在LoCoMo基准上大幅超越A-Mem、Mem0等现有记忆系统。
- AVA: Attentive VLM Agent for Mastering StarCraft II
-
本文提出 AVACraft——首个同时支持 MARL 和 VLM 两种决策范式的星际争霸 II 多模态基准(21 场景 / RGB+文本+结构化状态),并给出 VLM 基线 AVA(多模态优先级推理 + RAG + 动态角色分配),实验显示在基础 3m 场景 MARL 训练 5M 步只能到 19–27% 胜率,而 VLM 零样本就能拿到 75–90%。
- BAPO: Boundary-Aware Policy Optimization for Reliable Agentic Search
-
针对 RL 训练后的 agentic search 模型几乎从不说"I DON'T KNOW"导致编造答案的可靠性问题,BAPO 在 GRPO 之上加入"基于组的边界感知奖励 + 自适应奖励调制器",让模型只在真正越界时才拒答,相对 GRPO 在四个多跳 QA 上把 reliability 平均提升约 9.7%,且仅用 5k 训练样本就超过 90k 样本训练的 Search-R1。
- Benchmarking Web Agent Safety under E-commerce Deceptive Interfaces
-
作者做了 WebDecept——一个轻量可插拔的"欺骗界面注入层",能在 VisualWebArena 电商环境里按触发时机塞进七种现实常见的欺骗模式(弹窗、横幅、域名跳转、偷加购物车、改总价等),用来测多模态 web agent 的安全性;结果发现 GPT-5.1、Claude 4.5、Gemini 2.5 等先进 agent 普遍扛不住,尤其对"偷改购物车/总价"几乎全军覆没,且加安全提示词也救不回来。
- ChartAgent: A Multimodal Agent for Visually Grounded Reasoning in Complex Chart Question Answering
-
ChartAgent 把图表问答从"文字链式推理"改成"在图像本身上动手"——用一套图表专用视觉工具(分割饼块、抠条形、定位坐标轴)在 ReAct 循环里逐步操作图表、并对中间可视化做自我校验,在 ChartBench / ChartX 上对无标注、重数值的难题整体提升最高 16.07%、无标注子集提升 17.31%。
- CLAG: Adaptive Memory Organization via Agent-Driven Clustering for Small Language Model Agents
-
本文提出 CLAG,一种基于聚类的 Agent 记忆框架,通过 SLM 驱动的路由将记忆组织到语义一致的聚类中,在聚类内部进行局部进化更新,并通过两阶段检索过滤噪声,在多个 QA 数据集上显著优于全局记忆池基线。
- CodeStruct: Code Agents over Structured Action Spaces
-
本文提出CodeStruct框架,将代码仓库重新定义为基于AST的结构化动作空间,让LLM代码Agent通过命名的程序实体(而非文本片段)进行读取和编辑操作,在SWE-Bench Verified上提升1.2-5.0%准确率并减少12-38% token消耗。
- CoEvolve: Training LLM Agents via Agent-Data Mutual Evolution
-
CoEvolve 提出智能体-数据共进化框架,通过从训练轨迹中提取遗忘/边界/稀有三类弱点信号,引导 LLM 做针对性环境再探索和任务合成,使训练数据分布随智能体能力动态适应,在 AppWorld 和 BFCL 上分别带来 19-23% 的绝对提升。
- Context-Value-Action Architecture for Value-Driven Large Language Model Agents
-
提出 CVA(Context-Value-Action)架构,基于 S-O-R 心理学模型和 Schwartz 价值理论,通过训练在真实人类数据上的 Value Verifier 解耦行为生成与认知推理,有效缓解 LLM 智能体的行为极化问题,在超过 110 万真实交互轨迹的 CVABench 上显著优于基线。
- Do LLM Agents Mirror Socio-Cognitive Effects in Power-Asymmetric Conversations?
-
这篇论文用职业角色和 persona 模拟权力不对称对话,发现 LLM agent 会复现代词使用、语言协调、权威说服和有害服从等社会认知效应,其中一些效应提升对话真实感,另一些则带来安全风险。
- Don't Act Blindly: Robust GUI Automation via Action-Effect Verification and Self-Correction
-
本文提出VeriGUI框架,通过Thinking-Verification-Action-Expectation(TVAE)闭环推理机制和两阶段训练管线(Robust SFT + GRPO),让GUI Agent能够验证每步操作是否成功并在失败时自我纠正,在3B和7B规模上均显著优于基线。
- Don't Adapt Small Language Models for Tools; Adapt Tool Schemas to the Models
-
本文提出 PA-Tool,一种无训练的工具 Schema 优化方法,利用从数据污染检测中借鉴的"尖锐度"(peakedness)信号识别模型预训练中熟悉的命名模式,通过重命名工具组件来对齐小语言模型的内化知识,在 MetaTool 和 RoTBench 上实现最高 17% 的提升,Schema 不对齐错误减少 80%。
- Don't Click That: Teaching Web Agents to Resist Deceptive Interfaces
-
作者首次把"对抗欺骗性 UI"形式化为 web agent 的独立防御问题,提出两阶段框架 DUDE(不对称惩罚的 hybrid-reward RL 学一个 evaluator + 用 experience summarization 把失败模式蒸馏成可迁移上下文),并发布含 1407 个真实/合成场景的 RUC 基准,在 3 个 VLM agent base 上把欺骗诱发失败率从 23.5% 降到 1.5%、任务成功率从 9.5% 推到 60.5%,且 Stage-2 优化的 prompt 能零样本迁移到闭源模型。
- Dynamic Generation of Multi-LLM Agents Communication Topologies with Graph Diffusion Models
-
本文提出 Guided Topology Diffusion,将多 LLM agent 的通信拓扑生成建模为条件图扩散过程,并用代理奖励模型在每个去噪步骤做零阶引导,从而生成更稀疏、更省 token、更鲁棒的任务自适应协作网络。
- Exploring Reasoning Reward Model for Agents
-
作者发现现在 agentic RL 普遍用 sparse outcome reward(只看最终对错),导致中间多步推理质量信号被丢掉,于是提出 Agent-RRM——一个产生
<think>/<critique>/<score>三段结构化反馈的 reasoning reward model,并系统对比三种整合方式(C:纯 critique refinement、R:scalar reward 增强、U:critique + score 联合 GRPO),最终 Reagent-U 在 12 个 benchmark 上把 Qwen3-8B 的 GAIA 拉到 43.7%、WebWalkerQA 拉到 46.2%,证明"语言级 critique + 数值 reward"联合监督比单一信号好得多。 - ExpSeek: Self-Triggered Experience Seeking for Web Agents
-
ExpSeek 提出了一种基于步级熵自触发的经验主动寻求框架,让 Web Agent 在交互过程中根据自身信号判断何时需要指导、获取什么指导,在 Qwen3-8B/32B 上分别实现 9.3% 和 7.5% 的绝对提升。
- FAMA: Failure-Aware Meta-Agentic Framework for Open-Source LLMs in Interactive Tool Use Environments
-
FAMA 先用一套独立"失败分析 agent + 编排 agent"自动诊断基线 tool-use agent 在 τ-bench 这类多轮交互上的主要失败模式,再让一个 mitigation agent 按需挑选最小子集 helper agent 注入到上下文,从而在 Qwen 系列开源模型上把任务成功率最高拉高 27%。
- FedGUI: Benchmarking Federated GUI Agents across Heterogeneous Platforms, Devices, and Operating Systems
-
FedGUI 是首个面向跨平台 GUI 代理的联邦学习综合基准,包含六个数据集覆盖移动端/网页端/桌面端,系统研究跨平台、跨设备、跨操作系统和跨数据源四种异构性对联邦 GUI 代理训练的影响。
- Feedback-Driven Tool-Use Improvements in Large Language Models via Automated Build Environments
-
本文提出 FTRL 框架,通过五阶段自动化管线构建稳定可控的工具使用训练环境,并设计结合工具调用精度和任务完成度的可验证奖励机制,与偏好优化 RL 算法结合后,在 7B-14B 模型上实现平均超 10% 的工具使用性能提升,甚至超越最强闭源模型。
- FregeLogic at SemEval 2026 Task 11: A Hybrid Neuro-Symbolic Architecture for Content-Robust Syllogistic Validity Prediction
-
提出 FregeLogic 混合神经符号系统,结合五成员 LLM 集成和 Z3 SMT 求解器作为决胜裁判,在三段论有效性判断中将内容效应降低16%的同时提升准确率0.9%。
- From Storage to Experience: A Survey on the Evolution of LLM Agent Memory Mechanisms
-
本文用「Storage → Reflection → Experience」三阶段演化框架把 LLM Agent 记忆机制做系统综述,用形式化定义把三阶段对应为「轨迹保留 → 轨迹精化 → 跨轨迹抽象」三种 functional signature,并用"Why-How-What"三层 RQ 串起整个 storyline,重点展开 Experience 阶段的两大变革性机制 — Active Exploration 与 Cross-Trajectory Abstraction。
- GOAT: A Training Framework for Goal-Oriented Agent with Tools
-
GOAT 通过从 API 文档自动构建"依赖图 + call-first 合成数据"的流水线,让开源小模型在无需人工标注的情况下学会把高层目标拆成一串相互依赖的 API 调用,在 RestBench / API-Bank / 自建的 GOATBench 上把开源模型推到 SOTA,部分场景甚至超过闭源大模型。
- Grounding Agent Memory in Contextual Intent
-
STITCH 为 LLM agent 的长程记忆引入"contextual intent"(主题域 + 事件类型 + 关键实体类型)三元组作为结构化检索 cue,在每条 trajectory step 上在线归纳;推理时按"标签密度排序"先做结构匹配再做语义打分,在新构建的 CAME-Bench 上随 trajectory 增长不掉点,比最强 baseline 在 Large subset 上提升 35.6% 绝对(100% 相对)。
- HAG: Hierarchical Demographic Tree-based Agent Generation for Topic-Adaptive Simulation
-
提出 HAG 框架,将群体 Agent 生成形式化为两阶段层次化决策过程——先用世界知识模型构建主题自适应人口分布树实现宏观分布对齐,再通过真实数据检索与 Agent 增强保证微观个体一致性,在多领域基准上将群体对齐误差平均降低 37.7%、社会学一致性提升 18.8%。
- HeLa-Mem: Hebbian Learning and Associative Memory for LLM Agents
-
HeLa-Mem 提出了一种受神经科学启发的 LLM 代理记忆架构,将对话历史建模为带 Hebbian 学习动力学的动态图——通过共激活强化记忆间连接、反思性蒸馏将枢纽记忆凝练为语义知识、双路径检索结合语义相似度和 Hebbian 扩散激活,在 LoCoMo 上以显著更少的 token 达到最优性能。
- Hierarchical Reinforcement Learning with Augmented Step-Level Transitions for LLM Agents
-
本文提出 STEP-HRL,通过引入局部进度模块将交互历史迭代压缩为紧凑的文本摘要,使高层和低层策略仅基于单步转移(而非完整历史)做决策,在 ScienceWorld 和 ALFWorld 上显著提升性能和泛化性,同时减少 token 使用。
- HiGMem: A Hierarchical and LLM-Guided Memory System for Long-Term Conversational Agents
-
本文提出 HiGMem,一个两层事件-对话轮记忆系统,通过让 LLM 先浏览事件摘要再预测哪些细粒度对话轮值得读取,在 LoCoMo10 基准上以少一个数量级的检索量达到了五类问题中四类的最优 F1。
- How Adversarial Environments Mislead Agentic AI
-
本文形式化了"对抗环境注入"(AEI)威胁模型,将其分解为广度攻击(投毒检索结果导致认知漂移)和深度攻击(注入幻影节点构造导航陷阱导致策略崩溃),在 11,000+ 次实验中发现两种攻击的鲁棒性完全独立——"鲁棒性分裂"表明当前单点防御策略根本不够。
- Impatient Users Confuse AI Agents: High-fidelity Simulations of Human Traits for Testing Agents
-
作者提出 TraitBasis——一种无需微调、模型无关的轻量方法,用对比激活差在隐藏空间里抽出「不耐烦/困惑/怀疑/语无伦次」等用户特质方向,可在推理时缩放、组合、注入来高保真地模拟刁难型用户;把它接进 τ-Bench 得到 τ-trait 基准后,发现前沿 agent 在用户行为变化下性能平均掉 4%–20%(最高 46%),戳穿了「benchmark 高分=真鲁棒」的假象。
- ImplicitMemBench: Measuring Unconscious Behavioral Adaptation in Large Language Models
-
提出 ImplicitMemBench,首个系统评估 LLM 隐式记忆的基准,包含程序性记忆、启动效应和经典条件反射三种认知范式共 300 个测试项,在 17 个模型上揭示严重局限:最优模型仅达 66% 整体准确率,远低于人类基线。
- IntrAgent: An LLM Agent for Content-Grounded Information Retrieval through Literature Review
-
IntrAgent 把"研究者读论文找信息"这件事拆成"先按结构排章节、再迭代读章节、读够就停"两段流水线,让 LLM 在不依赖向量检索的前提下,从一整篇科学论文里抽取出与查询忠实对齐的细粒度答案,在新基准 IntraBench 上跨五个 STEM 领域平均比 RAG/科研 agent 基线高出 13.2%。
- Lightweight LLM Agent Memory with Small Language Models
-
本文提出 LightMem,一种由多个专用小语言模型(SLM)驱动的轻量级 LLM 智能体记忆系统,通过将记忆操作模块化为控制器(SLM-1)、选择器(SLM-2)和写入器(SLM-3),并将在线处理与离线整合解耦,在 LoCoMo 基准上平均 F1 提升约 2.5(相比 A-MEM),同时实现 83ms 检索延迟和 581ms 端到端延迟。
- LiTS: A Modular Framework for LLM Tree Search
-
LiTS 把 LLM tree search 拆成 Policy、Transition、RewardModel 和统一数据结构,用 decorator registry 让同一套搜索算法、组件和任务逻辑可以在数学推理、环境规划和工具调用之间组合复用,并通过实验指出开放文本动作空间中的 policy diversity 是树搜索瓶颈。
- LPO: Towards Accurate GUI Agent Interaction via Location Preference Optimization
-
本文提出 Location Preference Optimization (LPO),通过基于信息熵的窗口奖励和基于物理距离的动态位置奖励,结合 GRPO 框架优化 GUI 智能体的空间定位精度,在离线和在线评估中均达到 SOTA。
- MAGMA: A Multi-Graph based Agentic Memory Architecture for AI Agents
-
MAGMA 把 LLM agent 的记忆拆成语义 / 时间 / 因果 / 实体四张正交关系图,再用 intent 路由 + 适应性 beam search 在合适的图上做 policy-guided traversal 检索,并配以"快路径同步入库 + 慢路径异步 LLM 巩固"双流写入;在 LoCoMo 上 Judge 0.700 全面超过 A-MEM / Nemori / MemoryOS,同时 query latency 仅 1.47s(比次优快 40%)。
- MCP-Flow: Facilitating LLM Agents to Master Real-World, Diverse and Scaling MCP Tools
-
MCP-Flow 提出了一个基于 Web Agent 的自动化管道,从 1166 个真实 MCP 服务器中收集工具信息并合成 68733 条高质量训练数据,使小规模微调模型(0.6B-8B)在 MCP 工具使用上超越 GPT-4o 等 SOTA 大模型。
- Mem²Evolve: Towards Self-Evolving Agents via Co-Evolutionary Capability Expansion and Experience Distillation
-
本文提出 Mem²Evolve,一种通过双记忆机制(资产记忆 + 经验记忆)实现能力扩展与经验蒸馏协同进化的自进化 Agent 框架,在 6 类任务 8 个基准上平均 Pass@1 达 70.24%,分别超过纯经验进化和纯能力进化的最强基线 11.80% 和 6.46%。
- Mem^p: Exploring Agent Procedural Memory
-
本文提出 Mem^p 框架,系统性地研究如何为 LLM Agent 构建可学习、可更新、终身演化的程序性记忆——通过将过去的任务轨迹蒸馏为细粒度的分步指令和高层脚本抽象,并配合动态更新机制(添加/验证/反思/淘汰),在 TravelPlanner 和 ALFWorld 上实现了成功率持续提升和执行步数大幅减少。
- MemSearcher: Training LLMs to Reason, Search and Manage Memory via End-to-End RL
-
MemSearcher 把搜索 agent 的"历史拼接"换成"LLM 自管理的紧凑内存"——每轮只看
(question, memory)而不是(question, t₁, a₁, o₁, …),并用 multi-context GRPO 把整条 trajectory 的 advantage 传播到每一轮独立优化,在 7 个 QA benchmark 上 3B/7B/14B 全面超过同尺寸 ReAct baseline(7B 甚至超 32B ReSearch),context 长度恒定 <4K token。 - Meta-Tool: Efficient Few-Shot Tool Adaptation for Small Language Models
-
通过在四个基准上系统对比超网络 LoRA 适应 vs 精心设计的 few-shot 提示,发现 2.28 亿参数的超网络提供零增益——few-shot 示例贡献 +21.5%、文档编码贡献 +5.0%、超网络贡献 0%,3B 模型配合良好提示可达 GPT-5 平均性能的 79.7% 且延迟低 10 倍。
- Mina: A Multilingual LLM-Powered Legal Assistant Agent for Bangladesh
-
开发 Mina——面向孟加拉国法律场景的多语言 LLM 法律助手,通过两阶段 RAG 流水线精准检索法案和条款,配合工具链和多语言嵌入,在孟加拉律师资格考试中取得 75-80% 的通过成绩,法律咨询成本仅为传统方式的 0.12-0.61%。
- MOOSE-Copilot: A Web-Based Interactive Assistant for Unified Exploratory and Fine-Grained Scientific Hypothesis Discovery
-
MOOSE-Copilot 把发散式科研 idea 探索和收敛式细粒度假设 refinement 统一到一个可视化人机协同系统中,并用初始蓝图、阶段路由和反馈三类显式人工信号显著提升科学假设发现效果。
- OCR-Memory: Optical Context Retrieval for Long-Horizon Agent Memory
-
OCR-Memory 将长程 Agent 交互轨迹渲染成带编号锚点的图像,让微调后的 OCR 检索器先在视觉空间定位相关片段、再按索引回取原始文本,从而在严格上下文预算下保留完整历史并提升 Mind2Web 和 AppWorld 上的长程任务表现。
- OctoTools: An Agentic Framework with Extensible Tools for Complex Reasoning
-
OctoTools是一个免训练、用户友好且易于扩展的多智能体框架,通过标准化工具卡封装异构工具、Planner-Executor分离范式和任务特定工具集优化算法,在16个多样化基准上实现了比GPT-4o平均+9.3%、比AutoGen/LangChain等框架最多+10.6%的准确率提升。
- OPeRA: A Dataset of Observation, Persona, Rationale, and Action for Evaluating LLMs on Human Online Shopping Behavior Simulation
-
OPeRA 是一个从真实 Amazon 购物过程中采集的用户行为数据集,把 persona、网页观察、细粒度动作和即时 rationale 放在同一条时间轴上,用来评估 LLM 是否真的能模拟特定用户的下一步购物行为。
- PersonaAgent: Bridging Memory and Action for Personalized LLM Agents
-
PersonaAgent 用“个性化记忆 + 个性化动作 + 可测试时优化的 persona prompt”把用户历史和工具行动连接起来,在 LaMP 多个个性化决策任务上明显超过 RAG、PAG、ReAct 和 MemBank 等基线。
- Polaris: A Gödel Agent Framework for Small Language Models through Experience-Abstracted Policy Repair
-
Polaris 将 Gödel Agent 的递归自我改进改造成适合 7B/8B 小模型的“失败分析 → 经验抽象 → 最小代码补丁 → 执行校验”策略修复循环,在 MGSM、DROP、GPQA、LitBench 上让小模型获得可解释、可持久复用的 policy-level 改进。
- PRInTS: 面向长程信息检索的过程奖励建模
-
PRInTS 把"过程奖励模型(PRM)"从短数学推理搬到长程信息检索 Agent:用一个 4B 模型同时学会"按信息增益给每一步打稠密分"和"递归压缩不断膨胀的轨迹上下文",靠测试时 best-of-\(n\) 选步,就让 32B 量级 Agent 平均提升 9.3%、甚至让 30B+4B 的组合在 GAIA 上超过 671B 的 DeepSeek-V3.1。
- ProPer Agents: Proactivity Driven Personalized Agents for Advancing Knowledge Gap Navigation
-
ProPer 把主动式助手建模为“发现并校准用户未说出的任务维度”的问题,通过 Dimension Generating Agent、post-hoc reranker 和 Response Generating Agent 选择性补足知识缺口,在医疗、代码和购物推荐任务上显著提升回答质量与 win rate。
- RecMem: Recurrence-based Memory Consolidation for Efficient and Effective Long-Running LLM Agents
-
RecMem 借鉴人类记忆中的“重复出现才固化”原则,把原始交互先放入轻量 subconscious memory,只有检测到语义复现时才调用 LLM 生成 episodic 与 semantic memory,从而在 LoCoMo 和 LongMemEval-S 上以显著更低构建 token 成本达到或超过主流记忆系统的问答准确率。
- Rethinking Reasoning-Intensive Retrieval: Evaluating and Advancing Retrievers in Agentic Search Systems
-
本文提出 BRIGHT-PRO,用多方面证据标注和 agentic search 协议重新评测 reasoning-intensive retriever,并用 RTriever-Synth 训练 RTriever-4B,证明检索器应优化“证据组合覆盖”而非单篇相关性。
- Robust Tool Use via Fission-GRPO: Learning to Recover from Execution Errors
-
提出 Fission-GRPO,在 RL 训练循环中将工具执行错误动态转化为在线策略修正训练实例:通过学习的错误模拟器生成诊断反馈并重采样恢复轨迹,将 Qwen3-8B 的错误恢复率提升 5.7%,整体准确率从 42.75% 提升至 46.75%。
- SafeMCP: Proactive Power Regulation for LLM Agent Defense via Environment-Grounded Look-Ahead Reasoning
-
SafeMCP 是一个部署在 MCP server 侧的 agent 防御插件,通过环境动力学世界模型做 look-ahead reasoning,先过滤会扩大危险能力边界的工具,再对已发起的危险调用做即时拦截,在 PowerSeeking Bench、ToolEmu 和 AgentHarm 上同时提升安全性并尽量保留任务效用。
- SEARL: Joint Optimization of Policy and Tool Graph Memory for Self-Evolving Agents
-
SEARL 将 agent 的策略参数和外部 Tool Graph Memory 联合优化,用工具锚定的 step-level advantage 与过程奖励解决长轨迹信用分配,使小模型在多跳问答和复杂数学任务中能持续创建、复用和整合工具。
- Shopping Companion: A Memory-Augmented LLM Agent for Real-World E-Commerce Tasks
-
Shopping Companion 构建了一个带长期用户偏好记忆和真实商品库的电商任务基准,并用两阶段 agent 加双重奖励、工具级奖励联合优化偏好识别和商品推荐,使 4B 模型接近强闭源模型表现。
- SOLAR-RL: Semi-Online Long-horizon Assignment Reinforcement Learning
-
SOLAR-RL 用离线轨迹重构、失败点检测和目标对齐奖励塑形,把静态 GUI 数据加工成带有伪在线反馈的长程训练信号,使 Qwen2.5-VL-7B 规模的 GUI agent 在 Android Control、GUI-Odyssey 和 Android World 上获得接近或超过强 offline baseline 的稳定表现。
- Spec-o3: A Tool-Augmented Vision-Language Agent for Rare Celestial Object Candidate Identification
-
提出 Spec-o3,一个工具增强的视觉语言智能体,通过交错多模态思维链(iMCoT)模拟天文学家的光谱检查流程,采用冷启动 SFT + 基于结果的 RL 两阶段训练,在稀有天体识别上将 macro-F1 从 28.3% 提升至 76.5%,推理速度比人工检查快 ~50 倍。
- StructMem: Structured Memory for Long-Horizon Behavior in LLMs
-
StructMem 提出了一种结构增强的层次化记忆框架,通过事件级双视角提取和跨事件语义整合,在 LoCoMo 长对话基准上实现 SOTA 性能(76.82%),同时大幅降低 token 消耗(1.94M vs. 图记忆的 35.8M)和 API 调用次数。
- Supplement Generation Training for Enhancing Agentic Task Performance
-
SGT(Supplement Generation Training)训练一个小型 LLM(1.7B)生成逐实例的补充文本(推理线索、摘要、错误提醒等),附加到输入后让冻结的大型 Actor 模型更有效地解决任务,在 5 个基准上平均提升 21%,无需修改大模型参数。
- SynthAgent: Adapting Web Agents with Synthetic Supervision
-
本文提出 SynthAgent,一个完全基于合成监督的 Web Agent 适应框架,通过分类探索系统覆盖网页功能区域以合成多样化任务,再通过任务精炼(冲突检测触发修正幻觉)和轨迹精炼(全局视角去噪)的双重精炼策略提升合成数据质量,在 WebArena 和 Online-Mind2Web 上显著优于现有合成方法。
- Taming Actor-Observer Asymmetry in Agents via Dialectical Alignment
-
发现 LLM Agent 在角色扮演中会表现出类人的"行动者-观察者不对称"(AOA)认知偏差——作为行动者倾向归因外部因素,作为观察者倾向归因内部错误,提出 ReTAS 通过辩证推理(正题-反题-合题)和 GRPO 对齐来消除这一偏差。
- Temp-R1: A Unified Autonomous Agent for Complex Temporal KGQA via Reverse Curriculum Reinforcement Learning
-
Temp-R1 把时序知识图谱问答从人工设计的固定 prompt workflow 改造成可强化学习训练的自主 agent,通过显式内部动作、SFT 冷启动、GRPO 和“先难后易”的反向课程,在 8B 开源模型上超过多种 GPT-4o/DeepSeek-V3 驱动的强基线。
- The Bitter Lesson of Diffusion Language Models for Agentic Workflows: A Comprehensive Reality Check
-
这篇论文系统评估扩散语言模型在具身智能体和工具调用智能体中的表现,发现它们虽然有并行解码带来的速度潜力,却在长程因果规划和严格格式生成上显著落后于自回归 LLM,并进一步用 DiffuAgent 证明 dLLM 更适合作为记忆压缩、工具筛选等非因果辅助模块。
- TheraAgent: Self-Improving Therapeutic Agent for Precise and Comprehensive Treatment Planning
-
TheraAgent 把治疗方案生成从一次性回答改造成 generate-reflect-refine 的自改进 agent 流程,用临床维度化评估器 TheraJudge 和 score-aware memory 不断修正方案,在 HealthBench 治疗规划子集和医生盲评中显著超过强基线。
- TiMem: Temporal-Hierarchical Memory Consolidation for Long-Horizon Conversational Agents
-
TiMem 将长程对话记忆组织成显式时间包含的五层 Temporal Memory Tree,并用复杂度感知检索在细粒度事实和高层 persona 之间动态取舍,在 LoCoMo 和 LongMemEval-S 上同时提升准确率并显著减少召回上下文长度。
- ToolGrad: Efficient Tool-use Dataset Generation with Textual "Gradients"
-
ToolGrad 把工具使用数据生成从“先写用户问题、再用 DFS 找工具链”反过来做成“先生成可执行成功的工具链、再反推用户问题”,并用类似 textual gradients 的 API 选择循环构造 ToolGrad-500,使数据生成 pass rate 达到 99.8%,训练出的 Gemma-3 小模型还能超过多种闭源强模型的单轮工具调用表现。
- ToolOmni: Enabling Open-World Tool Use via Agentic Learning with Proactive Retrieval and Grounded Execution
-
本文提出 ToolOmni,一个统一的智能体框架,将主动工具检索和基于检索结果的工具执行整合在同一推理循环中,通过冷启动 SFT + 解耦多目标 GRPO 联合优化检索和执行能力,在 ToolBench 上端到端执行成功率超过强基线 +10.8%。
- 拓扑重要:多智能体 LLM 中的内存泄露测量
-
本文通过 MAMA 框架系统地测量了多智能体 LLM 系统中通信拓扑如何影响个人可识别信息的泄露程度,发现密集连接的拓扑结构和攻击者与目标的距离是决定泄露风险的关键因素。
- Towards Scalable Lightweight GUI Agents via Multi-role Orchestration
-
本文提出 LAMO 框架,通过角色导向的数据合成和两阶段训练(SFT with Perplexity-Weighted Cross-Entropy + 多任务 RL),将轻量 3B MLLM 训练为可灵活编排多角色的 GUI Agent,在单体推理、多 Agent 协作和即插即用策略执行器三种模式下工作,搭配 GPT-5 规划器在 AndroidWorld 上达 77.6% 成功率,超越 72B 参数的专用 GUI Agent。
- Uncertainty Quantification in LLM Agents: Foundations, Emerging Challenges, and Opportunities
-
本文提出首个 Agent 不确定性量化(Agent UQ)的形式化框架:将 agent 的问题解决轨迹建模为动态贝叶斯网络上的随机过程 \(P(\mathcal{F}_{\leq T}) = P(E_0, O_0) \prod_{i=1}^{T} P_{\pi,\mathcal{T}}(A_i|E_{i-1}, O_{i-1}) P(O_i|A_i, E_i)\),统一了现有 UQ 范式(单步 QA、多步推理)为特例,并通过 \(\tau^2\)-bench 上的实证分析识别了四个 agent UQ 特有的技术挑战。
- Verified Critical Step Optimization for LLM Agents
-
CSO 从 agent 自己失败的轨迹中找出“换一个动作就能让任务成功”的 verified critical steps,只在这些关键决策点构造 DPO 偏好对,从而用更少、更可靠的监督提升长程 LLM agent 的后训练效果。
- Waking Up Blind: Cold-Start Optimization of Supervision-Free Agentic Trajectories
-
本文提出 SPECTRA,一种无需监督轨迹的框架——通过冷启动强化学习(GRPO)和软结构化多轮 rollout 拓扑约束,让小型视觉语言模型(SVLM)在纯环境交互中自行发现有效的工具调用和视觉推理行为,在 4 个多模态 benchmark 上提升任务准确率达 5% 和工具效率 9%,同时提出 Tool Instrumental Utility(TIU)指标量化无监督下的工具效能。
- WebClipper: Efficient Evolution of Web Agents with Graph-based Trajectory Pruning
-
WebClipper 把 Web Agent 的长工具调用轨迹建模成“动作节点-信息节点”状态图,再挖掘最小必要 DAG 来剪掉循环搜索和无效分支,使 Deep Research 类 agent 平均减少约 21% 工具轮次和 19.4% token,同时保持甚至提升准确率。
- What Makes an LLM a Good Optimizer? A Trajectory Analysis of LLM-Guided Evolutionary Search
-
本文通过大规模实验(15 个 LLM × 8 个任务、72K 候选解)发现优秀的 LLM 优化器表现为"局部精炼器"——持续产生频繁的渐进式改进并在语义空间中逐步集中搜索,而非产生高新颖性的跳跃式突破;关键发现是新颖性本身并不预测优化性能,只有当搜索保持足够局部化时新颖性才有益。
- When Agents Look the Same: Quantifying Distillation-Induced Similarity in Tool-Use Behaviors
-
本文提出了 RPS 和 AGS 两个互补指标来量化 LLM Agent 在工具使用行为上的蒸馏导致的同质化现象,通过区分必要行为和非必要行为,在 18 个模型上揭示了跨家族行为继承模式,发现 Kimi-K2 与 Claude Sonnet 4.5 的行为相似度甚至超过 Anthropic 自家模型。
- 为什么 LLM 网络代理失败:一个分层规划视角
-
本文通过分层规划框架(高层计划、低层执行、重规划)系统分析 LLM 网络代理的失败原因,发现 PDDL 表示优于自然语言规划,但低层执行和感知接地是真正的瓶颈。
- YIELD: A Large-Scale Dataset and Evaluation Framework for Information Elicitation Agents
-
提出信息引出代理(IEA)作为新的对话范式,发布了首个大规模(2,281 段对话,26M token)人与人信息引出对话数据集 YIELD,将信息引出形式化为有限视野 POMDP,并设计了专门的评估指标(Conformity、Progression、TLR),实验表明在 YIELD 上微调能显著提升 LLM 与真实引出行为的对齐。
- Your LLM Agents are Temporally Blind: The Misalignment Between Tool Use Decisions and Human Time Perception
-
揭示 LLM Agent 在多轮交互中的"时间盲区"(Temporal Blindness)——无法根据消息间流逝的真实时间来调整工具调用决策,并构建 TicToc 基准评估这一问题。
- ZARA: Training-Free Motion Time-Series Reasoning via Evidence-Grounded LLM Agents
-
提出 ZARA,一个基于知识和检索增强的多智能体框架,通过将传感器信号蒸馏为结构化文本知识库、类别条件检索和分层 LLM 推理,在完全免训练的设置下实现了可解释的人体活动识别,8 个数据集上大幅超越现有方法。