WorldRecon:面向大规模 3D 场景的生成式多视角网格重建
WorldRecon 提出基于 TRELLIS.2 的多视角生成式重建框架,从无位姿 RGB 图像恢复完整的大规模 3D 场景网格。它先由重建模型估计全局点云与相机位姿并分块,再以基于重建的条件架构在每个块上产出 PBR 材质与稀疏结构,并通过邻域感知潜在补全与因果生成在块间传播结构、几何与材质信息。
推荐理由:基于 TRELLIS.2 的多视角生成式重建给出了室内场景的具体提升幅度,便于与现有 3D 重建方法横向比较。
WorldRecon 提出基于 TRELLIS.2 的多视角生成式重建框架,从无位姿 RGB 图像恢复完整的大规模 3D 场景网格。它先由重建模型估计全局点云与相机位姿并分块,再以基于重建的条件架构在每个块上产出 PBR 材质与稀疏结构,并通过邻域感知潜在补全与因果生成在块间传播结构、几何与材质信息。
推荐理由:基于 TRELLIS.2 的多视角生成式重建给出了室内场景的具体提升幅度,便于与现有 3D 重建方法横向比较。
GreenWAM 提出一个跨 20 种机器人形态的共用关节动作空间,通过联合训练让同一模型同时承担世界模型和策略两个角色。它在 WorldArena 1.0 轨迹、深度和 3D 预测上领先,在 RoboTwin 2.0 进入前列,并在 LIBERO-plus 取得对比方法中最高的零样本成功率;适配到真实人形机器人后表现优于基于 π₀.₅ 和 Cosmos 3 Edge 的策略。
推荐理由:论文给出统一世界模型在20种机器人形态上的联合训练和评测结果,便于对比它与专用策略在不同任务上的差距。
AesCode 论文提出以设计图为表示、用参考图像做美学引导的视觉化代码生成框架,结合确定性验证器与 VLM 评判的解耦跨模态奖励,通过带逐通道归一化的强化学习联合优化布局、美学与可验证正确性。
推荐理由:原文给出设计图驱动的解耦跨模态奖励方案及相对 Qwen3-VL 的具体提升幅度,可作为视觉化代码生成方向的方法参考。
AlphaNIST 用二元任务奖励和大规模多样化仿真经验,训练同一策略在 NIST 装配任务板 #1 上完成全部 20 项异构装配任务。方法核心是 Success-guided sampling(SGS),根据当前成功率动态调整起始状态的采样权重,覆盖松散零件、手内抓取和部分装配体等异构起点。
推荐理由:原文把预设动作的传统装配方法与靠二元奖励和多样化经验自主学习的方案做了对比,读者可以据此理解 SGS 采样策略在其中的作用。
BizBench 是一项多轮长链路业务 Agent 评测基准,基于一家头部支付公司的真实流程构建,包含 789 份知识文档和 601 个可发现工具,共 50 个任务,覆盖资源约束、时间依赖、过往承诺与冲突或过期指引等场景。
推荐理由:BizBench对比前沿模型在真实业务流程中的严格合规执行表现,揭示仅看最终结果会掩盖中间过程的违规。
InfiniSplat v2 在六个数据集上以同一训练模型取得前馈 3DGS 重建的 SOTA 平均 LPIPS 与 DISTS。其通过解耦几何与属性预测、利用真实相机姿态对齐高斯点并引入大角度目标视角监督实现该改进。位姿条件下平均 LPIPS 与 DISTS 较最强基线分别降低 25.8% 和 32.9%。
Virtual Head Attention (VHA) 通过 Q Premix 与 Linear Postmix 两个轻量线性变换,在不引入非线性操作的前提下同时降低 KV cache 与训练/预填计算开销,并可在推理时折叠回标准 GQA-2 架构复用现有推理优化。
推荐理由:原文给出了 VHA 在长上下文推理中相对 GQA、MLA 的具体收益与边界,方便读者评估该方案替代现有注意力机制的可行性。
ReMaRk 提出一种面向 LLM 推荐场景的强化学习方法,把每个请求的多份有效回复合并评分,去掉 Rank-GRPO 随机挑一条回复所引入的方差(占训练方差 85%)。
推荐理由:把同一请求下多份有效回复合并打分,作者在 7 个基座、3 个数据集上验证了这一可迁移规则对 RL 训练的提速效果。
华为诺亚方舟实验室联合UCL等团队提出AI智能体系统Memento 3,基于Claude Opus 5且不更新模型权重,在ARC-AGI-3的25款游戏、183个关卡上以7518次操作取得100分RHAE成绩,比人类的17135次少约56%。
推荐理由:文章拆解了 Memento 3 用规则手册和可执行世界模型实现递归自我改进的具体做法,可作为智能体设计的参考案例。
论文提出 Tracking-Value PPO(TPPO),通过累计式 value 参数化与终局监督改进稀疏奖励下的 credit assignment,在 Qwen3-4B-Base 和 Qwen3-8B-Base 上数学推理分数分别比 PPO 提高 7.0 和 8.4 分。
推荐理由:原文提出了 Tracking-Value PPO 方法与价值演化的可加性分析,可作为稀疏奖励下改进 PPO 价值估计的参考。
论文提出 Multics,一种面向多玩家交互仿真的视频生成框架,通过玩家、群组、全局三层分层通信结构降低自注意力成本并抑制无关事件间的相互干扰。群组 token 跨组共享参数,配合基于近期相机轨迹的预算受限动态分组,在 4 与 6 玩家场景取得 SOTA,并能从未经重训直接泛化到 6、8、10 玩家推理。
推荐理由:提出分层通信的多玩家世界模型框架,用群组 token 降低自注意力开销并支持训练规模之外的推理,可作为生成式交互仿真的方法参考。
NoteBank 是一面向线性注意力的稀疏情节记忆机制:把选定文本存档后,通过主干原生前向计算回放,无需额外训练、外挂嵌入模型或独立检索器即可即插即用。
推荐理由:训练无关的稀疏记忆外挂让线性注意力在百万 token 上仍保持检索能力,并可直接挂接到现有预训练骨干上复用。
论文提出 DeskIF-Bench(覆盖 6 款桌面应用的 255 个任务)和 ANIS 框架,用软件演进量化接口变化对智能体表现的影响,发现最新版始终优于最旧版,并归纳出可发现性、粒度与可观测性三个关键属性。
推荐理由:原文把软件演进当作接口差异的天然来源,并用 368 个桌面任务量化原子接口对智能体成功率与 token 用量的影响,可作为面向 Agent 的桌面接口设计参考。
KV4-RL 用 INT4 KV cache 量化结合对 attention sink 和近期上下文的 INT8 保护来加速 RLVR 异步 rollout。
推荐理由:论文把 RLVR 异步 rollout 的 KV 负载集中现象做了量化,并给出兼顾 INT4 加速与采样精度的可迁移训练方案。
研究者提出 Last Secure Code Benchmark,用 450 个任务覆盖 Java、C、C++、JavaScript、Python、PHP、Go 七种语言和 24 个 CWE(含 21 个 2025 CWE Top 25 与 8 个 Top 10 KEV 弱点)。
推荐理由:覆盖 7 种语言与 450 个真实漏洞任务,给出 6 款前沿编码智能体在功能与安全两个维度的通过率差距。
ViSkill 提出视觉原生技能学习框架,将成功交互编码为 VLM 智能体可直接调用的视觉技能卡;检索到的技能同时用于推理和奖励塑形,成功轨迹再回流到技能库,形成技能积累与策略优化的闭环,并提供可选的冷启动机制。
推荐理由:原文将视觉经验编码为可复用技能卡,让 VLM 智能体在闭环中积累技能并优化策略,提供了多环境下的基线对照。
论文提出 COAP(Code-Only-as-Policy)范式,让代码替代 VLM/VLA 直接从相机图像与本体感知中测量、追踪并决策机器人任务状态。该范式带来显式状态、可控执行与可扩展代码库三项优势,任务间能复用、继承同一库。
推荐理由:原文提出 COAP 范式,把机器人决策完全交给代码而无需 VLM/VLA 参与,并通过 42 项双臂任务的 70.24% 成功率展示了可递归自我改进的代码库积累路径。
Memento 3 提出让冻结的大语言模型代理通过外部自然语言规则手册持续学习显式世界模型的方法,主体通过观察、反思、规则修订、编译与验证的闭环来递归自我改进。在 ARC-AGI-3 全部 25 个公开关卡上通关,平均相对人类动作效率达 100.0,仅用 44% 的人类动作数;在 Atari Pong 案例中,学到的反馈控制器在三次不同开局中均以 21:0 获胜,且不再需要额外的大语言模型调用。
推荐理由:原文把冻结大语言模型通过自然语言规则手册持续更新世界模型的方法写成可验证流程,并给出 ARC-AGI-3 与 Atari Pong 上的具体结果。
研究团队发布音视频字幕评测基准 OmniCapBench,把预测目标从自由文本改为可验证的原子单元,覆盖实体指代、视觉镜头和音频事件三条轨道。基准包含 786 个密集标注视频,通过确定性约束检查和局部语义对比定位 MLLM 在时间对齐、身份漂移、跨模态错位和幻觉描述上的具体错误。评测前沿 MLLM 显示其局部感知较强,但长程音视频推理明显偏弱,尤其在身份漂移和跨模态错位上问题突出。
推荐理由:该基准把音视频字幕评估拆成三条可验证轨道,能精确定位 MLLM 的具体感知错误,为全模态模型的改进提供可迁移的诊断路径。
论文提出 RISEBench 与升级版 RISEBench++,面向推理驱动的视觉编辑任务,并发布训练免费的智能体框架 RISE-Agent。RISEBench++ 拆出六类推理维度共 65 个细粒度任务类型,包含 1000 条英中人工标注样本;评测 58 种编辑方法后,最强的 GPT-Image-2.5 Sunburst 也仅取得 56.6% 准确率。
推荐理由:RISEBench++ 把视觉编辑任务拆成六类推理维度并评测 58 个方法,最强模型仅有 56.6% 准确率,为推理型视觉编辑的能力差距给出可复用的基准。
论文提出 FreeMatching 稠密对应匹配框架,融合生成式与语义基础表征,并在图像编辑与参考引导生成(IEG)场景中保持身份一致性。实验显示单一模型在 IEG 图像对上显著提升匹配质量,同时在经典基准上保持竞争力,其匹配分数与人类判断相关,可作为身份保持的定量评估指标。代码已开源:https://github.com/luping-liu/FreeMatching。
推荐理由:原论文提出不依赖时空先验的稠密匹配框架 FreeMatching,并在图像编辑场景下验证了可量化的身份保持评估方法。
本文在多模态语言模型中发现一个名为 S-Space 的线性表征子空间,其物体 token 表征会沿水平、垂直和距离轴编码连续坐标,并随非空间问题也保持可读。研究表明 S-Space 是模型内部的空间工作区,可被感知写入、内部推理转换,并在语言回答时被选择性读取。作者进一步把它用作空间推理失败的诊断工具,指出模型虽能形成合格的空间表征,但在跨视角变换所需的空间推理上存在关键瓶颈。
推荐理由:提供把多模态语言模型空间表征拆成可读子空间的方法,能用来诊断空间推理失败并定位瓶颈。
论文提出 Learn2Play Bench,用规则新颖或反直觉的文本游戏评测 LLM 智能体在陌生环境中靠交互学习而非调用预训练知识的能力,并通过多次尝试与变体实例做受控评估。
推荐理由:原文给出一套区分预训练知识与真实交互学习的评测方法与三项发现,为改进智能体的经验学习机制提供可对照的实验基线。
研究提出 GraphDecisionBench 模型无关基准,评测 Jev 等 System One 模型在图任务上的决策能力,覆盖 14 种模型接口配置。测试发现:精确的邻接识别并不保证更广泛的结构正确性,联合图-文输入未必提升预测质量,可行构造也不等于高解质量。代码与汇总结果已在 GitHub 开源。
PreSTO 提出针对 PowerMH 幂次采样的子树预取加速方法,在不改变 Metropolis–Hastings 转移核的前提下,把未来提议以一个模型调用批量预取,再沿已实现路径用原 MH 规则接受。
推荐理由:在保持 MH 转移核不变的前提下给出可复现的推理加速方法,并附带在多个数据集与模型上的实测数据,便于迁移到其他采样器优化。
Road MOPD 通过引入非路由教师作为跨域评论者,解决多教师在线策略蒸馏中共享参数上多教师梯度冲突的问题,采用 token 级信用分配与多教师梯度投影协调监督信号。在高冲突场景下性能增益超过 5 个百分点,并在低冲突与三域设置中提升整体表现。
一篇论文研究 On-Policy 蒸馏(OPD)中相对策略差异的迁移条件,提出以代理 expert 与参考策略之间的对数概率比作为 KL 正则策略优化的隐式奖励,可实现跨规模、跨训练阶段、跨生成方式的任意对任意迁移。
推荐理由:论文给出了哪些相对策略差异能有效迁移到目标策略的判定条件,对做 On-Policy 蒸馏的读者具有直接参考价值。
作者提出 ProgramGym 框架,包含 Program-Env 与 Program-Agent 两部分,用于长程程序复现智能体的可扩展训练环境。Program-Env 通过反馈驱动循环从仓库构建可验证训练环境,覆盖 C、C++、Go、Rust 共 1,648 个环境;Program-Agent 串联分析、实现、评审三阶段工作流并加入修订控制。
推荐理由:原文给出 1644 个跨 C、C++、Go、Rust 的可验证训练环境构建方法与长程编码智能体在 ProgramBench 上的具体提升数字,可作为同类智能体训练环境的参考。
GeoFix 提出了一种统一框架,仅用单一几何奖励即可在训练和推理阶段提升视频扩散模型的 4D 生成质量,规避了现有方法在纹理和细节上的退化。该方法通过评估静态场景区域的跨视角深度一致性,并针对相机视场重叠带来的偏差进行奖励校准。实验显示,GeoFix 使 WorldScore 3D consistency 提升 39%,VBench Quality Score 提升 4%。
论文提出 SynthSelf 方法,利用同族稍大的对齐模型为小模型生成 in-distribution 监督信号,配合 off-policy 监督与拒绝采样,缓解持续后训练中能力获取与遗忘的矛盾。在 4 个获取数据集、14 个保留基准与 3 个小模型规模上均优于 6 种基线方法。
推荐理由:针对小模型持续后训练的能力获取与遗忘权衡,给出可由同族稍大模型蒸馏出的 in-distribution 监督方案,并把方法在多基准、多模型规模上做了对照。
ClawLoop 提出一种让大语言模型智能体在沙箱工作空间中自改进的训练框架,不依赖外部教师模型。该框架由任务合成、SFT/RL 训练和诊断反馈三阶段组成循环。
推荐理由:提出不依赖外部教师的智能体自改进训练框架,在多个评测基准上取得稳定提升,并验证了合成任务可迁移到更小模型。
研究者提出一套基于信息量(矩阵熵)与多样性(CKA)的多层隐藏状态选择框架,用于优化推测解码中的层选择策略。该框架引入 token-entropy 过滤和熵/CKA 层选择算法,在 EAGLE3 风格的推测解码中,所选层集优于默认的 [2, N//2, N-3] 等固定规则,同时为理解 LLM 解码器隐藏状态的几何与信息结构提供了实用分析工具。
针对 Qwen3 系列模型(1.7B–8B)以 NO-THINK 模式训练并施加强化学习的研究发现,RL 带来的精度提升主要来自思考泄漏,NO-THINK 模型逐渐表现出原本 THINK 模式的行为。
推荐理由:论文通过权重、激活和注意力头干预给出因果证据,提示读者重新评估强化学习对推理能力的实际增益来源。
作者提出ReHarness,一种面向智能体持续学习的循环框架,在三个持续学习基准与三种大语言模型骨干上一致优于现有基线。它在严格在线流协议中加入后向修订,每条实例后用轨迹反馈更新文本化的反思状态,在分布漂移下修正过度泛化与过时经验,同时改善稳定性与可塑性。arXiv:2610.12668
推荐理由:原文在三个持续学习基准和三种大语言模型骨干上做了对比,展示了在分布漂移下兼顾稳定性与可塑性的具体做法。
LeWAM 是一种面向控制的端到端 JEPA,把下一潜状态预测与动作流匹配放在同一目标里联合训练,并对潜状态施加各向同性高斯约束,使单个模型既能直接执行策略,也能用所学潜动力学对采样动作做高效规划。在视觉规划任务上,接触密集任务成功率由 28.6% 提升到 89.7%,长视野任务由 10.9% 提升到 46.2%,规划速度提升 32.3 倍;在仿真与物理机器人的行为克隆任务上也与既有方法相当。
推荐理由:原文以具体任务上的成功率与规划速度为参照,给出了一种把潜状态预测与动作流匹配合在同一个 JEPA 里的做法,读者可以据此与现有视觉规划方案做比较。
研究团队发布 DataVista 基准,包含 961 个真实数据视频和 6775 道评估题,按数据感知、时序推理、叙事理解三层能力框架、10 类细粒度问题与 5 个主题领域组织,用于系统评测多模态大模型的数据视频理解能力。
推荐理由:原文提出数据视频理解新基准,并系统对比 19 个主流多模态模型在感知、推理、叙事三层能力上的差距。
REMORY 提出一种神经网络记忆模块,在文本摘要之外追加一段 soft memory tokens,让冻结的大语言模型仅用 5.2% 的输入位置就能逼近全量上下文的续写效果。
推荐理由:提出用学习型 memory tokens 补充文本摘要,让长上下文智能体仅占 5.2% 的输入位置就逼近全量上下文表现。
论文提出面向大语言模型的通用文本化教学(UTT)框架,无需更新学生模型参数,通过 Student、Prompter、Teacher、Synthesizer 多角色配对评估与迭代合成,把师生差距蒸馏成可解释、可跨模型复用的自然语言文本 Primer。
推荐理由:提出无参数更新的知识蒸馏框架 UTT,把师生差距压缩成可跨学生模型复用的自然语言教学文本 Primer,为知识蒸馏提供新的可迁移载体。
该综述梳理了面向大语言模型的参数内记忆增强方法,将可复用参数对象接入推理前向计算以承载后预训练知识。文中按参数位置(Embedding、Attention、FFN 或混合)与获取时机(在线、离线)两个正交维度分类,并讨论了干扰、安全性以及递归自我改进等开放方向。
论文提出 ViRA,一个与规划器无关的视觉表征对齐框架,并发现 VFM 引导的视觉表征对端到端驾驶的提升幅度取决于目标选择与辅助感知监督。
推荐理由:论文给出可迁移结论,把视觉基础模型表征对齐进端到端规划器时,目标选择与感知监督共同决定最终增益。