ReLift:将密集 3D 跟踪转化为抬升轨迹修复
ReLift 提出一种无需基于图像训练的前馈框架,将密集 3D 跟踪转化为几何轨迹修复与补全。轨迹校正器利用沿轨迹与跨轨迹交替注意力,可在不重训时跨跟踪器和几何模型复用。WorldTrack 上平均准确率达 SOTA,较最强基线全点和动态点分别提升 2.1 APD、3.0 APD,较快配置快于 4RC。
ReLift 提出一种无需基于图像训练的前馈框架,将密集 3D 跟踪转化为几何轨迹修复与补全。轨迹校正器利用沿轨迹与跨轨迹交替注意力,可在不重训时跨跟踪器和几何模型复用。WorldTrack 上平均准确率达 SOTA,较最强基线全点和动态点分别提升 2.1 APD、3.0 APD,较快配置快于 4RC。
这项研究发现,REPA 等扩散 Transformer 训练加速方法会显著重组 AdaLN-Zero 残差门 α,加速模型对 α 的扰动也更敏感。研究提出归一化参与率 nPR 来刻画门在通道维度上的组织方式,并据此设计无需教师模型、基于特征范数正则化的径向目标。
推荐理由:论文将扩散训练加速与可测量的残差门重组织联系起来,并给出无需教师模型的径向目标,便于对照现有加速方法分析机制差异。
Prox 用 top-k 通道选择替代依赖离线校准数据的阈值筛选,并提出完全由模型权重构建的 reader,以加速 MoE 推理。在 13% 和 18% 读取预算下的 43 组比较中,top-k 版本有 40 组匹配或超过阈值版本,其中 23 项生成任务比较均达到或更优,并避免 Gemma 4 上阈值筛选导致的重复循环崩溃。
推荐理由:论文以 top-k 替代校准阈值,并在 3 个后训练 MoE 模型上对比读取比例、准确率与推理速度。
MatAnyone-E 通过仅在高分辨率下匹配不确定区域并采用轻量解码器,实现估计 7.4 倍的推理加速,同时保持与 MatAnyone 2 相当的抠图质量。它先以低分辨率传播定位不确定区域及相关记忆候选,再只对这些区域进行高分辨率匹配,其他位置复用低分辨率结果。
推荐理由:MatAnyone-E 将高分辨率匹配限制在不确定区域,并用轻量解码器降低开销,给出 7.4 倍推理加速和 4K 峰值 GPU 内存对比。
论文提出多尺度策略优化 MPO,以多尺度优势估计(MAE)和轮次级重要性采样,对齐长程大语言模型智能体训练中的信用分配与策略更新。研究观察到 critic value 主要随轮次变化,因此选择轮次作为优化锚点,并细化 token 间的信用分配。在搜索、工具使用和自动化任务上,MPO 使用 4B 和 30B-A3B 模型时较強 RL 基线取得一致增益。
推荐理由:MPO将轮次尺度信用分配与token级归因结合,并覆盖搜索、工具使用和自动化任务的多模型实验,便于比较长程智能体训练方案。
研究团队提出 Rollback 策略改进范式,把世界模型用于回滚关键决策、分支探索反事实动作,并用真实机器人反馈持续校正动力学。该方法无需单独训练价值模型,即可将反事实结果蒸馏为细粒度动作级监督。
推荐理由:论文将世界模型从顺序模拟器改造成可回溯、可分支并对比反事实动作的策略训练环境,呈现了世界模型参与机器人策略持续改进的具体路径。
论文作者在 arXiv 发布 NeurIPS 2026 论文《预训练数据的词汇印记》,提出以词级 unigram 交叉熵衡量预训练语料与目标基准之间的词汇对齐。实验发现,标准基准中几乎所有词汇都已在预训练阶段出现,模型在不同词之间分配的概率质量会留下可测量的词汇印记。更强的词汇对齐在从零开始的受控实验中持续对应更高的零样本准确率。
推荐理由:论文区分了词语覆盖与概率质量分配,并用从零训练实验检验词汇对齐与零样本准确率的对应关系。
OmniShowcase 通过几何驱动的训练数据和表面法线图条件,改善从多视图参考图像生成特定主体视频时的新视角主体身份与 3D 一致性。
推荐理由:论文将几何驱动的数据合成与表面法线条件结合,配套构建 Showcase-4K 和 ShowcaseBench,便于复现并比较跨视角主体一致性表现。
DiscoDemo 用强化学习生成多样化且成功的机器人操作轨迹,并导出为静态数据集,用于训练更稳健的视觉运动模仿策略。其潜在条件 RL 生成器结合并行反向课程和成功门控多样性目标;在 4 项操作任务中,下游策略平均成功率在仿真中从最强基线的 40% 提升至 62%,在真实机器人上从 39% 提升至 78%。
推荐理由:论文将强化学习用作机器人示范数据生成器,并在仿真与真实机器人上对比轨迹多样性对下游模仿策略的影响。
论文提出测试时记忆演化(TTME),在科学发现任务中以更低计算成本超过测试时训练(TTT)。该方法持续更新外部记忆并蒸馏经验以指导后续发现,不更新模型权重。在同一发现框架下仅替换适配方法的评测中,TTME 在五项数学任务上均胜过 TTT,FLOPs 降低 82.8-84.6%,运行时开销降低 47.7-58.4%。
推荐理由:统一发现框架下仅替换测试时适配方法,五项数学任务的对照结果量化了 TTME 相对 TTT 的性能与计算效率差异。
一项对开放模型训练历程的研究发现,推理模型中的 {wait} 标记可由训练数据继承,而非由强化学习(RL)自行发明。在缺少该词的基座上,RL 显著提升 MATH-500 准确率时,{wait} 仍接近缺席;该词会在 OLMo-3 的中期训练阶段出现,并能由推理轨迹微调植入大多数缺少该词的基座。
推荐理由:论文区分了 {wait} 的训练继承与特定 RL 配方的放大作用,并指出标记频率和 LLM 评审可能误判推理趋势。
Video-Point Model(VPM)根据多视角视频历史和语言指令,联合预测任意视角的未来视频与持久场景点的3D轨迹。它在预训练世界模型中加入相机条件多视角处理和轨迹头,并构建 VPM-Data 仿真语料与 VP-WorldBench 预测基准。
推荐理由:将多视角视频预测与持续点轨迹监督结合,并通过仅视频对照及模拟和真实机器人实验呈现共享3D表征的作用。
Foundation4D是一种面向自动驾驶的统一前馈模型,可从多摄像头驾驶视频联合估计几何、检测目标、预测语义占据并进行高斯重建。其共享骨干以分解式时空注意力融合跨相机和跨时间观测,位姿图优化用于细化相机轨迹并组装目标轨迹。
推荐理由:Foundation4D将多摄像头驾驶视频的几何、检测、语义占据与高斯重建纳入统一前馈框架,并发布含1,253段稠密标注驾驶片段的基准,便于比较联合训练的多任务收益。
谷歌开源 Harness²,这是一个 Harness 层递归自我改进(RSI)方法,让模型在运行中自我改写外挂代码、系统提示词、工具链和技能库。在 WorkBuddy-Bench 上,GLM-5 配合 OpenCode 时综合得分从 64.2 升至 75.7(+11.5),超过原生 Gemini 3.5 Flash 的 72.4。
推荐理由:原文拆解了 Harness² 的双层递归机制,并给出 WorkBuddy-Bench 等专业基准上的具体涨分,读者可据此评估 Harness 层 RSI 的可行路径与开源接入方式。
HyperDrone 提出一款GPU加速四旋翼模拟器,以每秒数百万帧渲染高保真观测,并支持视觉策略从仿真迁移到实机。其批处理仿真速度比现有先进四旋翼批处理模拟器快20x以上,HyperLux支持Nvidia OptiX、Vulkan、Apple Metal和WebGPU后端,并可输出RGB、深度、语义或实例分割、表面法线和光流观测。
推荐理由:论文报告批处理仿真速度比同类方案快20x以上,并验证纯仿真训练的偏航控制策略可迁移至Crazyflie实机,适合作为高速具身仿真的对照案例。
作者提出 SpecAgent 协作协议,由小模型起草工具调用步骤、大模型做并行语义验证,把强模型从逐步生成改为整体审阅。在 τ²-Bench 上成功率与强模型相差约 1 分,并大致减半内存访问与端到端时延;在 AutomationBench、VitaBench 与 MCP-Atlas 边缘云部署中分别回收 44–75% 与 53–75% 的强弱模型质量差,且强模型生成 token 数最多减半。
推荐理由:给出小模型起草、大模型并行语义验证的工具调用协作协议,并附带 τ²-Bench 等基准上时延、内存访问与质量回收的对比数据。
腾讯混元发布 Hy-Memory-30B-A3B,一个约 3B 激活参数的长期记忆写入模型,用于替代 Mem0、MemOS、Hy-Memory 等外部记忆框架中的通用 LLM,决定保留哪些信息及如何更新记忆库。
推荐理由:原文给出一个 3B 激活参数的记忆写入专用模型,并提供在 Mem0、MemOS、Hy-Memory 与未参与训练的 EverMemOS 上的对比基准,用于评估替代通用 LLM 的写入效果。
AutoSFT 提出一个多智能体系统,将监督微调中的执行、分析与合成分离,自动化完成比例调整、修剪、修复、替换和合成等数据动作。
推荐理由:对比单智能体与多智能体分工在各基准上的提升幅度,能看出执行-分析-合成拆解对 SFT 数据研究自动化的实际收益。
Intern-Decision 提出 0.8B/2B/4B 三种规模的多模态决策模型,通过在完整 assistant JSON 骨架中放置决策占位符的自回归掩码语言建模目标,一次前向返回结构化选项及概率。
Terminal-RSI 提出交替进行递归轨迹自改写(RSR)与策略优化(RPR)的方法,从 Qwen3.8-27B 基础模型出发经 RSR-1、RPR-1、RSR-2、RPR-2 五个阶段得到 Terminal-RSI-27B。
推荐理由:给出了五阶段自改写与策略优化的训练框架,并在 Terminal-Bench 系列基准上提供完整数字,可作为终端 Agent 自训练方法的可迁移参考。
3DCodeVerse 是一个面向 3D 内容生成的研究生态,让编码智能体通过可执行代码产出可编辑且可验证的 3D 内容,包含大规模数据集、多智能体验证框架与系统实验。
推荐理由:把 3D 内容生成统一到可执行代码路径,并配套 2M 数据集与多智能体验证框架,为开放模型的 3D 编码能力提供了可复现的基线。
OpenMOSS-Team 发布 MOSS-Image 技术报告,提出一个 5B 单流 DiT 开源文生图模型,结合意图感知的智能体 Prompt 增强模块,用于生成包含长文本与复杂版式的图像。
推荐理由:原文给出了 5B DiT 的训练配方与两个新评测基准,读者可据此复现或在长文本排版任务上横向对比现有开源模型。
DiscoveryRSI 用多智能体进化搜索和递归学习生成可验证的科学假设,在生命科学四个领域将假设质量从 4.86 提升至 5.39。DiscoveryRSI-27B 在模型截止后新发表论文上的假设对应率为 6.3%,高于 GPT-6 的 2.5% 与 Claude Opus 5 的 2.3%。文章同时给出 DFM-Bench 多维度评估基准与项目主页。
推荐理由:原文用 DFM-Bench 把假设生成拆成可复测的多维度评分,并给出 DiscoveryRSI-27B 与 GPT-6、Claude Opus 5 的对照数据。
Xiaomi-Lens-0 是一个基于 Qwen3.5 构建的 4B 多模态大模型,通过轻量解码器把视觉编码器 patch 特征与语言模型的 mask-token 状态融合。
推荐理由:原文给出从视觉表征直接预测 mask 并监督链式推理中访问区域的具体路线,读者可据此与其他细粒度区域理解方案做对照。
SwarmRSI 用共享图记录每个研究状态(假设、程序、实验证据与未满足需求),并通过反馈引导的集群变异、互补性集群重组与递归集群演化,让后续智能体继承前序中间产物而不仅是最佳分数。
推荐理由:原文把失败与无增益结果也写进共享图,让后续智能体继承的不是分数而是中间产物,可作为多智能体科学发现的工程参考。
SYNC 提出一种词索引接口,让异构大语言模型在不微调、无需翻译器的情况下,通过共享词列表和接收端本地词方向实现选择性事实通信。在 3 个发送端和 9 个来自 5 个家族的接收端测试中,新场景四问答成功率 72.0-98.3%,相对中间层写入最高提升 96 个百分点,两个最大接收端与纯文本通信持平。任务无关探针可在 45/45 案例中预判每个新接收端的可用写入层,无需重调。
推荐理由:提出无需微调或翻译器的跨架构大语言模型事实通信方法 SYNC,仅靠共享词索引和接收端本地方向就能完成选择性事实传递。
该论文在 ALFWorld、ScienceWorld、Search-QA、WebShop 四个环境和三种模型规模下,把十种自蒸馏方法与 GRPO 进行了对照实验,共完成 132 次训练,累计 12,124.4 H800 GPU 小时。
推荐理由:论文用 132 次训练统一对比了十种自蒸馏方法与 GRPO,能让读者看清哪些增益来自方法本身而非实验条件差异。
论文提出记忆巩固框架 Cortex,通过生成前瞻性查询把上下文条件输出蒸馏为低秩或结构化 FFN 更新,使大语言模型在不损失非目标能力的前提下把上下文增益内化为参数。
推荐理由:原文给出把上下文增益内化为参数的记忆巩固方法与连续编辑下的保留数据,读者可据此与现有模型编辑或蒸馏方案对比。
ActionOPD 提出面向智能体的动作级在线蒸馏方法,通过最大化学生在自身状态下的教师动作似然来对齐决策,不要求师生共享 tokenizer,也无需访问教师 token 概率。用两位教师在工具调用任务上训练 Qwen3-4B 和 Qwen3-8B,在四个分布外基准上平均提升 3.3-6.9 个百分点,并在 τ^2-bench 上与离线蒸馏及 token 级 OPD 表现相当。
推荐理由:用动作级对齐替代 token 级蒸馏,使师生不必共享 tokenizer,并通过 Qwen3 系列验证了方法在不同规模学生模型上的稳定收益。
该论文提出一个两轴分析框架来研究多模态智能体的记忆机制:第一轴关注多模态信息的形成与表征,第二轴将记忆管理划分为三级,即 T1 静态记忆、T2 动态记忆和 T3 自演化记忆。基于该框架,作者归纳了若干设计模式,并提出在源保真度与抽象、时间有效性、可恢复证据以及记忆策略演化之间取得平衡的原则,论文最后讨论了多模态智能体记忆机制的未来方向。
推荐理由:论文给出了两轴分析框架与三级记忆管理分类,为评估和设计多模态智能体长期记忆系统提供了可比较的参考坐标。
LensErase 是一个 mask-based Erase Anything 基础模型,覆盖物体、视觉文本、水印、多物体移除及不同尺度、宽高比与分辨率的真实擦除场景。
推荐理由:原文同时发布模型、1.01 亿配对样本数据集和评测基准,可作为图像擦除任务的复现起点。
APT 是一个面向文生图模型的自动化后训练框架,由评估、诊断与数据生成三个智能体协作,根据模型当前能力自适应构建训练任务并形成反馈闭环,无需人工整理数据。在多个基础模型、基准和生成架构上的实验显示 APT 与模型、基准和架构均无关,并支持无指定场景的通用评估。
推荐理由:APT 用评估、诊断和数据生成三个智能体串成反馈闭环,为文生图后训练提供不依赖人工数据的全自动方案,适用多种模型与架构。
研究提出重新分配敏感性分数(RSS),用于识别稀疏自编码器中反复出现且方向一致的特征变化。在8个语言模型的27个预训练SAE上,提示词变换形成了可复现的重新分配特征;研究进一步区分表示变化、读出贡献和决策失败,两项冻结安全读出的复现失败AUROC分别为0.935和0.958。
推荐理由:论文将表示变化与下游失败拆开评估,并给出可在27个预训练SAE上复现的RSS方法,便于理解机制诊断与安全读出评估。
作者提出 Knowledge Transfer Probing(KTP)协议,通过图像生成训练向预训练统一多模态模型(UMM)注入新知识,再用纯文本问答测试其可访问性。
推荐理由:论文提出 KTP 协议可控衡量视觉生成训练带来的知识迁移,给出对齐方法与可访问性差距数据,可供设计多模态训练时参考。
作者提出 LexFrame 方法,通过模型自身剩余层读取隐藏态,在 SmolLM3-3B 和 OLMo3-7B 上分别达到 0.97 与 0.97 的相干性,明显高于固定 lens 0.30 与 0.35 的上限。其读出结果与模型输出相差约 0.16 nats,并能基于置信度实现跳过约 0.45 与 0.42 比例层的早退。
推荐理由:提出用模型自身剩余层读取隐藏态的 LexFrame 方法,把相干性上限从约 0.30 拉到 0.97,并支持跳过近半模型层。
CarryOn 提出一种双循环框架,可在冻结的视觉-语言-动作(VLA)策略之外加入长期个性化规划与执行监督,提升家用机器人辅助的安全性与适应性。在真实机器人和仿真实验中,它把已经过安全微调的 VLA 的违规率从 52.6% 降至 6.1%,并把细化后恢复技能的恢复成功率从 13% 提升到 80%。
推荐理由:给出真实机器人和仿真中的安全违规率与恢复成功率具体数字,可作为 VLA 个性化与可靠性方向的对照参考。
WorldRecon 提出基于 TRELLIS.2 的多视角生成式重建框架,从无位姿 RGB 图像恢复完整的大规模 3D 场景网格。它先由重建模型估计全局点云与相机位姿并分块,再以基于重建的条件架构在每个块上产出 PBR 材质与稀疏结构,并通过邻域感知潜在补全与因果生成在块间传播结构、几何与材质信息。
推荐理由:基于 TRELLIS.2 的多视角生成式重建给出了室内场景的具体提升幅度,便于与现有 3D 重建方法横向比较。
GreenWAM 提出一个跨 20 种机器人形态的共用关节动作空间,通过联合训练让同一模型同时承担世界模型和策略两个角色。它在 WorldArena 1.0 轨迹、深度和 3D 预测上领先,在 RoboTwin 2.0 进入前列,并在 LIBERO-plus 取得对比方法中最高的零样本成功率;适配到真实人形机器人后表现优于基于 π₀.₅ 和 Cosmos 3 Edge 的策略。
推荐理由:论文给出统一世界模型在20种机器人形态上的联合训练和评测结果,便于对比它与专用策略在不同任务上的差距。
AesCode 论文提出以设计图为表示、用参考图像做美学引导的视觉化代码生成框架,结合确定性验证器与 VLM 评判的解耦跨模态奖励,通过带逐通道归一化的强化学习联合优化布局、美学与可验证正确性。
推荐理由:原文给出设计图驱动的解耦跨模态奖励方案及相对 Qwen3-VL 的具体提升幅度,可作为视觉化代码生成方向的方法参考。
BizBench 是一项多轮长链路业务 Agent 评测基准,基于一家头部支付公司的真实流程构建,包含 789 份知识文档和 601 个可发现工具,共 50 个任务,覆盖资源约束、时间依赖、过往承诺与冲突或过期指引等场景。
推荐理由:BizBench对比前沿模型在真实业务流程中的严格合规执行表现,揭示仅看最终结果会掩盖中间过程的违规。