跳到正文
10月28日周三
  1. HF Daily Papers54

    论文提出 EvidenceConnect,以合成证据连接数据提升 Zooming without Zooming v2 的多模态感知泛化能力

    论文提出 EvidenceConnect,通过同一图像相关区域的缩放视图合成问题,并用 RLVR 训练出 Zooming without Zooming v2(ZwZ2)。框架仅保留多个独立 VLM 达成一致的参考答案,并通过区域消融剔除移除相关区域后答案仍成立的问题。ZwZ2 改善了细粒度与空间感知,并在具身空间推理、多模态长上下文理解、多模态智能体任务和通用视觉推理上获得进一步提升。

    推荐理由:论文把证据连接抽象为可合成能力,并用独立 VLM 一致性与区域消融筛选训练数据,给出可复用的多模态训练流程。

  2. HF Daily Papers49

    VibeVideoBench:评测多模态智能体的代码驱动视频生成能力

    VibeVideoBench 提出一个评测多模态智能体代码驱动视频生成能力的基准,包含239项中英文自包含任务和12个类别。每项任务要求智能体在无图像或视频生成模型的沙箱内用代码产出带声音的 MP4,并在1小时内完成;评估结合交付规范程序检查、约13k项任务量规和3个VLM评审组。

    推荐理由:该基准覆盖239项中英文任务,并用分层量规与人类偏好对照,揭示智能体常因时间管理影响最终视频交付。

  3. HF Daily Papers38

    PDRVLA:融合物理动力学表征的视觉语言动作模型

    PDRVLA 将轻量物理动态模块引入视觉语言动作模型,通过预测未来视觉特征改善机器人动作生成,并避免在线视频生成延迟。该模块直接预测未来的 RGB、深度和光流特征,并用冻结的预训练视频世界模型进行辅助监督。

    推荐理由:论文将轻量物理动态预测接入视觉语言动作模型,并通过消融实验分析世界模型监督、子任务条件化与 ECoT 训练对动作成功率的影响。

  4. HF Daily Papers50

    CodeCap-Bench 论文提出以代码作为视频字幕的评测基准

    CodeCap-Bench 论文提出以可执行代码作为视频内容的补充表示,并推出评测多模态模型代码字幕生成能力的基准。该基准包含323个视频、五类结构化2D内容、细粒度标注和多层级评测框架。实验显示,代码字幕在问答推理准确率和视频重建保真度上优于自然语言字幕,但领先专有模型仍难以忠实呈现复杂时序,开源模型明显落后。

    推荐理由:论文用323个视频和五类结构化2D内容构建基准,并同时比较问答与视频重建结果,便于比较模型在复杂时序描述上的差异。

  5. HF Daily Papers55

    Hy-Nomas:面向自由形式交互式世界生成的视频世界模型

    Hy-Nomas 提出一种采用 8B 扩散骨干的视频世界模型,可依据多轮自由文本指令和连续镜头控制生成可变长度片段。模型结合结构化视频描述与动作感知因果注意力,在保留交互历史和动作后果的同时限制动作的作用窗口;视觉语言 Prompt Enhancer(PE)会将用户请求和多模态交互历史转换为下一片段的结构化条件。论文还公开模型权重、代码、基准和轻量适配流程,人工评测显示其表现优于现有世界模型。

    推荐理由:论文将多轮指令、历史缓存和动作时间窗约束整合进 8B 扩散骨干的视频世界模型,并公开代码与基准,为复现交互式生成研究提供技术路径。

  6. 钛媒体41

    元保入选2026巴伦中国价值榜单,AI应用推动保险中介价值重估

    元保集团近日入选2026巴伦中国价值榜单“中国行业先锋30强”,其AI应用已覆盖售前咨询、保单查询和售后理赔等十余类场景。截至2026年二季度末,其消费者全周期服务引擎拥有5100余个模型,可分析5900余个标签;智能客服采用RAG,医疗险理赔材料分类准确率为95%,关键字段提取平均准确率约为94%。

    推荐理由:文章拆解了元保以RAG和多模态模型改造咨询、理赔流程的路径,并给出准确率与结案时长数据,便于对照保险中介的AI转型成效。

  7. 钛媒体63

    生成式 AI 涌入中国广告信息流,巨量引擎与小红书转向 AI 审核

    生成式 AI 让 15 秒广告视频制作成本降至接近一顿午餐钱,巨量引擎与小红书正以多模态模型和智能体式审核应对批量合成广告。巨量引擎称拦截能力已提升一个数量级,并计划约一年内让 AI 成为默认审核层,规则按月更新。平台还用生成式工具解释拒审原因、提供一键修复和规则说明,以降低广告主反复提交与申诉的成本。

    推荐理由:文章把低成本生成与规模化审核放在同一框架下,展示多模态识别、智能体式审核和拒审修复如何应对合成广告。

  8. 36氪71

    8点1氪:iPhone Duo内屏开裂可免费换机,A股仅剩贵州茅台一只千元股,外交部回应姆巴佩遭多品牌解约

    36氪“8点1氪”在10月28日汇总iPhone Duo内屏开裂免费换机、A股千元股变化、姆巴佩代言解约回应及多项AI进展。OpenAI发布GPT-6.1 Terra,提升视觉推理与计算机操作,标准API价格较GPT-5.6 Terra和GPT-6.1 Sol低50%;Google DeepMind以研究预览形式发布Genie 4,支持提示改变场景并生成匹配模拟世界的实时音频。

    推荐理由:将iPhone Duo换机、A股千元股变化、姆巴佩代言解约及多家公司的AI模型进展并排整理,便于对照消费、资本市场和模型发布三类信号。

  9. 36氪65

    Google DeepMind 以研究预览形式发布 Genie 4,新增实时音频与提示操控

    Google DeepMind 于周二以研究预览形式发布世界模型 Genie 4,支持用户用提示改变模拟场景,并生成与模拟世界匹配的实时音频。音频涵盖音乐、环境噪音和互动对话,该模型可生成逼真且具有互动性的世界。数月前,Runway 发布了可玩、动态响应用户输入并包含音频生成的 GWM Worlds 2。

    同一件事,精选收录的是《Google DeepMind 发布 Genie 4 多模态世界模型》

  10. The Decoder63

    Google DeepMind 发布 Genie 4 实时世界模型,仅向部分测试者开放

    Google DeepMind 发布 Genie 4 实时世界模型,通过逐帧计算生成可交互场景,并直接生成环境声音与角色对话。Gemini 3.8 Flash 在后台拆解目标、依据新帧检查步骤并调整计划,Gemini 4 Argon 则被测试用于连接 Gemini Robotics,以纯模拟演示 Apptronik 的 Apollo 人形机器人下棋。

    同一件事,精选收录的是《Google DeepMind 发布 Genie 4 多模态世界模型》

  11. Ars Technica · AI60

    Pinal 用自然语言设计蛋白质,Carbon X 实现 DNA 与英文互译

    研究团队推出 Pinal,用自然语言生成蛋白质设计;Hugging Face 等团队发布开放权重模型 Carbon X,可在本地运行并处理 DNA 与英文。Pinal 通过 T2struct 生成结构 token,再由 SAProt-T 补全氨基酸序列;在 GFP 类荧光蛋白测试中,50,000 个候选经筛选后有 29 个在 E. coli 中表达,最终仅 1 个成功发光。

    推荐理由:Pinal 与 Carbon X 展示了自然语言进入生物序列设计的不同路径,并用实验成功率、长序列定位和本地运行条件呈现落地限制。

  12. Hugging Face Blog77

    Liquid AI 发布 LFM3 多模态模型家族,六款 2B 级模型共享骨干

    Liquid AI 发布 LFM3 模型家族,六款 2B 级模型共享 LFM3-1.7B-Base 骨干,覆盖文本、视觉、音频、全模态和结构化决策。LFM3-1.7B 比 LFM2.5-2.6B 少 35% 参数,文本模型在 4-bit 精度下约占 1 GB并支持 256K 上下文;LFM3-Omni-2B 可接收文本、图像、视频和音频并输出文本或语音。

    推荐理由:LFM3 以同一 2B 级骨干衍生六款文本、视觉、音频、全模态与决策模型,并给出单 GPU 微调和端侧部署路径,便于评估小模型专业化方案。

  13. HF Daily Papers42

    A-RSI:通过自适应任务刷新实现零数据多模态自我改进

    A-RSI 在学习信号下降时刷新训练任务,并用由程序生成且可独立验证的答案提升模型的递归自我改进效果。方法依据训练日志中的奖励波动与准确率更新任务池,不参考验证集或测试集成绩,也不使用外部训练样本或人工答案标签。在主要十一项基准测试套件中,加入 800 个新任务后,性能平均值从 57.77 提升至 61.05。

    推荐理由:论文将任务刷新与答案验证拆分,依据训练日志更新任务池,展示了无外部标签的多模态自我改进方法及基准结果。

  14. HF Daily Papers47

    AskStream 基准:流式视频理解在不确定性下何时主动提问、问什么

    研究团队提出 AskStream 多轮基准,用于评估流式视频理解模型在不确定性下主动询问缺失信息的能力。该基准覆盖视频和用户两类不确定性,包含 4 类任务、8 个子任务、438 个视频及 2,714 个人工标注的帧级时间窗口,动作分为等待、提问和回答。在选择题和开放式设置中,最强模型的 Ask-F1 也仅为 52.18%,反映出模型主动寻求信息能力的局限。

    推荐理由:AskStream 将流式视频交互拆分为等待、提问和回答三类动作,并用多轮数据呈现模型主动补全信息的关键难点。

  15. HF Daily Papers49

    IntReal 提出真实场景多模态交错生成数据集与评测基准

    IntReal 提出面向真实场景的多模态交错生成数据集与评测套件,用于诊断统一多模态模型的能力差异。IntReal-100K 覆盖四大类交错样本,IntReal Evaluation Suite 通过专家模型从七个维度进行粗到细评估。

    推荐理由:IntReal 以细粒度指标定位统一多模态模型在不同能力维度的强弱项,配套数据可用于针对性后训练与改进交错生成。

  16. 面壁 MiniCPM51

    面壁发布 MiniCPM-OCR Jev 的 GPTQ W4A16 量化版

    面壁发布 MiniCPM-OCR Jev 的 GPTQ W4A16 量化版,将权重体积从约 4.43 GB 降至约 2.41 GB。该 2B 模型接收区域图像和候选 OCR 结果,输出 0 至 1 的正确性评分,可用于自动筛选、人工复核和多 OCR 结果择优。

    推荐理由:材料给出量化前后的权重体积、跨模型 AUROC 对比和部署入口,读者可据此评估 OCR 质量筛选的精度与资源取舍。

  17. 面壁 MiniCPM48

    面壁 MiniCPM-OCR Jev 2B 提供 llama.cpp GGUF 量化构建

    MiniCPM-OCR Jev 2B 在 Hugging Face 提供面向 llama.cpp 的 GGUF 构建,可对文本、公式和表格区域评分并返回 0 到 1 的质量分数。仓库提供多个量化文件,Q4_K_M 是 1.274 GB 的最小推荐版本,IQ3_XS 为 1.027 GB;另附 llama-server 启动示例,ctx-size 设为 40960。

    推荐理由:原文列出多种 GGUF 量化版本、文件体积与 llama.cpp 启动参数,便于部署者按资源条件选择构建并配置服务。

  18. The Verge · AI57

    Google 发布 Genie 4 世界模型,支持实时提示词修改和音频生成

    Google 发布 Genie 4 世界模型,用于通过 AI 生成交互式体验,支持用自然语言提示词实时修改场景并生成音频。模型以 Gemini 3.8 Flash 驱动模拟,单次可生成约 2 分钟体验,长于 Genie 3 的 1 分钟。

    同一件事,精选收录的是《Google DeepMind 发布 Genie 4 多模态世界模型》

  19. TechCrunch76

    Google DeepMind 发布 Genie 4 世界模型,支持实时音频和模拟中交互控制

    Google DeepMind 以研究预览形式发布 Genie 4 世界模型,可生成与模拟场景匹配的实时音频,并允许用户在模拟过程中输入提示改变场景。Genie 4 可保持场景最长 2 分钟,是 Genie 3 的 2 倍,并支持实时修改天气、镜头角度以及新增人物或物体。

    同一件事,精选收录的是《Google DeepMind 发布 Genie 4 多模态世界模型》

  20. Google DeepMind72

    Google DeepMind 发布 Genie 4 多模态世界模型

    Google DeepMind 发布 Genie 4 世界模型,可实时生成视觉、动态交互与原生音频,并通过 Gemini 理解提示、维持场景连贯性。Gemini 3.8 Flash 作为引导智能体分解目标、检查画面并动态调整计划,支持多步骤事件与因果行为模拟。

    推荐理由:官方披露了 Genie 4 的实时交互、原生音频与 Gemini 引导机制,并明确列出预览范围和当前局限,便于评估其可用边界。

10月27日周二
  1. 钛媒体75

    AI短剧流水线从业者讲述爽点模板、生产成本与平台分成变化

    AI 短剧已把短剧生产改造成按爽点模板批量写作、生成与剪辑的流水线,受访从业者则靠大模型工具完成高频交付。编剧阿松用 DeepSeek 和豆包写稿,每月完成四部剧的剧本量;剪辑师乐乐用即梦生成动画、剪映剪辑,阿松底薪 8000 元,乐乐月薪 5000 元且常加班。

    推荐理由:文章通过培训师、编剧和剪辑师的一线讲述,拆解 AI 短剧的爽点模板、生产成本、平台分成变化与从业者处境。

  2. 量子位63

    SoMark 开源 OXR 1.3B 文档解析模型,三项基准第一且完整解析快于 PaddleOCR-VL-1.6、MinerU2.5-Pro

    SoMark 团队正式开源 OXR 文档解析模型,主模型仅 1.3B 参数,在 OmniDocBench、olmOCR-Bench 和 DocParsingBench 上分别取得 97.18、87.84、87.76 分,均居团队公布评测的第一。

    推荐理由:三项基准与同条件速度测试并置,读者可据此评估 OXR 的解析精度、速度表现及与对照产品的相对位置。

  3. 量子位74

    百度文心 Unlimited OCR 2 发布并开源,峰值 KV Cache 占用从 47GB 降至 1.77GB

    百度文心 Unlimited OCR 2 正式发布并开源,百页级单序列测试中的峰值 KV Cache 占用从 47GB 降至 1.77GB,减少约96%。SR-SWA按需筛选相关页面和视觉信息,无限解码机制通过分块处理、复用边界页缓存并及时释放其余缓存;16路并发端到端吞吐量从360提升至1315 Token/秒,约为标准解码的3.65倍。

    推荐理由:文章通过整本书实测与技术报告,拆解SR-SWA和分块解码的降缓存机制,并对比吞吐量、速度与文档解析质量。

  4. HF Daily Papers41

    StreamVibe:面向持续变化用户意图的主动视频智能体

    StreamVibe 提出面向主动视频交互的研究方案,包含基准、流式视觉语言模型和分层记忆框架,用于理解显式、隐式及持续变化的用户意图。StreamVibe-Bench 包含 4.1K 个评测样本和 85K 个训练样本,覆盖显式、隐式和动态意图。

    推荐理由:论文将基准、流式模型与分层记忆框架整合为一套主动视频交互方案,并报告响应时机、答案质量和持续适应方面的量化结果。

  5. Simon Willison69

    OpenAI 发布 GPT-6.1 Terra,强化视觉推理与电脑操作

    OpenAI 发布 GPT-6.1 Terra,这是一款强调视觉推理、精确电脑操作和清晰自然写作的快速高效模型。它面向提案起草、技术图纸理解、表单填写和视频编辑等日常工作,相比 GPT-5.6 Terra 有显著提升。

    同一件事,精选收录的是《OpenAI 发布 GPT-6.1 Terra,API 价格降至 GPT-5.6 Terra 的一半》

  6. HF Daily Papers52

    LOWN:仅在需要时处理图像,面向扩散视觉语言模型高效解码的证书引导视觉路由

    论文提出 LOWN 解码方法,在无图像预测与上一次图像条件预测一致时跳过图像处理,并用经认证的 token 数量决定该步解掩码数量。该方法无需训练或调节阈值,在 10 个基准上保留 LLaDA-V 得分的 99.6%,平均使用 35.3% 的解码 FLOPs。

    推荐理由:论文量化了扩散视觉语言模型重复处理图像的开销,并用证书引导路由在无需训练和阈值调节的条件下削减解码计算。

  7. HF Daily Papers55

    Venus-DefakerOne2:覆盖更广伪造形式与媒体类型的视觉取证基础模型

    论文提出 Venus-DefakerOne2 统一反伪造基础模型,通过交替 LoRA 与全参数微调、基于熵的测试适配,扩展对多种伪造形式和媒体类型的检测。

    推荐理由:交替 LoRA 与全参数微调结合熵驱动测试适配,为跨图像、视频和物理欺骗的统一取证提供了可复用设计。

10月26日周一
  1. 36氪37

    Acrab 与端脑科技达成战略合作,推进 AI NPC 端侧落地

    端脑科技与 Acrab 近日达成战略合作,双方将协同推进 AI NPC 在个人终端场景落地。端脑科技提供 AI NPC 一体机、智能体软件和终端落地经验,Acrab 提供 AI 芯片、操作系统及工具链。合作重点包括平台适配、硬件集成、多模态模型与 AI 智能体运行优化,以打通从底层芯片到终端应用的完整链路。

    推荐理由:双方覆盖 AI 芯片、操作系统、智能体软件到终端集成的协作链条,呈现端侧 AI 落地中的生态分工。

  2. 量子位47

    OpenAI 与 Gemini 共同选择的实时语音交互,为什么是声网?

    声网在 iRTE2026 展示了生成式 AI 的实时交互基础设施,覆盖模型协作、全双工语音、实时网络、音频处理、工具调用与推理。Agora Conversational Model 组合声音感知、推理、工具、记忆与语音表达,Conversational Agent System 将其与全球实时网络、音频处理及推理基础设施结合。

    推荐理由:文章沿着模型、网络、音频和终端梳理实时语音交互链路,便于理解声网多模型协作方案与配套工具如何落地。

  3. 量子位75

    港科大、CMU与岩山科技开源EdgeRock-4B,KV Cache减少99.1%且单卡吞吐达源模型6.42倍

    岩山科技旗下岩芯矩阵与港科大、CMU联合发布并开源EdgeRock-4B,256K上下文下KV Cache固定为72MiB,较源模型减少99.1%。在单张Hopper 80GB GPU、32K输入和32K输出下,模型支持512路并发,输出吞吐12124 tokens/s,是Qwen3.5-4B的6.42倍。

    推荐理由:文章拆解了EdgeRock-4B以RMA固定KV Cache的机制,并对照Qwen3.5-4B及有界状态模型的吞吐、内存与推理表现。

  4. 36氪39

    模感科技完成亿元级天使+轮融资

    模感科技近日完成亿元级天使+轮融资,鼎晖投资、绿洲资本领投,逐际动力、龙芯创投、中科创星、华山资本、浦东创投及某国内具身厂商跟投。这家全身多模态融合触觉解决方案公司由后浪资本担任长期独家财务顾问,此前红杉中国、高瓴创投及智元机器人等已参与天使轮融资。

    同一件事,精选收录的是《模感科技完成亿元级天使+轮融资,聚焦人形机器人全身触觉方案》

  5. 36氪60

    Vivix 公开实时交互模型 W1 和 A1,聚焦游戏与直播

    Vivix 公开实时交互模型 W1 和 A1,分别面向理解、交互、生成一体化与角色交互场景。W1 在交互场景中生成下一帧画面需 300-600 毫秒,实时生成成本接近 YouTube 每小时约 0.2 美金的 CDN 带宽成本,比当前头部视频生成模型低 1-2 个数量级。

    推荐理由:文章用 300-600 毫秒首帧时间及相对头部视频模型低 1-2 个数量级的成本,解释 Vivix 的实时交互路线。

  6. HF Daily Papers59

    Co-Design Bench:面向智能体模型的多模态协作编码评测

    Co-Design Bench 以真实用户的多模态应用修改需求构建智能体编码评测,包含 273 项任务和 2,331 条专家验收标准。任务分为 Multimodal Editing(100 项)和 Repository Editing(173 项),并采用无参考答案的 judge-then-refute 协议评估隐藏验收标准。

    推荐理由:该基准同时报告验收标准通过率与整项任务完整交付率,呈现局部达标与端到端完成之间的显著差异。

  7. HF Daily Papers49

    VMem-Bench 受控研究:长视频生成中的视觉记忆越多越好吗?

    VMem-Bench 受控研究发现,检索视觉记忆能提升长视频的历史一致性,却会降低当前叙事准确性。研究以 92 部真实影片的 16,548 个片段和 30 个因果生成故事的 2,824 个片段开展双轨诊断,比较四种检索策略及无记忆、末次出现对照。

    推荐理由:双轨对照显示,检索视觉记忆虽提升实体召回与历史相似度,却降低当前叙事精度和对禁用实体的规避能力,揭示记忆评估中的关键混淆。

  8. HF Daily Papers56

    Omni-InteractScope:持续全模态流中主动与智能体交互基准评测

    Omni-InteractScope 通过1,479条人工标注且交叉审阅的交互、1,790个时序目标和八类任务,评测 Omni-LLMs 在持续全模态流中的主动与智能体交互可靠性。

    推荐理由:该基准以1,479条人工标注交互和1,790个时序目标检验持续多模态交互,量化 Omni-LLMs 在工具调用、主动提醒和持续指导上的短板。