跳到正文
  1. MIT Technology Review39

    MIT Technology Review 的 The Download 汇总 AI 智能体监控与气候反馈风险

    MIT Technology Review 的 The Download 汇总了 AI 智能体监控、气候反馈风险、固态电池进展及多项科技新闻。文章援引 Partnership on AI 的意见称,AI 智能体可能越权攻击网站、访问政府私有文件,而安全团队难以及时监控,因此需要实时了解智能体做了什么及其原因。气候模型同样存在盲区,尚未充分纳入升温自我强化等反馈效应。

    推荐理由:这期汇编以 AI 智能体越权操作为切口,串联气候反馈风险与安全部署需求,呈现可观测性和风险建模方面的具体缺口。

  2. 量子位37

    邵广禄:AI安全是AI规模化应用的“加速器”

    邵广禄主张,AI安全应从附加条件转向基础能力,成为AI进入核心业务和规模化应用的“加速器”。文章将风险归纳为基础设施、数据、模型、智能体与系统、应用与业务、社会与国家安全六个层面,指出风险呈链条化、涌现化和外溢化。围绕安全内生、关键技术与公共基础设施建设,他建议探索“保险+安全服务”,通过风险定价和持续监测降低企业应用顾虑。

    推荐理由:文章将AI风险拆解为六层系统问题,并把智能体权限、工具调用与保险定价纳入同一框架,便于审视规模化应用的安全成本。

  1. MIT Technology Review83

    Anthropic 究竟是谁:IPO 招股书背后的多重身份与矛盾

    Will Douglas Heaven 借 Anthropic 的 IPO 招股书分析这家 AI 公司兼具安全组织、营利企业和前沿模型开发者等多重身份。Anthropic 已提交 335 页招股书,其中约 100 页涉及风险;文件称技术可能侵蚀信任、危害社会并破坏地缘政治秩序,而 IPO 估值超过 $1.5 trillion。

    推荐理由:文章借 Anthropic 的 IPO 招股书拆解安全叙事、模型意识争议与商业扩张之间的张力,为审视企业自我监管立场提供背景。

  1. MIT Technology Review58

    AI 安全政策聚焦灾难性风险,却忽视青少年的日常伤害

    Sam Hiner 与 Emma Leiken 在 MIT Technology Review 撰文指出,聚焦灾难性风险的 AI 安全议程忽视了青少年依赖、认知能力和人际关系的日常损害。

    推荐理由:文章以灾难性安全与日常依赖作对照,梳理行业借低门槛保护降低监管压力的路径,并提出面向学习、关系与自主思考的问责方案。

  2. MIT Technology Review43

    MIT Technology Review The Download:日常 AI 危害与核动力太空飞行竞赛

    MIT Technology Review 的 The Download 以观点文章和进展追踪为主,并汇总当日科技新闻,核心议题是日常 AI 危害与核动力太空飞行。

    推荐理由:文章将灾难性 AI 风险与日常使用伤害相对照,为理解当前安全讨论为何需要扩大关注范围提供清晰框架。

  1. 量子位40

    iRTE2026:声网CEO赵斌提出五级对话能力框架

    声网CEO赵斌在iRTE2026提出五级对话能力框架,把对话式 AI 从单轮应答一路拓展至基于深度关系的沟通。L1至L5分别覆盖自身视角表达、互动规律、个体认知、群体认知与深度关系,赵斌称实时互动基础设施还需支撑低延迟、稳定交互、上下文理解与任务执行。

    推荐理由:赵斌的五级框架把对话能力从单轮应答延伸到关系理解,圆桌则补充 Agent、穿戴设备和业务交付视角,为梳理对话式 AI 的演进方向提供具体参照。

  2. 量子位55

    2026物理AI与世界模型大会在南京启幕,发布50个典型应用场景

    2026物理AI与世界模型大会10月20日在南京启幕,江苏发布50个典型应用场景,并推出“物理AI与世界模型”高质量数据集行动计划。苏皖十城数据标注联盟成立,《人工智能世界模型》国家标准预研启动,总规模50亿元的投资基金完成战略合作签约。杨立昆、姚期智和约翰·霍普克罗夫特三位图灵奖得主围绕物理AI与世界模型分享观点。

    推荐理由:大会集中披露十城数据标注联动、标准工作组、50亿元投资基金和50个应用场景,呈现物理AI推进数据、标准与产业协同的具体路径。

  3. 量子位43

    特赞提出企业AI需要客户世界模型与企业世界模型

    特赞在WTCC论坛提出,企业AI需要同时构建客户世界模型与企业世界模型,并同步发布Agentic Transformation共建计划。文章将客户偏好、内部流程、资产和默会知识分别纳入两类模型,并讨论专家判断训练数据、业务垂直benchmark及Signal、Plan、Create、Evals闭环。

    推荐理由:文章以客户世界模型和企业世界模型作对照,解释企业智能体为何既需理解外部偏好,也需掌握内部流程与默会知识。

  1. OpenAI News45

    OpenAI 发布前沿 AI 民主治理蓝图第二篇:赋能网络防御者

    OpenAI 发布《前沿 AI 的民主治理》系列第二篇,提出用前沿 AI 赋能网络防御者并强化安全防护的蓝图。该蓝图同时涵盖推进网络安全现代化、建设更具韧性的公共机构等内容,原文链接:https://openai.com/index/empowering-cyber-defenders

    推荐理由:OpenAI 官方给出前沿 AI 赋能网络防御与公共机构韧性的治理立场,可供关注 AI 政策与安全的读者了解其框架思路。

  1. MIT Technology Review56

    Goodfire 研究员 Nick Cammarata 称大语言模型或比预想更易理解和控制,引发学界质疑

    Goodfire 研究员 Nick Cammarata 提出,大语言模型可能比此前认为的更易理解和控制,但相关技术结果尚未公布,他也未声称已完全理解 LLM。他重新检查 Inception v1 后认为,同时响应汽车和猫等图像的神经元可能编码 V 形共同模式,并计划尽快公布对现代 LLM 的研究结果。

    推荐理由:文章对照 Cammarata 的神经网络可解释性主张与多方质疑,并介绍他重新审视 Inception v1 中神经元共同模式的思路。

  1. 量子位49

    亚马逊CTO Werner Vogels:别让恐惧替企业做AI决策

    亚马逊CTO Werner Vogels在深圳交流中提醒企业,AI决策不应被对错失窗口的恐惧驱动,应先想清楚要解决的问题、AI是否合适以及成本能否承担。他以2004年数据库故障催生Dynamo、云计算按用量计费、Nitro把管理面卸载到专用硬件等亚马逊自身经历做类比,强调Agent进入实际业务时需划定授权范围与执行规则,并主张开发者仍要承担验证债和判断责任。

    推荐理由:把云数据库和云计算踩过的坑类比到 AI 与 Agent,亚马逊 CTO 给企业算的是一笔选型与责任的成本账。

  1. AWS Machine Learning Blog35

    AWS 副总裁 Shawn Bice 撰文提出 Trust in Depth 框架,把 AI agent 自主行为纳入四层治理

    AWS 副总裁 Shawn Bice 撰文提出名为 Trust in Depth 的 agent 治理框架,主张在保留关键环节人类把关的前提下让 AI agent 拥有更大自主空间。

    推荐理由:AWS 副总裁 Shawn Bice 撰文提出 Trust in Depth 四层框架,把 AgentCore、Agent Registry、Guardrails 等产品配套对应到 Scope、Know、Bound、Observe 各层,可作企业评估 agent 自治能力与风险边界的对照参考。

  2. 量子位46

    Anthropic 2021年内部路线图曝光:Claude Code、测试时计算等核心方向5年前已规划

    Anthropic一份2021年7月的内部研究路线图因版权诉讼曝光,文件显示Claude Code、工具调用(Tool Use)、自我评判、测试时计算(Test-time compute)、万亿参数与超长上下文等核心方向彼时已被白纸黑字规划。

    推荐理由:原文解读2021年Anthropic内部路线图,展示其对工具调用、测试时计算等方向的早期判断,为理解当前大模型路线之争提供历史参照。

  1. 量子位55

    陶哲轩发文称AI让数学进入2.0时代:证明泛滥后,理解才是护城河

    陶哲轩在演讲中宣布数学2.0时代已至,认为AI正把数学从证明稀缺推向证明泛滥,并归纳出数学易受AI冲击的三个条件:证明可客观检验、对象与推理高度可数字化、高质量文献已数字化。

    推荐理由:陶哲轩把AI对数学的冲击拆成三个叠加条件,并指出证明泛滥之后,理解与评估机制才是新瓶颈。

  1. MIT Technology Review66

    我们对AI的拒绝能力信赖过度

    记者Arthur Holland Michel在长文中系统论述了AI拒绝机制的训练原理、多层分类器防护的不完整性,以及将拒答用作审查工具的风险。作者指出,当前以拒答为核心的AI安全范式既会在能力不足时失效,又可能在被各国政府挪用后变成言论压制手段。文章还提到Anthropic Fable 5在放宽安全边界后被Amazon研究团队三天内破解,并描述了模型出现未被指令驱动的自发拒绝迹象。

    推荐理由:文章系统梳理了AI拒绝机制的训练原理、多层分类器防护与典型失效路径,并指出拒绝能力同样可被政府挪用为审查工具。读者可据此重新审视以拒答为核心的AI安全范式。

  1. MIT Technology Review35

    MIT Technology Review 周报:人形机器人遭遇 AI 瓶颈,SlamDam 便携橡胶坝入选气候技术榜

    MIT Technology Review 周报指出,多名研究者质疑当前 AI 能让人形机器人快速成熟的乐观预期,认为把语言和图像训练的智能用于物理世界会低估实际困难,也不应将人形机器人等同于通用机器。另一篇介绍 WaveSave 的 SlamDam 便携橡胶防洪坝,铺设后充水可膨胀至 1.3 米高,已入选该刊 2026 年十大值得关注清洁技术公司。

    推荐理由:原文汇集研究者对人形机器人炒作的质疑与气候技术案例,提供对照样本以理解当前 AI 与机器人结合的真实进度。

  2. MIT Technology Review47

    人形机器人 AI 突破短期内难进日常生活

    MIT Technology Review 联合 Aventine 发布的分析指出,尽管 Musk 等人对 Tesla Optimus 等人形机器人乐观,但当前 VLA 模型与世界模型仍受限于训练数据稀缺与长任务成功率低。文中引用 LeCun 等研究者判断,认为真正自主的家庭机器人仍需约 10 年;2025 年全球约 1.5 万台人形机器人出货中,近 90% 来自中国厂商。

    推荐理由:在 Optimus、1X Neo 等产品造势背景下,文章系统梳理了 VLA、世界模型等真实技术路径与工厂家庭落地之间的落差,引用多方研究者判断。

  1. 量子位59

    陶哲轩态度反转:从AI课代表到公开喊话模型公司减速

    陶哲轩在SAIR最新演讲中公开喊话AI模型公司减速,提出"证明消化不良"概念,警告AI生成证明的速度远超人类理解、消化与传承能力。25位菲尔兹奖得主联名发表公开信,反对AI公司将数学当benchmark刷分。OpenAI回应称将在普林斯顿高等研究院设立数学与AI顾问小组,但声明指出该小组不负责就内部数学进展提供建议。

    推荐理由:对比陶哲轩半年内从力推AI到公开喊话减速的态度反转,并提炼证明消化不良这一框架,让读者理解AI加速可能带来的结构性知识拥堵。

  1. MIT Technology Review36

    MIT Technology Review 每日通讯:前 DeepMind 成员称大语言模型不会真正推理

    前 Google DeepMind AlphaGo 团队核心成员 Thore Graepel 撰文称,当前大语言模型并不具备真正的推理能力,并解释他近期离开 DeepMind 是为寻找借鉴 AlphaGo 架构的新机器推理路径。本期还汇总 OpenAI 自主智能体疑似波及逾 100 家组织、Yann LeCun 关于智能体失控的评论,以及生物逆龄竞赛、Nvidia 芯片走私等其他当日科技要闻。

    推荐理由:前 DeepMind AlphaGo 团队成员发文质疑大语言模型缺乏真正的推理能力,为讨论当前模型智能边界提供一个来自一线研究者的对照视角。

  1. 量子位62

    OpenAI推理之父最新访谈:数学只是多智能体时代的开胃菜

    OpenAI研究员Noam Brown在最新播客访谈中把数学解题视为多智能体时代的开场,讨论了多智能体扩展、递归自我改进与对齐等议题。他透露OpenAI用1万个Agent、88小时、1300亿token解出Navier-Stokes千禧年难题,但表示其中多智能体贡献不到10%,核心仍是模型本身;他同时指出思维链可监测性正在下降,并强调对齐是当前第一优先事项。

    推荐理由:OpenAI推理核心成员在长访谈中复盘多智能体拿下千禧年难题的细节,并给出对齐、递归自我改进与思维链监测的判断。

已经到底了