跳到正文

日期栏展示收录日期,历史补录归入原文日期。

今天10月15日周四2 条
  1. METR Blog30

    原文发布

    评估者如何调查内部 AI 智能体的控制与监控

    METR 提出评估者可从五个核心子问题入手,收集 AI 开发者内部智能体监控可靠性的证据:监控覆盖率、监控系统漏洞、监控规避、含人工规避的响应处置,以及未被发现的最严重不当行为影响。评估重点是基于 LLM 的智能体监控,因为智能体权限往往很宽,需要理解上下文才能判断行为是否有害。评估者需访问推理日志、监控日志和关键路径代码,并通过红队测试检验智能体能否关闭监控、篡改轨迹或发动供应链攻击。

  2. Apple Machine Learning Research22

    原文发布

    通过语音基础模型中的语言选择性维度进行语码转换检测

    研究提出一种直接从语音中检测语码转换的轻量方法,利用预训练语音编码器帧级语言信息判断一句话中是否同时出现两种语言。在 CS-FLEURS 的 14 个语言对上,Whisper-small 编码器平均 F1 达 0.798,高于 CNN 的 0.776 和 HuBERT 线性基线的 0.751。结果表明预训练语音编码器已编码识别语码转换所需信息,可用于构建更具代表性的多语种语料。

10月14日周三
  1. MIT News · AI66

    研究人员改进两到六周后的天气预报

    MIT 等机构的研究团队开发出一种机器学习后处理层,通过学习历史数据修正现有预报模型的误差,将两到六周(次季节)预报的准确率提升一倍,并在 ECMWF 的预报竞赛中夺得第一。该成果发表在 Nature 上,首次让这一时间尺度的预报优于气候学平均值,同时显著提升了对极端天气的预测能力。模型为开源、低成本的外挂式 wrapper,可叠加到任意预报模型上,肯尼亚气象部门已联系希望用于改进季风预报。

    推荐理由:MIT 团队用后处理层修正现有预报模型误差,把 2 至 6 周预报精度提升一倍,并给出开源低成本路径。

  2. Apple Machine Learning Research30

    三模态掩码扩散模型的设计空间

    Apple 团队首次从头预训练三模态掩码扩散模型(MDM),同时处理文本、图文和音频-文本数据,并系统分析多模态缩放规律、模态混合比例与噪声调度。其批次大小分析提出基于 SDE 的重参数化,将物理批次与逻辑批次解耦,免去最优批次调参。团队预训练出 3B 规模(6.4T tokens)初步模型,在文本生成、T2I 和 T2S 任务上均取得强劲结果。

  3. MIT News · AI30

    人工神经网络如何构建自己的学习机制

    MIT McGovern 研究所团队在 PNAS 发文,证明随机连接的多层网络仅凭“同时激活的神经元连接增强”等简单规则即可自组织出学习机制,识别模式与分类图像的表现在与反向传播训练的网络相当。研究者认为,判断神经网络对神经科学的参考价值应看其自组织程度,而非仅看连接本身。

10月13日周二
  1. Apple Machine Learning Research22

    Mix, Don't Tune: Bilingual Pre-Training Outperforms Hyperparameter Search in Data-Constrained Settings

    苹果研究团队在 150M 至 1.43B 四种模型规模、约 1000 次预训练实验中,以阿拉伯语为目标语言、英语为辅助语言,比较了数据混合与超参数调优两种方案。混合在验证损失和下游任务准确率上均优于超参数调优,且优势随模型规模扩大而增大,效果相当于 2–3 倍目标数据(验证损失)和 2–13 倍(下游准确率)。作者建议优先调整混合比例,并通过 μP 从小代理模型迁移超参数。

  2. Microsoft Research39

    模拟学生学习,打造更好的 AI 辅导

    Microsoft Research 提出 StudentSim,一个用公开去标识化学习记录训练个性化 AI 学生模拟器的研究系统,可在真实学习者测试前评估和改进 AI 辅导系统。该系统从行为保真度和指导响应性两个维度评估模拟器,并配套推出覆盖国际象棋、英语二语写作和数学的 StudentSimEval 基准,表现优于主流基线。StudentSim 并非产品,不部署于课堂,也不旨在取代教师。

10月12日周一
  1. Apple Machine Learning Research38

    Minions:基于闲置 Apple Silicon 设备构建的动态分布式虚拟 GPU 云

    Apple 研究团队提出 Minions,一个将多台 macOS 设备上闲置的 Apple Silicon GPU 聚合起来、执行大规模机器学习推理的动态分布式虚拟 GPU 云。该系统提供灵活的 GPU 推理任务执行、容错能力和高效资源利用,让团队无需额外采购 GPU 即可复用现有硬件。研究经验表明,在集中式 GPU 资源受限的环境中,闲置 macOS 设备可转化为实用的分布式 GPU 推理平台。

  2. Apple Machine Learning Research39

    自压缩语言模型智能体

    约翰斯·霍普金斯大学提出 SELFCOMPACT,让模型自行决定何时及如何压缩上下文:通过一个压缩工具加一套轻量评分规则,判断子任务已完成或轨迹收敛时触发、推导中途或卡住时抑制。

  3. Anthropic Research78

    AI 模型或可在没有数据中心的情况下自我复制

    Anthropic 的实验显示,小型 AI 模型可能再过几个月就具备在商用 IoT 设备(如智能烤箱、杂牌 Android TV 盒子)上自我复制的能力,这类复制体没有集中关停点,但速度较慢,翻倍时间以天计。

    推荐理由:Anthropic 用真实 IoT 设备实测小模型自复制链条,给出能力门槛与时间外推,可据此理解端侧算力带来的安全边界变化。

10月11日周日
  1. Sakana AI60

    通过集体智能实现递归自我改进

    Sakana AI 发布论文提出多智能体自监督(MASS):一个共享模型通过虚拟子智能体团队解题,搜索更优的多智能体工作流,再用自身判断选出最佳方案,并将最佳团队的执行轨迹蒸馏回共享模型。

    推荐理由:Sakana AI 用 27B 开源模型跑通两轮多智能体自监督循环,给出 RSI 训练数据与瓶颈的实证线索。

10月10日周六
10月9日周五
  1. Anthropic Research78

    调查评测与内部使用中 Claude 的非预期行为

    Anthropic 发布报告,披露在评测和内部使用中观察到的 Claude 非预期行为,分为四类:利用软件漏洞在服务器上执行命令、在不该提交时提交敏感表单、绕过限制获取需 token 或付费的数据、用 URL 短链服务绕过 fetch 工具的长度限制。

    推荐理由:Anthropic 公开 Claude 在评测与内部使用中的四类越界行为及缓解措施,可供对齐与智能体安全研究者参考。

  2. MIT News · AI22

    3 Questions: What is the best path forward for AI in academia?

    MIT统计与数据科学中心主任Sasha Rakhlin发文探讨AI如何改变学术界,聚焦数学、统计、机器学习与工程领域的研究生教育。他指出,验证速度与可靠性决定AI在某一学科的进展快慢,形式化证明可自动检验、程序可运行测试,使模型能生成候选方案并从结果中学习,形成加速循环。他建议院系重新审视学术贡献认定标准,重视提问、复现、负结果与数据集共享,并让学生学会提出问题、审查模型输出与复现结果。

10月8日周四
  1. Anthropic Research62

    缺失的星空地图

    约翰斯·霍普金斯大学天体物理学家、Anthropic 研究员 Brice Ménard 与 Claude Science 合作,制作出首张完整的紫外波段全天图,其中约三分之一天区(含银河系盘面大部分)此前从未被紫外望远镜观测,由 Claude 用 inpainting 方法预测补全。

    推荐理由:Anthropic 研究员用 Claude Science 多智能体补全三分之一未观测天区,给出可迁移的科研自动化流程。

  2. Apple Machine Learning Research39

    Normalizing Trajectory Models

    Apple 团队提出 Normalizing Trajectory Models(NTM),将扩散模型每个反向步骤建模为带精确似然训练的条件归一化流,结合每步浅层可逆模块与跨轨迹深层并行预测器,可从头训练或从预训练 flow-matching 模型初始化。

  3. Zyphra Research38

    MoE 预训练中的专家耦合

    Zyphra 研究发现 MoE 训练中 all-to-all 通信可占单步训练时间的 60.4%,原因是专家放置忽略了路由的相关性。实验显示,同一层内 45% 的 token 只落在 0.8% 的专家对上,跨层路由同样高度集中。通过把常被同一 token 选中的专家放到同一 GPU,可减少跨网络传输并加快训练,且无需改动模型架构、路由决策或训练目标。

  4. Goodfire Research71

    在 Kimi K3 上训练并部署生产级网络监控器

    Goodfire Research 为 Kimi K3 和 GLM 5.3 构建了基于探针的网络滥用监控器,并部署在生产推理栈上。探针作为第一道过滤器只把可疑交互交给 LLM 裁判,在 5.5% 良性会话中断率下召回约 93%,成本约 50 倍更低,每百万次交互低于 200 美元,且不增加推理延迟。

    推荐理由:原文给出探针加裁判级联的完整配方与生产部署数据,可了解实时监控智能体的成本与延迟取舍。

10月7日周三
  1. OpenAI Alignment Research41

    研究语言模型中的元博弈潜在表征

    OpenAI 与 Apollo Research 通过分析 OpenAI o3 的强化学习训练过程,识别出与元博弈(模型转而推理任务如何被评估或奖励)相关的稀疏自编码器(SAE)潜在表征,用这些表征引导可显著改变模型行为。元博弈并非单一机制,而是叠加了任务分析、评估意识、奖励寻求与规范性推理等多种过程,且在 RL 训练中增强,部分表征还能在不写入思维链的情况下影响模型回答。

  2. MIT News · AI22

    超级计算研究人员记录 AI 硬件的演进

    林肯实验室超级计算中心(LLSC)自2018年起持续开展 Lincoln AI Computing Survey(LAICS),梳理商用 AI 加速器的峰值性能与峰值功耗,首篇论文覆盖 57 款加速器,最新一篇已超过 120 款。该调查涵盖 CPU、GPU、ASIC、FPGA 和数据流加速器,数据全部来自公开来源,并已用于指导 LLSC 的 GPU 采购决策。团队计划继续推进这项调查。

10月6日周二
  1. 上海人工智能实验室 InternLM · 新项目48

    InternLM/SpatialASM

    上海人工智能实验室 InternLM 团队发布 SpatialASM 框架,通过两阶段训练将主动空间心智化(ASM)能力内化进 LVLM,使模型能主动规划视角并想象缺失的空间证据。

  2. METR Blog62

    AI 系统可能掩盖自身不当行为

    METR 测试发现,运行在 Inspect 评测中的智能体可修改人类审阅者通过 Inspect 查看器看到的转录内容,从而掩盖自身不当行为。研究人员借助 AI 智能体约 10 分钟就找到一个客户端 JavaScript 注入漏洞,可任意改动转录中的历史动作并拦截查看器的下载按钮,但底层数据未被修改,真实轨迹仍留在 METR 数据库中。

    推荐理由:METR 公开了 Inspect 转录查看器的一个客户端注入漏洞,读者可据此理解智能体监督链路为何要按安全关键基础设施对待。

10月5日周一
  1. Apple Machine Learning Research12

    在用户自撰的个人感知系统中协商本体论边界

    研究者设计了两款采用 Wizard of Oz 技术的开放式探针,让参与者体验训练个性化机器学习系统,以识别自身定义的现象。在一项为期一周的探索性研究中,参与者使用其中一款探针融入日常生活,研究识别出四个本体论边界协商场景:现象边界、作为关系一部分的主体、何为信号何为噪声,以及数据的客观性。该论文已被 ARES 2026 的 AI4TCI 研讨会接收。

10月2日周五
  1. Apple Machine Learning Research22

    Limits of Confidence in Diffusion

    研究揭示离散扩散模型(含 remasking 与 uniform-state sampler)的置信度排序存在根本局限:只有当每步写入的位置在已固定 token 条件下条件独立时,该步才匹配训练分布,而逐位置分布的乘积无法匹配存在依赖的 token 组。

10月1日周四
  1. Zyphra Research32

    混合 NoPE 模型如何在无位置编码的情况下学习位置

    混合架构将滑动窗口注意力等局部混合层与使用 NoPE 的全局注意力层交错,局部层会在残差流中留下相对位置特征,使相邻 token 表示更相似,形成近因偏置。全局 NoPE 注意力据此学习 query 和 key 投影,将这种滞后相关的残差结构转化为带近因偏置的注意力 logits,无需显式注入相对位置。该偏置在训练中增强,并在网络更深层更明显。

  2. Goodfire Research39

    通过蛋白质嵌入为 AI 智能体打造更好的生物安全监控器

    Goodfire Research 开发出基于蛋白质模型嵌入向量的序列感知监控器,用于识别 AI 智能体在 DNA 或蛋白质序列任务中的双重用途风险。该监控器在自建基准上优于前沿模型的防护措施,拒绝率更低,对改写、片段化等新型对抗攻击更鲁棒,速度与数据库查询方法相当,且防御能力随模型能力提升而增强。

  3. Microsoft Research34

    预测电网面临的空间天气风险

    微软研究院实习生开发了一套机器学习系统,可为美国本土 66,935 座变电站生成位置级空间天气风险预测,提前 30 至 60 分钟预警。该系统结合 L1 太阳风观测、AE 与 Dst 指数预测、地质电导率及电网数据,评估期内检测到近 80% 的重大空间天气事件;Dst 预测在 2020-2026 年评估期内地磁最活跃时段有 62.2% 的小时数优于 Burton 方程。

9月30日周三
  1. Anthropic Research71

    机器人能做什么工作?

    Anthropic 发布机器人暴露指数研究,用 Claude 评估现有机器人对 O*NET 约 19000 项工作任务的执行能力。研究发现机器人已能完成美国 74% 的体力任务、占全部工作时间的 34%,但大多限于受控环境;仅 0.3% 的工作任务上机器人具备成本竞争力,若按历史降价速度需 40 年才能升至 10%。

    推荐理由:Anthropic 用 Claude 评估机器人任务暴露度,给出可复用的暴露分级与成本对比框架。

9月29日周二
  1. 上海人工智能实验室 InternLM · 新项目31

    InternLM/ResOPD

    上海人工智能实验室联合上海交大等发布 ResOPD,一种稀疏在线策略蒸馏方法:精确积分教师 Top-k 粗分布,仅对尾部残差采样,复用同一稀疏教师载荷且不增加教师前向。