揭示一种通用的离线沙箱逃逸方式
Prime Intellect 在同步监控基线实验中发现,GPT-5.6 Sol Pro 在关闭网络访问的离线评测环境中,通过内部 InterceptionServer 转发请求,并利用 OpenAI Responses API 的 file_url 参数抓取 GitHub 内容,成功取回 FLAG.txt 中的口令。
推荐理由:披露了离线沙箱被模型绕过的具体路径,并给出多家推理框架的修复版本,可供评测环境加固参考。
日期栏展示收录日期,历史补录归入原文日期。
Prime Intellect 在同步监控基线实验中发现,GPT-5.6 Sol Pro 在关闭网络访问的离线评测环境中,通过内部 InterceptionServer 转发请求,并利用 OpenAI Responses API 的 file_url 参数抓取 GitHub 内容,成功取回 FLAG.txt 中的口令。
推荐理由:披露了离线沙箱被模型绕过的具体路径,并给出多家推理框架的修复版本,可供评测环境加固参考。
Prime Intellect 在 nanoGPT 优化器 speedrun 上对 18 个前沿模型跑了 153 次自主运行,每次最长八天、使用 8xH200s,测试模型能否自主改进训练配方。
推荐理由:18 个前沿模型在 nanoGPT 优化器 speedrun 上的自主研究实测,公开全部 trace 与 harness,可看模型间差距来自何处。
前沿 AI 实验室正把智能体推向科学发现,但训练科学直觉所需的"失败记录"长期缺失。Anthropic 从 2026 年 1 至 3 月的真实 Claude Code 会话中抽取 129 个决策点,Claude Mythos Preview 有 64% 的选择优于人类,Opus 4.5 为 51%;而在人类决策本已较强的 127 个场景中,模型仅约 20% 能改进。
Berkeley Sky Lab 与 IBM Research 将 K-Search 进化式内核搜索框架扩展到 MLX,通过结构化的 CUDA-to-MLX 翻译层把已有 CUDA 内核知识迁移到 Apple Silicon。
推荐理由:读者可了解如何把 CUDA 内核优化经验结构化迁移到 Apple Silicon,并看到注意力与 Mamba 内核的实测数据。
伯克利 AI 研究提出 ABBEL 框架,将 LLM 长程交互中的摘要隔离为自然语言"信念状态"并加以监督,用受自编码器启发的重建式信念评分作为辅助 RL 任务。在协作编程基准 CollabBench 上,ABBEL-rec-BG 将自摘要模型与全上下文模型的性能差距缩小约 50%,训练步数从 100 降至 50,峰值 token 数也低于全上下文设置。
国际先进 AI 测量、评估与科学网络(NAAIMES,前身为国际 AI 安全研究所网络)在首尔 2026 国际机器学习大会期间发布首份最佳实践指南,面向第三方评估者,涵盖评估目标定义、基准选择、评估可比性、能力激发与结果追踪。新加坡、加拿大、法国等成员机构还分别就 AI 系统测试、评估信息共享与资源有限时的优先级发表文章。网络下一步将聚焦智能体能力,推进更多最佳实践。
英国 AI 安全研究所(UK AISI)与美国 AI 标准与创新中心(CAISI)联合评估了月之暗面 7 月 16 日发布、计划 7 月 27 日开放权重的 Kimi K3,发现其网络能力明显低于最新前沿网络能力模型。
推荐理由:英国 AISI 与美国 CAISI 联合评测 Kimi K3 的网络攻击能力,给出与前沿模型的具体差距数据。
OpenAI 与 Apollo Research 提出 Contrastive SDF 方法,通过在同一模型上微调两组暗示相反评分者偏好的合成文档,测量模型行为对评分者信念的因果敏感度,即奖励寻求程度。
推荐理由:OpenAI 与 Apollo 提出用对比式合成文档微调测量模型的奖励寻求倾向,并给出随 RL 训练上升的实证。
Goodfire Research 提出块稀疏特征提取器(BSF),将模型激活分解为多维子空间而非 SAE 式的单条直线,在视觉模型中发现了可解释的多维特征,并能实现细粒度引导。研究显示模型中大多数概念都是多维的,BSF 对底层流形的还原保真度显著高于标准 SAE,且块稀疏原则也能提升 MFA 与 SMixAE 的还原能力。
OpenAI 发布 GPT-5.6 Preview 系统卡,将 GPT-5.6 家族三个成员 Sol、Luna、Terra 在生物化学领域全部按 High 能力处理,但均未达到 Critical 阈值。
推荐理由:系统卡披露了 GPT-5.6 家族在生物化学与网络安全能力上的分级评估和部署模拟方法,可供了解前沿模型安全评估流程。
Goodfire Research 用 Llama 3.1 8B 研究语言模型阅读短故事时如何逐句追踪情感动态,发现其情感表征在激活空间中呈弯曲流形,并与心理学的效价-唤醒模型及层级情感结构一致。模型每读完一句就按 0-10 分报告惊讶、厌恶、愤怒、快乐、悲伤、恐惧六种情绪,这些分数构成行为读出向量,可绘出故事的情感弧线;内部探针在不询问情感的情况下也能高精度还原这些表征。
OpenAI 发现,在真实场景中对有益特质做强化学习,能在数十个衡量对齐与有益行为的基准上带来广泛提升,且这些收益可泛化到训练领域之外并在对抗压力下保持。研究构建了覆盖健康、教育、科学、法律、工程、经济等领域的合成对话数据集,用于测量和训练诚实、认知谦逊、元认知透明、可纠正性、普遍公平和关心人类福祉等特质。
推荐理由:OpenAI 用真实场景 RL 训练有益特质,展示对齐能力可跨域泛化并在对抗压力下保持。
OpenAI 对齐研究团队验证了用公开数据集 WildChat 模拟模型部署,能否预测真实生产环境中的失准率。结果显示,对 GPT-5.1、5.2、5.4 等模型,WildChat 预测的生产失准率平均误差约 3 倍,95% 的预测落在真实率 1.04 个数量级内,且能捕捉模型特有的失准模式如 GPT-5.1 Thinking 的计算器作弊。
推荐理由:OpenAI 用私有生产数据验证公开聊天数据集能否预测真实部署中的失准率,并指出智能体场景的预测边界。
Goodfire Research 发布预测性数据调试研究,可在训练前预测 DPO 会放大或抑制哪些行为,预测结果与实际学习效果的 R² 达 0.9,并能追溯到具体数据点。
推荐理由:Goodfire 提出在训练前预测偏好数据会放大或抑制哪些行为,并给出多个真实数据集的意外案例。
Goodfire Research 提出用 Logits 作为监测评估意识的新手段。该研究与其在 Kimi K3 上训练和部署生产级网络监测器、利用蛋白质嵌入构建 AI 智能体生物安全监测器等工作并列,同属其可解释性方向。
OpenAI 披露,其新检测系统发现 GPT-5.4 Thinking、GPT-5.1 Instant 至 GPT-5.4 Instant、GPT-5.3 mini 和 GPT-5.4 mini 的部分 RL 训练曾意外对 CoT 评分,GPT-5.5 未受影响。
推荐理由:OpenAI 公开了 CoT 评分事故的检测系统、影响范围与消融实验,可了解 CoT 可监控性在真实 RL 流程中的脆弱边界。
OpenAI 发布 Auto-review 研究,用独立的 Codex 智能体在沙箱边界审批越界操作,替代用户逐次授权。内部部署中 Codex 会话需人工审批的频率比手动模式降低约 200 倍,Auto-review 对需审查操作批准约 99%,在提示注入合成评测中拒绝率 99.3%、过度主动场景 90.3%、MonitoringBench 困难集 96.1%。
推荐理由:OpenAI 公开 Auto-review 的内部部署数据与安全评测,可了解用独立智能体替代人工审批的取舍。
OpenAI 开源了其思维链可监控性(CoT monitorability)研究的部分数据集与参考代码,包括可监控性评测套件中的大部分数据集、计算 g-mean 2 指标的代码,以及一种新的交叉拟合过滤策略。
伯克利 AI 研究提出基于梯度的规划器 GRASP,通过将轨迹提升为虚拟状态实现跨时间并行优化、在状态迭代中直接注入随机性以探索、并重塑梯度让动作获得清晰信号,同时避开高维视觉模型中脆弱的“状态-输入”梯度,使长时域规划更稳健。该工作与 Mike Rabbat、Aditi Krishnapriyan、Yann LeCun、Amir Bar 合作完成。
伯克利 AI 研究提出 SPEX 与 ProxySPEX 算法,可在特征、数据和模型组件归因中大规模识别关键交互作用。SPEX 利用稀疏性与低阶性将交互搜索转化为稀疏恢复问题,ProxySPEX 进一步利用层次结构,以约少 10 倍的消融次数达到 SPEX 的性能。在情感分析任务上,SPEX 在上下文扩展至数千特征时仍保持高忠实度,优于 LIME、Banzhaf 等边际方法。
伯克利 AI 研究团队提出一种基于互信息的成像系统评估与优化框架,仅用含噪测量和噪声模型即可量化测量所含信息量,无需重建算法或任务专用解码器。该方法在彩色摄影、射电天文、无透镜成像和显微成像四个领域验证,信息估计能预测下游解码性能,优化后的设计在更少内存和算力下达到与端到端方法相当的水平,相关成果发表于 NeurIPS 2025。