跳到正文
今天11月2日周一28 条
  1. arXiv · cs.AI31

    苏格拉底式引导策略优化(SOPO,Socratic Guided Policy Optimization):用苏格拉底式引导策略优化做片段级幻觉检测

    研究提出苏格拉底引导策略优化(苏格拉底式引导策略优化(SOPO,Socratic Guided Policy Optimization),Socratic Guided Policy Optimization),一种多轮强化学习框架,通过教师模型在 rollout 中提供间接提示来引导推理轨迹,缓解难例奖励稀疏问题。

  2. arXiv · cs.AI34

    研究将公平性视为分布稳定性:预测器在受保护群体构成变化下保持稳定即为公平

    一项研究把公平性定义为分布稳定性:预测器在受保护群体构成被扰动时预测结果保持稳定即为公平,多种经典公平概念可视为对特定扰动的稳定性,其不公平差距由预测率泛函的 Lipschitz 常数给出。该框架无需知道部署分布即可在测试时对多种人口构成提供一致保证,并给出基于重加权预测器凸组合、以二阶锥规划求解的学习方法及泛化界。标准基准实验验证了该方法的有效性。

  3. arXiv · cs.AI40

    大语言模型(LLM,Large Language Model) 智能体长期记忆安全综述:覆盖记忆全生命周期的攻击、防御与治理

    一篇被 EMNLP 2026 接收的综述提出记忆生命周期框架,沿写入、存储、检索、执行、共享传播、遗忘回滚六个阶段和完整性、机密性、可用性、治理四个安全目标,梳理 大语言模型(LLM,Large Language Model) 智能体的长期记忆安全威胁。

  4. arXiv · cs.AI19

    arXiv 撤稿:Proof-Carrying Materials 用 Lean 4 为机器学习原子间势提供可证伪安全证书

    arXiv 管理员撤下了一篇提出 Proof-Carrying Materials(PCM)的论文,该稿因不符合 arXiv 研究内容质量标准被撤回。论文称单个机器学习原子间势(MLIP)作稳定性筛选会漏掉 93% 的密度泛函理论(DFT)稳定材料,PCM 通过对抗性证伪、95% 置信区间自助包络细化和 Lean 4 形式化认证三阶段补上这一缺口。

  5. arXiv · cs.AI38

    基于高斯过程动力学模型与恢复式屏蔽的安全强化学习

    研究者提出一种恢复式屏蔽框架,让强化学习在未知非线性连续系统中具备可证明的安全下界。该方法用高斯过程(GP,Gaussian Process)量化不确定性以预测安全约束违反,仅在必要时切换到备份策略恢复安全轨迹,并借助内部模型采样实现无限制探索与样本高效学习。在多个连续控制环境中,该方法表现出较强性能并严格满足安全约束。

  6. arXiv · cs.AI42

    ThinkSafe:推理模型自生成安全对齐方法

    ThinkSafe 提出一种无需外部教师模型的安全对齐方法,从冻结的学生模型自身生成安全数据,经拒绝引导与安全过滤后离线微调。在 DeepSeek-R1-Distill 和 Qwen3 上,该方法显著提升安全性且推理性能保持竞争力;在 Qwen3-0.6B 上,其安全性和推理表现与 GRPO 相当,但包含数据生成在内的实际耗时约为后者的七分之一。

  7. arXiv · cs.AI45

    研究:激活引导会改变大语言模型话语层面,可用第二向量干预修复

    研究发现,激活引导(activation steering,一种在推理阶段向大语言模型残差流激活加入向量、不重训权重也不改提示词的行为控制技术)会系统性地改变生成文本的话语维度,如正式程度、证据使用和模糊性。团队提出加入第二个互补向量来针对受影响的话语维度,该干预恢复了约 78% 的非预期话语变化,同时在约 93% 的生成中保留了预期的引导行为。

  8. arXiv · cs.AI45

    ERASE:用同策略自蒸馏擦除注入区域,防御多模态提示注入

    ERASE 通过在原位擦除被注入区域、保留周边媒体内容来构建参考视图,让读取受攻击媒体的学生模型从冻结基模型读取擦除视图的输出中学习。在图像、音频、视频和两种模型规模上,ERASE 在评测基准上观察到接近零的攻击成功率,同时任务效用接近无防御的干净输入水平;3B 音频上受攻击输入准确率达 60.1%,而 ARGUS 为 33.1%。

  9. arXiv · cs.AI42

    Safin-1.5:以安全原生架构与可验证推理实现递归安全提升

    Safin-1.5 提出安全原生架构与递归安全提升方法,通过“发现—评估—修复”循环持续修补风险,并只在安全提升且通用能力不降、过度拒答受限时接受更新。模型还配备推理时形式化推理框架,结合符号推理与验证生成可检查证明。实验显示其在安全与推理性能上超过前沿模型。

  10. arXiv · cs.AI45

    研究:低秩适配(LoRA,Low-Rank Adaptation) 微调比全量微调显著降低大语言模型记忆泄露风险

    一项研究重新考察了大语言模型(LLM,Large Language Model)微调中的记忆问题,发现模型规模和数据重复等因素在 低秩适配(LoRA,Low-Rank Adaptation) 微调下并不遵循预训练和全量微调中的趋势。采用更宽松的基于相似度的记忆指标,LoRA 相比全量微调显著降低记忆风险,同时保持较强的任务表现。

  11. arXiv · cs.AI40

    联邦学习中的恶意梯度泄露:攻击难以兼顾有效与隐蔽,可用轻量检测拦截

    研究首次系统分析联邦学习(FL,Federated Learning)中恶意服务器操纵全局模型、诱发客户端梯度泄露隐私的攻击,发现这类攻击无法同时做到高还原效果和高隐蔽性,在含归一化与联邦平均的真实设置下尤其容易被基础监控发现。作者据此提出一种轻量客户端检测机制,在本地训练开始前标记可疑的模型更新,以很低开销为隐私敏感的联邦学习系统提供可部署的防护。

  12. arXiv · cs.AI34

    知识层模型(KLM):可查看证据的 人工智能(AI,Artificial Intelligence) 输出、路由诊断与负面结果

    研究者提出知识层模型(KLM,Knowledge Layer Model),一套开放的、不绑定具体实现的推理记录规范,用带版本的认识评估、证据关系和显式未知项记录 人工智能(AI,Artificial Intelligence) 答案的依据,Nage AI OS 的知识与证据架构 SEDIM 为参考实现,规范版本为 KLM v0.3。

  13. arXiv · cs.AI59

    研究显示模型特质可通过评审模型打分在强化学习中传递

    一项 arXiv 论文发现,在基于语言模型评审打分的后训练中,学生模型即使只看到自己生成的音节或数字,其偏好也会向评审模型偏好的动物方向移动。在 48 个设计单元中,17 个在 5% 错误发现率下确立了特质传递,仅含数字的单元也在其中;只去掉评审之间的奖励差异,传递就消失。

10月29日周四
  1. Google DeepMind74

    Google DeepMind 发布 Gemini 4 Carbon 前沿模型

    Google DeepMind 发布 Gemini 4 Carbon,称其在网络安全与长周期任务上达到当前最强水平,在 Artificial Analysis Intelligence Index v5.0 上以 59 分排名第一。

    推荐理由:官方给出网络安全与长周期任务的多项基准成绩,并说明分阶段开放节奏,可据此判断前沿模型在攻防场景的落地边界。

10月14日周三
  1. Google DeepMind77

    Google DeepMind 发布 Gemini 4 Argon 安全与安保报告

    Google DeepMind 公布 Gemini 4 Argon 的安全与安保报告,说明在网络安全和生物两个高风险领域部署了新一代前沿防护措施。报告称 Argon 在 12 个端到端模拟网络攻击场景中全部完成,上一代为 5 个;在对抗性测试集上违规请求减少近一半,外部生物越狱红队测试仅解锁不到 1% 的生物子任务。

    推荐理由:原文披露了 Gemini 4 Argon 在网络安全与生物风险上的防护分层,以及智能体越界行为的实测数据,可供关注前沿模型安全的人参考。