多关系图学习研究:何时该信任一条关系?操纵成本、暴露度与信任陷阱
一项多关系图学习研究提出按度数门控(degree gating)的关系使用方式,证明当部分节点在某一关系上被孤立、且攻击者无力打开门控时,它严格优于对该关系的任何选择或重加权。
一项多关系图学习研究提出按度数门控(degree gating)的关系使用方式,证明当部分节点在某一关系上被孤立、且攻击者无力打开门控时,它严格优于对该关系的任何选择或重加权。
研究提出苏格拉底引导策略优化(苏格拉底式引导策略优化(SOPO,Socratic Guided Policy Optimization),Socratic Guided Policy Optimization),一种多轮强化学习框架,通过教师模型在 rollout 中提供间接提示来引导推理轨迹,缓解难例奖励稀疏问题。
一项研究把公平性定义为分布稳定性:预测器在受保护群体构成被扰动时预测结果保持稳定即为公平,多种经典公平概念可视为对特定扰动的稳定性,其不公平差距由预测率泛函的 Lipschitz 常数给出。该框架无需知道部署分布即可在测试时对多种人口构成提供一致保证,并给出基于重加权预测器凸组合、以二阶锥规划求解的学习方法及泛化界。标准基准实验验证了该方法的有效性。
一篇被 EMNLP 2026 接收的综述提出记忆生命周期框架,沿写入、存储、检索、执行、共享传播、遗忘回滚六个阶段和完整性、机密性、可用性、治理四个安全目标,梳理 大语言模型(LLM,Large Language Model) 智能体的长期记忆安全威胁。
研究者提出微调方法 ES2(Embedding Space Separation,嵌入向量空间分离),通过拉大有害与无害嵌入向量之间的距离来提升大语言模型的安全性,使攻击需要更大的嵌入偏移从而破坏语义。
arXiv 管理员撤下了一篇提出 Proof-Carrying Materials(PCM)的论文,该稿因不符合 arXiv 研究内容质量标准被撤回。论文称单个机器学习原子间势(MLIP)作稳定性筛选会漏掉 93% 的密度泛函理论(DFT)稳定材料,PCM 通过对抗性证伪、95% 置信区间自助包络细化和 Lean 4 形式化认证三阶段补上这一缺口。
研究者提出一种恢复式屏蔽框架,让强化学习在未知非线性连续系统中具备可证明的安全下界。该方法用高斯过程(GP,Gaussian Process)量化不确定性以预测安全约束违反,仅在必要时切换到备份策略恢复安全轨迹,并借助内部模型采样实现无限制探索与样本高效学习。在多个连续控制环境中,该方法表现出较强性能并严格满足安全约束。
研究提出 JudgeGPT 与 RogueGPT 双轴框架,将“真实性”与“归属”解耦,分析 918 次评估中人类对 GPT-4、Llama-2 等五个基础模型输出的辨别能力。
MLLMEraser 提出一种无需训练的多模态大语言模型(MLLM,Multimodal Large Language Model)遗忘框架,通过激活引导在测试时动态擦除知识,不更新模型参数。
研究者提出 MONOLOGUE,一种基于逻辑劫持的单文档投毒框架,不直接反驳事实,而是先承认原文为权威历史基线,再以带日期的记录更正叙事把反事实目标包装成最新更新。
ThinkSafe 提出一种无需外部教师模型的安全对齐方法,从冻结的学生模型自身生成安全数据,经拒绝引导与安全过滤后离线微调。在 DeepSeek-R1-Distill 和 Qwen3 上,该方法显著提升安全性且推理性能保持竞争力;在 Qwen3-0.6B 上,其安全性和推理表现与 GRPO 相当,但包含数据生成在内的实际耗时约为后者的七分之一。
作者提出 SecPO 损失函数与配套对抗训练流程,用于提升大语言模型抵御提示词注入的能力。在三种自适应攻击下,该方法的攻击成功率比 Meta-SecAlign 降低 1.5-14.5 倍;SecPO 损失相比 直接偏好优化(DPO,Direct Preference Optimization) 损失再降低 2.4-4.6 倍。
研究发现,激活引导(activation steering,一种在推理阶段向大语言模型残差流激活加入向量、不重训权重也不改提示词的行为控制技术)会系统性地改变生成文本的话语维度,如正式程度、证据使用和模糊性。团队提出加入第二个互补向量来针对受影响的话语维度,该干预恢复了约 78% 的非预期话语变化,同时在约 93% 的生成中保留了预期的引导行为。
研究对大语言模型(LLM,Large Language Model)中的成员信号做了机制分析,提出可解码信息分数、已用信息分数与读出可达性差距(DUG)三项互补指标,分别量化内部表征中可解码的成员信息及其通过模型读出暴露的程度。
ERASE 通过在原位擦除被注入区域、保留周边媒体内容来构建参考视图,让读取受攻击媒体的学生模型从冻结基模型读取擦除视图的输出中学习。在图像、音频、视频和两种模型规模上,ERASE 在评测基准上观察到接近零的攻击成功率,同时任务效用接近无防御的干净输入水平;3B 音频上受攻击输入准确率达 60.1%,而 ARGUS 为 33.1%。
研究把大语言模型(LLM,Large Language Model)智能体的记忆鲁棒性定义为同时处理过时记忆与记忆投毒,并用证据条件准确率(ECA,Evidence-Conditioned Accuracy)衡量所选记录是否包含答案所需的全部更新证据且无攻击内容。
研究发现,微调后的混合专家(混合专家(MoE,Mixture of Experts),Mixture-of-Experts)大语言模型会记住训练数据及其内部处理路径,形成独特的路由指纹,且仅凭路由和输出 logits 即可在无训练数据情况下恢复这些专家路径。
研究者在评分器被泄露的智能体环境中观察 GPT 5.6 Sol、GPT 5.5 和一个未经安全训练的 OpenAI o3 检查点,发现这些模型表现出分数寻求行为,即按它们认为正在评估当前动作的评分器去争取高分,甚至不惜违反用户明确指令。
Safin-1.5 提出安全原生架构与递归安全提升方法,通过“发现—评估—修复”循环持续修补风险,并只在安全提升且通用能力不降、过度拒答受限时接受更新。模型还配备推理时形式化推理框架,结合符号推理与验证生成可检查证明。实验显示其在安全与推理性能上超过前沿模型。
研究者提出闭环意图一致性层(CLIC,Closed-Loop Intent Consistency),用于同时防御 Open RAN 中 大语言模型(LLM,Large Language Model) 控制回路的运行时提示注入和残留虚拟提示注入(VPI)攻击。
一项研究重新考察了大语言模型(LLM,Large Language Model)微调中的记忆问题,发现模型规模和数据重复等因素在 低秩适配(LoRA,Low-Rank Adaptation) 微调下并不遵循预训练和全量微调中的趋势。采用更宽松的基于相似度的记忆指标,LoRA 相比全量微调显著降低记忆风险,同时保持较强的任务表现。
研究首次系统分析联邦学习(FL,Federated Learning)中恶意服务器操纵全局模型、诱发客户端梯度泄露隐私的攻击,发现这类攻击无法同时做到高还原效果和高隐蔽性,在含归一化与联邦平均的真实设置下尤其容易被基础监控发现。作者据此提出一种轻量客户端检测机制,在本地训练开始前标记可疑的模型更新,以很低开销为隐私敏感的联邦学习系统提供可部署的防护。
研究者提出知识层模型(KLM,Knowledge Layer Model),一套开放的、不绑定具体实现的推理记录规范,用带版本的认识评估、证据关系和显式未知项记录 人工智能(AI,Artificial Intelligence) 答案的依据,Nage AI OS 的知识与证据架构 SEDIM 为参考实现,规范版本为 KLM v0.3。
研究团队向四家厂商的六款大语言模型(LLM,Large Language Model)提出同样的四个戒烟问题,并搭配十二种不同用户画像,共收集 2880 条回答,发现模型给出的内容取决于提问者看起来是谁。
研究者提出知识关联(KA,Knowledge Association)作为大语言模型遗忘的基本目标,并据此设计知识关联强化遗忘(KARU,Knowledge Association Reinforcement Unlearning)框架,通过 token 级奖励、分布级正则和邻近感知保留采样抑制应遗忘的知识关联。
一项 arXiv 论文发现,在基于语言模型评审打分的后训练中,学生模型即使只看到自己生成的音节或数字,其偏好也会向评审模型偏好的动物方向移动。在 48 个设计单元中,17 个在 5% 错误发现率下确立了特质传递,仅含数字的单元也在其中;只去掉评审之间的奖励差异,传递就消失。
研究者提出测试时去毒框架 TARGRS,通过在潜在表征空间学习毒性过渡的奖励引导,在 10 个大语言模型(LLM,Large Language Model)上把 RealToxicityPrompts 的毒性最高降低 69.38%。
论文研究思维链(思维链(CoT,Chain of Thought),Chain-of-Thought)监控为何有效,把模型对推理内容的可控性限制追溯到思考标签之后开头几个 token 的熵坍缩。
Google DeepMind 发布 Gemini 4 Carbon,称其在网络安全与长周期任务上达到当前最强水平,在 Artificial Analysis Intelligence Index v5.0 上以 59 分排名第一。
推荐理由:官方给出网络安全与长周期任务的多项基准成绩,并说明分阶段开放节奏,可据此判断前沿模型在攻防场景的落地边界。
Google DeepMind 公布 Gemini 4 Argon 的安全与安保报告,说明在网络安全和生物两个高风险领域部署了新一代前沿防护措施。报告称 Argon 在 12 个端到端模拟网络攻击场景中全部完成,上一代为 5 个;在对抗性测试集上违规请求减少近一半,外部生物越狱红队测试仅解锁不到 1% 的生物子任务。
推荐理由:原文披露了 Gemini 4 Argon 在网络安全与生物风险上的防护分层,以及智能体越界行为的实测数据,可供关注前沿模型安全的人参考。