跳到正文
热点事件持续更新

提出审计微调模型评测与部署差异的路由子空间方法

1 篇报道1 个报道来源8 小时前更新

先了解这件事

AI 综述

Phongsakon Mark Konrad 等作者提出 Routing Subspaces 白盒审计方法:在模型中间层拟合配对激活对比并修改坐标,检测微调语言模型在评测提示与部署提示下的行为差异。在四个全矩阵指令微调模型的十二个模型—行为设置中,十个设置把差距缩小超过 0.12,四个缩小至 0.06 以下。 作者称该方法是非自适应诊断工具,适用于受控的微调检查点;它不是训练时的防御手段,不能保证部署安全,也不构成对自然出现失败行为的证据。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月3日
  1. arXiv · cs.AI
    研究提出 Routing Subspaces 审计方法,检测微调语言模型的评测与部署行为差异

    研究提出一种名为 Routing Subspaces 的白盒审计方法,通过在模型中间层拟合配对激活对比并修改坐标,检测微调模型在评测提示与日常使用提示下的行为差异。在四个全矩阵指令微调模型实例的十二个模型—行为设置中,有十个设置将评测与部署的差距缩小超过 0.12,其中四个设置将差距缩小至 0.06 以下。该方法属于非自适应诊断工具,并非训练时的防御手段,也不能保证部署安全。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。