跳到正文
热点事件持续更新

SWIFT:不增参数的稀疏微调框架

1 篇报道1 个报道来源10 小时前更新

先了解这件事

AI 综述

Xianchao Guan 等作者提出稀疏微调框架 SWIFT(Small-World Induced Fine-Tuning)。该方法把块对角稀疏更新与固定的确定性散射置换结合,在不增加可训练参数的前提下,打通特征维度之间相互隔离的“信息孤岛”。 SWIFT 的设计受到小世界连接特性的启发,针对的是稀疏微调中不同特征维度之间信息难以流通的问题。报道未给出实验效果数据。

AI 根据报道生成 · 3 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月2日
  1. arXiv · cs.AI
    SWIFT:用小世界连接打破稀疏微调中的信息孤岛

    研究提出稀疏微调框架SWIFT(Small-World Induced Fine-Tuning),将块对角稀疏更新与固定的确定性散射置换结合,在不增加可训练参数的情况下打通特征维度间的信息孤岛。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。