跳到正文
arXiv · cs.AI · Muhammed Ustaomeroglu, Guannan Qu · 8 小时前模型评分42

用表征有效理论理解、预测与引导大语言模型行为

Understanding, Predicting, and Steering LLM Behavior via Representational Effective Theory

导读

研究者提出表征有效理论(RET,Representational Effective Theory),可从模型隐藏状态轨迹中学习低维宏观状态及其动力学,这些宏观状态呈现近似闭合的演化,并在推理过程中留下可解释的轨迹。该方法能在生成早期预测谄媚与对齐伪装行为,通过引导模型进入选定宏观状态还能改变其推理表现。

生成六维分析
分类置信度

中 · 待人工复核

  • 只有单一媒体来源,需要人工复核。

来源级别:媒体与个人

事件类型:研究发布

证据摘录

  • “We introduce Representational Effective Theory (RET), a framework that learns low-dimensional macrostates and their dynamics from a model's hidden-state trajectories.”

来源:arXiv · cs.AI · arxiv.org