跳到正文
arXiv · cs.AI · Chengtao Jian, Kai Yang · 6 小时前模型评分34

TPO:面向 OOD 偏好对齐的三层分布鲁棒学习框架

TPO: Tri-level Distributionally Robust Learning for OOD Direct Preference Optimization

导读

研究者提出 TPO,一个针对分布外(OOD,Out-of-Distribution)偏好对齐的三层分布鲁棒框架,同时建模群组、提示词和偏好三个层级的分布偏移。该方法用 Wasserstein 距离构建分层矩形模糊集,导出可解释目标,并给出有限样本收敛保证,论文已被 NeurIPS 2026 接收。

分类置信度

中 · 待人工复核

  • 只有单一媒体来源,需要人工复核。

来源级别:媒体与个人

事件类型:研究发布

证据摘录

  • “We propose TPO, a tri-level distributionally robust framework for OOD preference alignment, which jointly models all three levels of distributional uncertainty through a hierarchically structured rectangular ambiguity set.”

来源:arXiv · cs.AI · arxiv.org