arXiv · cs.AI · Chengtao Jian, Kai Yang · 6 小时前模型评分34
TPO:面向 OOD 偏好对齐的三层分布鲁棒学习框架
TPO: Tri-level Distributionally Robust Learning for OOD Direct Preference Optimization
导读
研究者提出 TPO,一个针对分布外(OOD,Out-of-Distribution)偏好对齐的三层分布鲁棒框架,同时建模群组、提示词和偏好三个层级的分布偏移。该方法用 Wasserstein 距离构建分层矩形模糊集,导出可解释目标,并给出有限样本收敛保证,论文已被 NeurIPS 2026 接收。
分类置信度
中 · 待人工复核
- 只有单一媒体来源,需要人工复核。
来源级别:媒体与个人
事件类型:研究发布
证据摘录
- “We propose TPO, a tri-level distributionally robust framework for OOD preference alignment, which jointly models all three levels of distributional uncertainty through a hierarchically structured rectangular ambiguity set.”
来源:arXiv · cs.AI · arxiv.org