arXiv · cs.AI · Fengxin Li · 11 小时前模型评分36
视觉候选该看到什么:联合编码优势主要来自请求可见性
Seeing the Options: What Should a Visual Candidate See?
导读
研究用同一骨干网络在 Multimodal-Mind2Web 截图裁剪上微调,发现联合编码器的优势主要来自候选能看到请求,而非候选彼此交互。让每个候选从编码请求的分叉缓存继续编码,可挽回独立编码相对联合编码损失的 12 至 17 分中的 11 至 13 分,代价是失去跨请求复用。状态条件模型在匹配弃权点下比联合编码器低 0.6 和 1.0 分,翻转率为零。
分类置信度
中 · 待人工复核
- 只有单一媒体来源,需要人工复核。
来源级别:媒体与个人
事件类型:研究发布
证据摘录
- “We ask where the joint encoder's advantage comes from: from candidates seeing the request, or from candidates seeing each other while they are encoded.”
来源:arXiv · cs.AI · arxiv.org