跳到正文
arXiv · cs.AI · Fengxin Li · 11 小时前模型评分36

视觉候选该看到什么:联合编码优势主要来自请求可见性

Seeing the Options: What Should a Visual Candidate See?

导读

研究用同一骨干网络在 Multimodal-Mind2Web 截图裁剪上微调,发现联合编码器的优势主要来自候选能看到请求,而非候选彼此交互。让每个候选从编码请求的分叉缓存继续编码,可挽回独立编码相对联合编码损失的 12 至 17 分中的 11 至 13 分,代价是失去跨请求复用。状态条件模型在匹配弃权点下比联合编码器低 0.6 和 1.0 分,翻转率为零。

生成六维分析
分类置信度

中 · 待人工复核

  • 只有单一媒体来源,需要人工复核。

来源级别:媒体与个人

事件类型:研究发布

证据摘录

  • “We ask where the joint encoder's advantage comes from: from candidates seeing the request, or from candidates seeing each other while they are encoded.”

来源:arXiv · cs.AI · arxiv.org