arXiv · cs.AI · Zichuan Fu, Shirong Wang, Wenlin Zhang, Guojing Li, Yimin Deng, Jingtong Gao, Junjia Qi, Hanyu Yan, Yefeng Zheng, Xiaopeng Li, Wanyu Wang, Xian Wu, Xiangyu Zhao · 9 小时前模型评分43
GUI-Lens:让现成 视觉语言模型(VLM,Vision-Language Model) 通过由粗到细裁剪实现精准 GUI 定位
GUI-Lens: Enabling Precise GUI Grounding for Off-the-Shelf VLMs via Coarse-to-Fine Cropping
导读
GUI-Lens 提出一种由粗到细的 GUI 定位框架,让通用视觉语言模型(VLM,Vision-Language Model)通过主动视觉观察逐步确定点击目标,在 ScreenSpot-Pro 上的准确率最高达到直接定位的 9.3 倍。
分类置信度
中 · 待人工复核
- 只有单一媒体来源,需要人工复核。
来源级别:媒体与个人
事件类型:研究发布
证据摘录
- “In this paper, we introduce GUI-Lens, a coarse-to-fine grounding framework that allows a general-purpose VLM to determine the target through active visual observations.”
来源:arXiv · cs.AI · arxiv.org