arXiv · cs.AI · Eunseob Choi, Kyeonghun Kim, Hyuk-Jae Lee, Nam-Joon Kim · 10 小时前模型评分44
ReuScope：审计 Capsule Vision 2024 的数据复用与评估敏感性
ReuScope: Auditing Data Reuse and Evaluation Sensitivity in Capsule Vision 2024
导读
研究团队提出审计协议 ReuScope，并以 Capsule Vision 2024 为案例检测数据复用与评估敏感性。该数据集公开训练集与验证集间存在字节完全相同文件，41 段 Kvasir-Capsule 录像的帧同时出现在两个分区；移除相关训练数据后，公开验证集平衡准确率从 82.5% 降至 61.2%，但在其他来源验证行上反而提升 1.38 个百分点。
分类置信度
中 · 待人工复核
- 只有单一媒体来源，需要人工复核。
来源级别：媒体与个人
应用领域：医疗与生命科学
事件类型：研究发布
证据摘录
- “We develop ReuScope, a protocol for auditing data reuse and evaluation sensitivity, using Capsule Vision 2024 as a case study.”
- “Byte-identical files cross the public training-validation boundary, and all 41 Kvasir-Capsule recordings that contribute frames occur in both partitions.”
- “Shared source recordings establish cross-split overlap; missing cross-recording patient identifiers prevent counting unique shared patients.”
- “The public-validation drop measures sensitivity to source removal, not an amount of leakage-induced inflation.”
来源：arXiv · cs.AI · arxiv.org