arXiv · cs.AI · Hanlin Xiao, Eriko Takano, Mauricio A. \'Alvarez, Rainer Breitling · 10 小时前模型评分40
BGC-Bench：面向生物合成基因簇的多粒度多模态基准设计
Data-Scarce, Multi-Granular, Multimodal: Benchmark Design for Biosynthetic Gene Clusters
导读
研究者提出 BGC-Bench 基准框架，从 MIBiG 衍生出 A-domain 底物预测到 BGC-分子检索五项任务，在基因型与表型偏移划分下评测十二种编码器。结果显示没有单一表示全面占优，最佳粒度取决于任务的生物学尺度，预训练编码器也未在各任务上稳定领先。主动学习实验表明多数任务仍受数据量限制，编码器排名随标注预算变化。
分类置信度
中 · 待人工复核
- 只有单一媒体来源，需要人工复核。
来源级别：媒体与个人
应用领域：医疗与生命科学、科学研究
事件类型：研究发布
证据摘录
- “We propose a benchmark-design framework in which an informative benchmark should be discriminative, separating models with statistical confidence, and applicable, spanning scientifically meaningful tasks under different levels of generalization.”
来源：arXiv · cs.AI · arxiv.org