跳到正文
arXiv · cs.AI · Shuochuan Li, Zan Wang, Dong Wang, Yuhang Jiang, Huajin Cui, Chen Zhang, Gang Wang, Junjie Chen · 5 小时前模型评分46

EMBERS:用缺陷引导模糊测试检验深度研究系统的鲁棒性

EMBERS: Empirically Motivated Robustness Testing of Deep Research Systems via Defect-Guided Fuzzing

导读

研究者分析三个深度研究(DR,Deep Research)系统的 1,932 条执行轨迹,归纳出子问题构建、在线搜索和最终推理三个环节的九类反复出现的缺陷,并提出缺陷引导的模糊测试框架 EMBERS。在 16 组框架、模型与数据集组合上,EMBERS 在相同测试预算下的失败发现吞吐量达到最强基线的 3.21 倍,且多数生成输入保留了原始信息需求与必要上下文约束。

分类置信度

中 · 待人工复核

  • 只有单一媒体来源,需要人工复核。

来源级别:媒体与个人

事件类型:研究发布

证据摘录

  • “Guided by these findings, we propose EMBERS, an empirically motivated, defect-guided fuzzing framework for robustness testing of DR systems.”

来源:arXiv · cs.AI · arxiv.org