研究:企业维护与AI编码基准条件差异
热点事件持续更新
研究:企业维护与AI编码基准条件差异
1 篇报道1 个报道来源10 小时前更新
先了解这件事
AI 综述
Heeyong Eun(KPMG Korea)发布研究,用18项固定标准分类分析2,925个Apache Fineract问题,以及944个来自SWE-bench Pro、SWE-PolyBench Java和SWE-EVO的任务,发现表面相似的任务在所需满足的条件集合上差异显著。 研究称,这种语料对比是描述性的,可能反映领域差异,不能据此认定因果关系或生产环境失败率;文中示例也未量化基准整体在标准答案(oracle)上的遗漏。
AI 根据报道生成 · 4 小时前更新
最新进展11月3日 13:00
研究:企业维护任务与 人工智能(AI,Artificial Intelligence) 编码基准的条件满足差异报道时间线
沿着报道,了解事件的不同侧面。
11月3日
- arXiv · cs.AI研究:企业维护任务与 人工智能(AI,Artificial Intelligence) 编码基准的条件满足差异
一项研究用固定 18 项标准分类分析了 2,925 个 Apache Fineract 问题和 944 个来自 SWE-bench Pro、SWE-PolyBench Java、SWE-EVO 的任务,发现表面相似的任务在需满足的条件集合上差异显著。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。