SessionFarmer框架与CropChat基准发布

Ao Lu等作者提出 SessionFarmer 框架，可把开发者与编码智能体的真实对话和代码提交记录自动转成可独立执行、可复现的软件工程任务，并据此构建 CropChat 基准。该框架会过滤无关会话，将跨多轮乃至多次会话的交互归并为围绕同一工程目标的工作片段，再重建隔离执行容器、生成任务说明及基于仓库的评分标准和单元测试。CropChat 是包含 242 个任务、覆盖 61 个公开仓库和 14 种编程语言的公开基准；团队还利用专有企业日志构建了 CropEnterprise。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。