跳到正文
11月2日周一
  1. arXiv · cs.AI48

    FrontierMat:面向材料研发前沿的语言模型基准测试

    研究团队推出 FrontierMat 基准,包含 330 道来自航空航天、半导体、具身智能和核聚变等前沿研究与工业实践的问题,每题均由领域实验专家验证。最强通用模型仅得 53.7%,跨尺度推理题比单尺度题低 8.7 分,一半题目最多只有一个模型能解出。采用元加权持续预训练与尺度模块化自蒸馏的领域适配方法,可将开源模型从 36.7% 提升至 55.4%,追平最强闭源模型。

  2. arXiv · cs.AI36

    研究:业务语义变化后如何重新验证 文本转结构化查询语言(text-to-SQL,Text to Structured Query Language) 查询

    一项研究提出可执行验证配置,在退款归属、税务处理等业务定义变化后重新校验固定 结构化查询语言(SQL,Structured Query Language) 查询,在 32 个新编写的修订族中保留 192 个查询-定义单元,其中 144 个不符合。

  3. arXiv · cs.AI36

    DiRAFT:基于聚合话语先验的隐私感知金融对话记录合成

    DiRAFT 从训练记录中提取金融概念图并记录概念首次出现的顺序,再依据聚合的转移、起始概念和计划长度先验采样新图,生成不依赖单条原始对话的合成金融对话记录。在 1,400 条投资者电话输出的人工评估中,随机采样比贪心和 top-3 更少命中非公开投资者事实,同时在转移保真度与结构重叠之间取得较好平衡。该研究只提供残余保密风险的实证证据,未给出形式化保证。

  4. arXiv · cs.AI42

    SafeWebWorld 基准:网页世界模型的安全充分性评估

    研究团队提出 SafeWebWorld 基准,从五个网页安全领域评估世界模型预测是否保留帮助系统判断何时执行、询问或阻止的信息。对十个冻结开源模型的 3000 条预测做人工评估显示,86.1% 语义上合理,但部分模型授权行为高度不对称:误判为可安全执行的比例低,却对需澄清的询问情形召回差,且强烈倾向阻止。

10月30日周五
10月22日周四
10月13日周二
  1. Microsoft Research60

    微软研究院发布 StudentSim,用个性化学生模拟器评估和改进 人工智能(AI,Artificial Intelligence) 辅导系统

    微软研究院提出研究系统 StudentSim,用公开的去标识学习记录为每个学生训练个性化模拟器,在真实学习者测试之前评估和改进 人工智能(AI,Artificial Intelligence) 辅导系统。

    推荐理由:微软研究院提出用真实学习记录训练个性化学生模拟器,在三个学科上给出可复用的评测协议和训练反馈路径。

7月7日周二