跳到正文
热点事件持续更新

FloMo:用3D场景流作世界动作模型中间表示

1 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

Jeremy Collins 等作者发布论文提出 FloMo:一个 5B 视频生成模型,经微调后预测 3D 场景流(场景中每个点的三维运动)和动作 token,用于从人类视频中学习机器人动作。 论文称,FloMo 把预测出的场景流渲染为 RGB,并编码进与视频相同的潜空间,使预训练视频生成骨干能高效适配。模型以 3D 场景流作为世界动作模型的中间表示,而不是直接以像素为输出目标。

AI 根据报道生成 · 47 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月4日
  1. arXiv · cs.AI
    FloMo:用 3D 场景流作为世界动作模型中间表示,从人类视频中学习

    FloMo 是一个 5B 视频生成模型,经微调后预测 3D 场景流(scene flow,场景中每个点的三维运动)和动作 token,把场景流渲染为 RGB 并编码进与视频相同的潜空间,使预训练视频生成骨干能高效适配。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。