你听说了吗,机器人AI模型又变快变强变小了
工厂里的机械臂正在重复抓取零件,后台AI计算完下一步动作还要等几秒。
德国人工智能初创企业Black Forest Labs刚刚推出了FLUX 3 Action,这是一款开放权重的70亿参数世界动作模型。
这款模型在RoboLab基准测试中拿到了第一名,和此前性能最好的开放模型相比,性能高出6.1个百分点,参数减少了56%,运行速度最高快3.95倍。
@bfl_ai 认为:FLUX 3 Action打破了世界动作模型性能和速度之间的常规平衡,它同时预测视频和动作,规划的路径长度是现有最强开源模型的两倍多,处理每秒机器人动作的速度也更快。
@NVIDIARobotics 表示:这款可微调的世界动作模型,可以为机械臂和各类交互环境学习操作策略。
世界动作模型,简单说就是能同时预测环境变化(对应视频预测)和生成机器人下一步动作指令的AI模型。开放权重意味着任何符合条件的开发者都可以拿到完整模型参数,可以自行修改、在自有设备上运行,还能把自己的机器人运行数据保留在内部,不用传到外部服务器。
对于机器人研发团队来说,这意味着不用再在性能和运行成本之间做选择:更小的模型体积意味着不需要价格昂贵的高端计算设备就能跑起来,更快的速度能让机器人实时响应环境变化,不用卡顿等待。对于依赖机械臂自动化的工厂来说,更流畅实时的操作能直接提升生产效率,开放模型也降低了中小团队自研定制机器人AI的门槛。
截至目前,FLUX 3 Action的视频和动作功能仅通过API向选定合作方开放早期访问,首个合作方是mimic robotics。Black Forest Labs刚在发布这款模型的前一天,推出了自己的首个视频生成模型FLUX 3,此前他们只做过图像生成模型。
当视频生成模型开始往机器人领域延伸,下一个你的日常会用到什么?