物理AI公司Mimic Robotics近日发布了FLUX-mimic——一款与Black Forest Labs联合开发的新一代视频动作模型,旨在让机器人能够在真实工业环境中学习并执行复杂的操作任务。
FLUX-mimic融合了Mimic在机器人学习、灵巧操作与量产部署方面的专业积累,以及Black Forest Labs全新FLUX 3视频模型所具备的前沿视觉智能架构。
Mimic此前推出的"mimic-video"项目,通过在预训练视频生成模型基础上叠加机器人动作预测能力,开创了视频动作模型这一方向。FLUX-mimic在此基础上进一步深化,采用了专为物理AI场景设计的全新架构。
当前主流的机器人学习流程大多依赖视觉-语言-动作模型,其骨干网络通过静态图文数据对预训练而成,因此几乎只能依赖稀缺且成本高昂的机器人示范数据来学习物理动力学规律。FLUX-mimic则另辟蹊径,以一个已通过大规模视频预训练、对动态行为具备深刻理解的生成式视频模型为基础,再训练一个动作解码器,直接从视觉预测中输出机器人动作指令。
这一设计带来了显著成效:视任务难度不同,模型针对特定操作任务的微调仅需约30分钟的机器人数据,而此前的方案往往需要30小时以上。这一巨大提升将部署周期从数月缩短至数周。
Black Forest Labs联合创始人兼CEO Robin Rombach表示:"机器人技术是验证视觉智能能力最直接的场景之一。要生成逼真的视频,模型必须深刻理解物理世界的运作规律;而这种理解同样能够支撑模型在现实世界中采取行动。将FLUX 3对世界的建模能力与Mimic在机器人学习和部署方面的专业经验相结合,FLUX-mimic让机器人更容易适应新任务和新生产环境,而不再是每次都要针对单一任务重新工程化开发。"
目前,Mimic已与奥迪等制造业龙头企业共同落地FLUX-mimic。双方正在探索前沿视频动作模型如何有效缩短部署周期、降低工程投入并减少真实工业自动化场景中的机器人训练需求。
奥迪旗下拥有汽车行业自动化程度最高的生产网络之一,对传统自动化方案的局限性有着清醒的认识。尽管工业机器人领域已深耕数十年,涉及柔性零部件的精细操作任务至今仍主要依赖人工完成。高端汽车生产中繁杂的产品变体,使得按传统方式重新编程的机器人工作站改造成本高企。而基于学习的系统改变了这一局面,也为奥迪的长远愿景打开了通道——将工厂升级为智慧工厂,让AI与机器人成为员工的协作伙伴,提供个性化支持,并接管重复性、高体力消耗的工作。
奥迪生产实验室的Christoph Schneider表示:"与Mimic合作以来,奥迪一直在测试和部署FLUX-mimic。我们亲眼看到这些机器人解决了传统机器人根本无法完成的复杂柔性物体操作难题。这项新技术在辅助员工、提升效率、推动生产与物流环节灵活自动化方面,具有巨大的潜在价值。对我们而言,与Mimic、Black Forest Labs这样的先锋企业建立合作,是推动物理AI边界、在真实生产环境中验证创新成果的必要之举。"
Mimic Robotics联合创始人兼首席产品官Stephan-Daniel Gravert表示:"奥迪正是我们开发FLUX-mimic时心目中理想的制造业合作伙伴。他们的生产环境要求自动化系统足够灵活,能够应对非结构化任务;足够可靠,能够持续稳定运行;同时还要能够在无需数月工程投入的情况下顺利集成。通过与奥迪的合作,我们希望证明FLUX-mimic能够在真实生产线上切实满足这些要求。"
Q&A
Q1:FLUX-mimic是什么?它和普通机器人学习方案有什么不同?
A:FLUX-mimic是由Mimic Robotics与Black Forest Labs联合开发的新一代视频动作模型。与主流的视觉-语言-动作模型不同,FLUX-mimic以已经通过大规模视频预训练、理解物理动态的生成式视频模型为基础,再叠加动作解码器直接预测机器人动作。这使得模型对物理世界的理解更深入,对机器人示范数据的依赖大幅降低。
Q2:FLUX-mimic在训练效率上有多大提升?
A:FLUX-mimic的训练效率有大幅提升。针对特定操作任务的微调,仅需约30分钟的机器人数据,而此前的方案通常需要30小时以上。这意味着部署周期可以从原来的数月缩短至数周,显著降低了工业落地的时间成本和工程门槛。
Q3:FLUX-mimic在奥迪工厂中具体解决了什么问题?
A:奥迪工厂中,涉及柔性零部件的精细操作任务长期无法通过传统工业机器人实现自动化。FLUX-mimic的引入让机器人能够完成此类复杂的软体物体操作,填补了传统自动化的空白。奥迪表示,该技术在辅助员工、提升效率和推动生产与物流灵活自动化方面展现出巨大潜力。
