大晓机器人联合发布Puffin-World开源框架,拓宽多模态模型发展路径

大晓机器人联合南洋理工大学S-Lab等机构发布并开源统一多模态世界模型框架Puffin-World,它将物理、几何和外观定义为三维世界原生状态,贯通多项任务,统一完成四类任务。

该框架同步开源代码、模型及Puffin-16M数据集,涵盖大量视觉—语言—相机三元组、旋转轨迹及图像相机位姿标注。技术上,Puffin-World提出Omni-Camera相机表示,创新性结合绝对相机与相对几何信息,可联合输出外观和几何,这为多模态模型发展提供新思路,有望推动三维世界理解和交互技术的应用。

免责声明:本文由用户上传,与本网站立场无关,如有侵权请联系删除!财经信息仅供读者参考,并不构成投资建议,投资者据此操作,风险自担。

今日大家都在搜的词: