Puffin-World: Scaling a Unified Multimodal Model with Native 3D World States
Puffin-World:基于原生3D世界状态扩展统一多模态模型
机构 * S-Lab, Nanyang Technological University(南洋理工大学S-Lab) ; University of Michigan(密歇根大学) ; Beijing Jiaotong University(北京交通大学) ; ACE Robotics(ACE机器人公司)
AI总结 研究提出无需外部离线模块的Puffin-World统一多模态模型,联合建模三类原生3D世界状态与Omni-Camera表示,构建含1500万三元组的Puffin-16M数据集,支持多任务协同的闭环应用并发布相关资源。
Comments Project Page: https://kangliao929.github.io/projects/puffin-world/