We introduce MobileVLM V2, a family of significantly improved vision language models upon MobileVLM, which proves that a delicate orchestration of novel architectural design, an improved training scheme tailored for mobile VLMs, and rich high-quality dataset curation can substantially benefit VLMs' performance. Specifically, MobileVLM V2 1.7B achieves better or on-par performance on standard VLM benchmarks compared with much larger VLMs at the 3B scale. Notably, our 3B model outperforms a large variety of VLMs at the 7B+ scale. Our models will be released at https://github.com/Meituan-AutoML/MobileVLM .
FaStfact: Faster, Stronger Long-Form Factuality Evaluations in LLMs
UCLA(美国大学洛杉矶分校);CUHK(香港中文大学);HKUST (GZ)(香港科技大学(广州));HKUST(香港科技大学);Tsinghua University(清华大学);ECNU(华东师范大学);NVIDIA(英伟达);UCL(伦敦大学学院);HKU(香港大学);University of Cambridge(剑桥大学)
A Faster, Lighter and Stronger Deep Learning-Based Approach for Place Recognition
Xiamen University(厦门大学)
视觉位置识别是摄像机定位和环路闭合检测系统的重要组成部分,在计算机视觉、机器人和AR/VR等多个领域引起了广泛的兴趣。在这项工作中,我们提出了一种更快,更轻,更强大的方法,可以生成具有更少参数的模型,并且可以在推理阶段花费更少的时间。我们设计了RepVGG-lite作为我们的架构中的骨干网络,它比其他一般网络在地点识别任务中更具鉴别力。RepVGG-lite在实现更高性能的同时具有更多的速度优势。在特征提取阶段,我们只从全局描述符中提取一个尺度的块级描述符。然后,我们设计了一个可训练的特征匹配器,利用的空间关系的功能和他们的视觉外观,这是基于注意力机制。在具有挑战性的基准数据集上进行的综合实验表明,所提出的方法优于最近其他最先进的学习方法,并实现了更高的推理速度。我们的系统比Patch-NetVLAD少14倍的参数,低6.8倍的理论FLOPs,并且在特征提取和特征匹配中运行速度快21和33倍。此外,我们的方法的性能是0.5\%,比补丁NetVLAD在Recall@1。我们使用Mapillary Street Level Sequences数据集的子集对所有其他具有挑战性的条件进行实验。
Constructing Stronger and Faster Baselines for Skeleton-based Action Recognition
University of Chinese Academy of Sciences(中国科学院大学);Institute of Automation, Chinese Academy of Sciences(中国科学院自动化研究所);Shandong University of Science and Technology(山东科技大学);Artificial Intelligence Research, Chinese Academy of Sciences(中国科学院人工智能研究院)
Stronger, Faster and More Explainable: A Graph Convolutional Baseline for Skeleton-based Action Recognition
University of Chinese Academy of Sciences(中国科学院大学);Institute of Automation, Chinese Academy of Sciences(中国科学院自动化研究所);College of Electrical Engineering and Automation, Shandong University of Science and Technology(山东科技大学电气工程与自动化学院);School of Computer Science and Technology, Anhui University(安徽大学计算机科学与技术学院)
Lumina-Next: Making Lumina-T2X Stronger and Faster with Next-DiT
Shanghai AI Laboratory(上海人工智能实验室);The Chinese University of Hong Kong(香港中文大学);Beijing University of Posts and Telecommunications(北京邮电大学);Beihang University(北京航空航天大学);Nanyang Technological University(南洋理工大学)