Rethinking Fine-Tuning: Unlocking Hidden Capabilities in Vision-Language Models
重新思考微调:解锁视觉-语言模型中的隐藏能力
机构 * College of Engineering, Northeastern University(东北大学工程学院) ; Khoury College of Computer Science, Northeastern University(东北大学计算机科学学院)
AI总结 本文提出基于MFT的结构重参数化方法,通过重新组织VLMs内部子网络实现高效微调,超越LoRA和全微调,无需改变骨干网络。