ToolVision: Learning When and How to Use Visual Tools with Capability-Aligned Supervision
ToolVision:通过能力对齐监督学习何时以及如何使用视觉工具
专题命中 工具调用 :agent(abstract);tool use(abstract);multi-agent(abstract);分类 cs.AI
AI总结 针对多模态模型工具使用监督错位问题,提出ToolVision方法,通过能力对齐的SFT与RL监督优化工具使用学习,在多个视觉基准上实现性能提升并将公开发布相关资源。
Comments 18 pages, 13 figures