跳到正文
arXiv cs.RO· Jaewoo Park, Minyoung Lee, Sukmin Seo, Moonbin Yim, Hyunwook Yoon, Dohoon Ryu, Daehee Kim, Myungseo Song, Jihyuk Byun, Seunggyu Chang, Taeho Kil, Jiseob Kim, Bado Lee, Geewook Kim·· 4 小时前

DroneCATS 基准:评估多模态 LLM 作为通用 VLA 智能体控制无人机

Evaluating Multimodal LLMs as Generalist Vision-Language-Action Agents for Drone Control: Commanding, Approaching, Tracking and Searching

AI 导读

研究者提出 DroneCATS 基准,让 MLLM 通过四类动作直接控制无人机,覆盖目标可见性、目标运动、场景与模拟器变化,并扩展至真机与多机场景。评测十个 MLLM 发现,前沿模型成功率最高但延迟导致丢失移动目标,小型开源模型到达目标后常不宣告抵达。基于此微调的 2B 模型在仿真中成功率从 0% 升至 31%,真机飞行表现超过前沿模型;多机场景中每个无人机配一个子智能体的指挥方式成功率更高。

来源:arXiv cs.RO · arxiv.org