Admire-ljb/VoLN-UAV

概览

解决什么问题

Vision-only long-horizon navigation for UAVs lacks a unified paradigm and benchmark that bridges vision-language navigation (VLN) with multimodal large language models (MLLMs), especially across simulation and real-world flight.

主要用例

• Training and evaluating VoLN-MLLM agents on the provided benchmark
• Comparing vision-only navigation methods in AirSim and real-world flights
• Extending the paradigm to new UAV platforms or sensor suites

次要用例

• Studying sim-to-real transfer for vision-language navigation
• Curriculum learning across 7,210 navigation episodes
• Integrating multimodal reasoning into UAV autonomy stacks

何时使用

考虑使用

• You need a standardized vision-only long-horizon navigation benchmark
• Your work involves multimodal LLMs for robotic navigation
• You can leverage AirSim for simulation and have access to real UAV hardware for validation

采用前需验证

• ? Real-world flight validation scope and hardware requirements
• ? Compute requirements for running the MLLM agent onboard or offboard
• ? MIT license compatibility with your project
• ? Active maintenance status for bug fixes and updates

从这里开始

采用检查清单

• 需验证 Real-world flight validation scope and hardware requirements
• 需验证 Compute requirements for running the MLLM agent onboard or offboard
• 需验证 MIT license compatibility with your project
• 需验证 Active maintenance status for bug fixes and updates

以上检查项只有在官方来源确认后才能标记为“已验证”；无法确认的保持未验证。

已知限制与未知项

已知限制

• Vision-only sensing (no LiDAR, radar, or multi-sensor fusion)
• Benchmark tied to AirSim simulator and specific real-world flight setups
• MLLM agent may require significant GPU compute not suitable for edge deployment
• No integrated flight stack; focuses on high-level navigation policy

替代与相关工具

相关工具

• airsim — 配套测试
• airsim — depends on

如何使用？

从下方记录的入口开始，然后对照技术清单进行验证。

• 官方网站 https://github.com/Admire-ljb/VoLN-UAV
• 仓库 https://github.com/Admire-ljb/VoLN-UAV
• 文档 https://github.com/Admire-ljb/VoLN-UAV

技术清单

• 通过 许可证已识别 已记录: MIT
• 通过 维护信号 活跃维护
• 通过 验证状态 官方确认
• 通过 已附加来源证据 1 个来源记录
• 需复核 已记录最新版本 未记录

官方链接

元数据与治理

数据集事实

以上事实仅来自官方数据集卡，未确认字段保持未知。

相关资源与依赖

• airsim — tested with (verified)
• airsim — depends on (confirmed)

近期动态

相关知识

下方相关指南/合集/对比的标题与摘要暂保留英文，待编辑翻译复核；事实字段与链接已验证且保持不变。

合集

• 航拍感知模型与数据集 — 面向检测与跟踪研究及原型开发的、有可靠来源的航拍数据集与模型仓库。
• 视觉感知模型与数据 — 面向空中视觉感知研究与原型开发的索引模型与数据集资源库。