Copilot 操控 Agent — 自然语言控制无人机

2025
AI Agent VLM 飞行控制 安全机制

司空 2 平台的 AI 操纵助手,用户通过自然语言(文本/语音)向 Copilot 下达指令,AI 实时控制无人机完成飞行、拍摄、搜索等复杂操控任务,无需专业飞行操控技能。

  • 自然语言解析:解析用户文本/语音指令,提取地点、动作、目标等信息,自动编排飞行、拍摄、搜索等多步骤任务流程
  • VLM 智能搜索:基于视觉语言模型进行实时目标检测,支持自定义检测标签,三层环形搜索扫描
  • 飞行控制全链路:智能飞向目标点、相对方向飞行、起飞/返航、POI 兴趣点环绕等
  • 安全交互机制:规划确认卡片(飞行前确认)、地址确认卡片、急停按钮绕过 AI 直达无人机
  • 多模态能力:拍照/录像/全景、镜头切换、喊话器 TTS 语音播报

AI 多模态目标检测

2025.10
AI 多模态 目标检测

基于多模态大模型的实时目标检测功能,在无人机直播画面中实时识别和标注目标,支持安防、巡检、搜救等多种场景下的智能分析。

  • 融合视觉与语言的多模态检测能力,支持自然语言描述检测目标
  • 实时视频流推理,低延迟标注检测结果
  • 支持自定义检测标签,灵活适配不同行业场景

AI 航线规划

2025.10
AI 航线规划 地图

基于智能算法的自动航线规划功能,结合地形数据和任务需求,自动生成最优飞行航线,大幅降低航线规划的专业门槛。

  • 基于地形模型和高程数据自动规划避障航线
  • 智能规划最佳飞行路线,自动绕行障碍物
  • 支持多种任务类型的航线自动生成

虚拟座舱 — 远程控制飞行器全功能驾驶舱

2023 – 至今
飞行控制 3D 可视化 AI 识别 多模态检测 安全机制

司空 2 核心的远程操控模块,项目管理员在浏览器中即可远程控制飞行器,下达指令或执行任务。支持大疆机场 1/2/3、Mavic 3 行业系列、Matrice 4 行业系列和 Matrice 400 等全系列设备。

  • 飞行操控全链路:一键起飞、指点飞行、智能环绕、键盘 WASD 操控、高速模式(15m/s)、一键返航/紧急降落/急停
  • 智能规划最佳飞行路线:基于视觉系统和地形障碍物数据,自动规划最优飞行路径,根据风速风向智能调整高度和速度
  • 云台相机操控:多镜头切换(广角/变焦/红外)、云台自由/锁定机身模式、视角跟随模式、框选变焦、双击归中、激光测距/打点
  • 多模态目标检测:支持文本描述、上传图片、截取直播画面三种方式输入搜索目标,AI 大模型意图理解后输出检测标签,实时目标告警通知
  • AI 识别 & 智能追踪:可见光/红外 AI 识别(人、车、船、移动目标),目标告警呼吸灯 + 音效提示,智能追踪锁定目标自动跟随
  • AR 投射:在直播画面上叠加标注点/线/面、返航点及 AR 街道投射,空地协同可视化
  • 配件操控:DJI AS1 喊话器(文件喊话/实时喊话)、DJI AL1 探照灯(常亮/爆闪)、三方 PSDK 配件集成
  • 多机操控:支持同时操控 1~4 台飞行器,快速切换控制权,一键触发返航/急停
  • 安全体系:飞行作业高/返航高设置、失联动作策略、低电量返航/严重低电量降落、避障音效提示、限飞区自动绕行

自定义飞行区 & 指令飞行升级 & 安全返航

2023.11
安全 飞行区 地图

项目级飞行空域管理系统,支持管理员自定义作业区、限飞区和禁降区,为无人机作业提供安全可管控的空域边界。

  • 自定义飞行区:多边形/圆形作业区、限飞区、矩形禁降区,精细管控飞行空域
  • 指令飞行升级:增强版实时操控指令系统,支持更灵活的飞行任务控制
  • 安全返航:基于地形障碍物的智能返航路径规划,确保飞行器安全返回

离线地图 · 地形障碍物避障

2023
离线地图 避障 高程数据

基于全球高程地图和项目三维模型的地形障碍物系统,飞行器根据障碍物信息自动规划最佳飞行路径,绕行障碍物模型确保安全抵达。

  • 融合项目内地图模型与全球高程地图数据,自动下发给飞行器
  • 飞行器自动绕行障碍物(水平安全距离约 10m,模型垂直距离约 30m)
  • 私有版支持离线高程数据导入,满足无网络环境部署需求
  • 主动避开 GNSS 严重遮挡区域,确保定位可靠性