论文:

Deep neural network-based cooperative visual tracking through multiple micro aerial vehicles

概要:

通过无人机集群(多架无人机协作,MAVs)的摄像头,对人体或动物目标进行检测和追踪,提出multirobot cooperative detection and tracking (MCDT)方法。

硬件:

每一个无人机都有独立的CPU和GPU,

其中深度神经网络的计算由Jetson TX1实现,

摄像头为单目透视摄像头,

无人机之间通过中央WIFI通信。

框架:

无人机集群目标检测和追踪方法学习(一)MCDT方法

文章内容:

 

1.提出估计需要的参数,6维的向量,前三维是3D欧几里德空间坐标向量,后三维是定向角度,并以6X6的协方差矩阵作为误差估计。其中K是无人机个数,t是帧数。

位置参数:

无人机集群目标检测和追踪方法学习(一)MCDT方法

误差估计:

无人机集群目标检测和追踪方法学习(一)MCDT方法

2.目标检测和跟踪方法:

目标检测模型使用SSD,兼顾速度和精度的trade-off,坐标估计使用无人机自带的位置估计(根据GPS和barometer-derived world coordinate system),姿态估计纠正使用扩展卡尔曼滤波(Extended Kalman Filter,EKF)方法。

程序流程:

无人机集群目标检测和追踪方法学习(一)MCDT方法

3.避障方法

无人机集群目标检测和追踪方法学习(一)MCDT方法

相关文章:

  • 2021-06-12
  • 2022-01-18
  • 2021-04-29
  • 2021-04-01
  • 2021-09-01
  • 2021-07-15
  • 2021-04-26
  • 2021-10-06
猜你喜欢
  • 2021-05-08
  • 2021-11-04
  • 2021-04-01
  • 2021-05-28
  • 2021-06-17
  • 2021-09-28
  • 2021-09-09
相关资源
相似解决方案