【飞控开发高级教程5】疯壳·开源编队无人机-视觉追踪

FutureX

COCOFLY教程

——疯壳·无人机·系列

视觉追踪

9 u/ |; y* w2 L
, w! K  E: V% u4 Q& m& @) G
    图1
( S+ y; Y0 N! t1 B4 h- T2 h( ?5 @" b
/ H, \( Y8 s' R" y( H8 l$ a5 I
    一、cocofly 视觉追踪简介
    cocofly 无人机支持视觉追踪，其视觉追踪的功能主要是依托于无人机支架底部的视觉识别模块 OPENMV 实现的，目前已经提供了循线追踪、颜色追踪以及图形码追踪的功能。
  L  i5 k/ q9 A" y, v: W  y5 I0 `    二、循线追踪
    cocofly 支持循线追踪功能，实现循线追踪的步骤如下。
0 c2 {6 X- x0 M0 R6 [5 v! O- Z    （1) 检查各个传感器是否正常，例如：光流模块、视觉模块， 如果正常即可打开循线模式：从遥控进入飞控设置打开“8.循线模式”如下图所示：
' d, J- l/ t$ v% g! s- H
   
$ |* E' D- c' c- h    图2
    （2）把飞机放在线上，启动一键起飞后，飞机将会根据线的形状自动判断循线飞行方向，然后自主循线飞行，如果检测不到线，则会自动降落。
" q1 w! a) m9 n" J4 k; S) o" {    自主循线过程中，遇到以下情况之一，飞机会自动停止循线并且自动降落：
    a.收到来自遥控器的自动降落命令；
    b.走到线的尽头；
5 J2 H+ S* D1 P% \9 \7 q    c.遇到 T 字路口。
    循线地图的线路的形状可以布置成直线、 曲线和直角三者的任意组合， 曲线弯曲半径建议大于 1 米，线宽 2~5 厘米最佳。
    在使用循线追踪模式的时候需要满足一下就几个条件：
    （1）环境光线良好，地面是白色的，并且有轻微的浅色花纹（建议在浅色的瓷砖地板上使用）；
% v( k; [% c) h5 }2 I. [    （2）需要跟随的线的颜色要跟地面不一样，差别越大越好（最好是纯黑色）；
    （3）需要跟随的线周围 1 米内不能有其他物体；
/ v8 ~8 F; A# M) B4 L# l    （4）循线高度不可太高，1 米左右最佳。
    三、追踪颜色
    cocofly 支持跟随追踪颜色功能，但目前只支持追踪黑色，可以在 OPENMV
5 |  Z! E/ h8 t9 Y1 i' r; o    的源码里面修改代码实现追踪其它颜色，实现跟随追踪颜色功能的步骤如下。
* z) {/ I& V- ~0 j# d: p0 q( a    （1) 检查各个传感器是否正常，例如：光流模块、视觉模块， 如果正常即可打开循线模式：从遥控进入飞控设置打开“5.跟随模式”如下图所示：
, I0 l0 `) _6 _# J
% c+ n. J' `; m: A# T
    图3
    （2）把飞机放在需要跟随的物体旁边，启动一键起飞后，飞机将会自动跟随白色地面上的黑色物体。
    使用 COCOFLY 的视觉跟随模式需要满足以下几个条件：
( U2 i' ~3 D2 Y- a* s4 k: P    （1）环境光线良好，地面是纯色的（最好是纯白色，白色瓷砖地板上也可以）；
0 z& ^' x; C3 |" k    （2）需要跟随的物体颜色要跟地面不一样，差别越大越好；
4 G. A4 G8 F. f    （3）需要跟随的物体周围半径 1 米内不能有其他物体；
    （4）跟随高度不可太高，跟随高度 1 米左右最佳。
& L3 u; n; t" Q3 }$ x) [    四、跟随图形码
5 N) Y9 k& K- h" V) J+ `* o    cocofly 支持跟随图形码功能，这里我们把特别制作了带有图形码的小车， 用来实现跟随小车的功能。
    cocofly 跟随图形码小车功能目前暂时不能通过遥控器实现，需要配合
6 X* k  s3 \5 `$ f* U' h    cocobit 编程板实现。具体实现方式如下表所示：

   
    表1
    cocobit 拖拽的代码示例如下：
8 @. d- _* K- `
' S" A0 d( [! S: O    
. m( ^) A+ d) ~4 u' s    图4
    下载该代码到 cocobit 后，cocobit 就会自动打开蓝牙，使用壳壳板的 app 会自动连接上或者微信小程序会自动搜索出来点击对应的 coocbit 进入二级菜单， 即可；把 cocobit 编程板插到遥控背后的卡槽，开启遥控器电源以及飞控电源， 等待遥控连接上飞控后，按下遥控上的“cocobit 编程模式”按键，直到 cocobit 编程模式指示灯亮起，则进入了 cocobit 编程模式，如下图所示。
: ^8 q" t5 P4 M  @5 Y/ j# N8 E, v) K4 U
   
    图5
, U; _' s6 m& E2 b- E( I. s8 |5 _    在微信小程序下点击蓝牙收发小助手。

* K+ v" w8 S3 U4 W, @9 Z    
: ~: Z  L' q4 v+ N' I. Z4 ^+ ^& A    图6
    在蓝牙小助手内（如下图所示）根据拖拽生成的指令发送对应的数字即可， 这里以追踪 1 号图形码小车为例，为了实现追踪 1 号图形码小车，先把小车打开电源放在飞机前方 20cm 处，需要发送“1”先让飞机起飞，起飞后发送“4” 让飞机追踪 1 号图形码小车，此时可以遥控小车到飞机底下，然后再遥控小车前往其它地方，会发现飞机在跟随着小车飞行；最后再发送“6”，飞机就会降落。
/ U% R- W0 |; ~6 c9 X4 n
( Z. E2 D: Y7 E9 p0 _    
) _4 u, I9 @9 l2 ~    图7
4 \% T$ F9 F/ H$ i! d! ?3 `
    跟随图像码的实验现象如下图所示。
# }3 h: e8 R& B0 r
+ E0 X, I& Y/ ], m( N% c    
2 s" N8 |+ ^7 v' v1 N  i    图8
    当然以上的指令只是一个示例，实际使用完全可以脱离小程序或者 APP，即不使用其无线功能，例如下图所示指令。

   
    图9
    值得注意的是指令下载到 cocobit 内，即使遥控和飞机连接上了而 cocobit 编程板也已经插在了卡槽里，飞机也不会立刻执行这些推拽生成的指令，只有在遥控连接上飞机，且按下了“cocobit 编程模式”按键后，飞机才会执行拖拽的指令。该示例中的现象是飞机会自动起飞然后进入到追踪图像码小车模式。

7 ~+ x2 n8 o% x1 ?$ b) u




# N. q& e! [9 I
) `9 R3 f6 q: ^5 o' T
    文件下载请点击： 【5】视觉追踪.pdf (442.06 KB, 下载次数: 2)

2022-7-26 11:12 上传

点击文件名下载附件
下载积分: 威望 -5

  e- J" R( W  \, o& j7 c* n1 u  G
) T1 B; v: n0 s( ]' {2 d3 c6 M" C2 m

521li

跟踪对无人机很重要，相当无人机的眼睛