此文章在我的博客链接：https://sublimerui.top/archives/d508d500.html

NOTES：上一篇相关博文，准备阶段OpenMV学习笔记链接：
https://blog.csdn.net/qq_41462923/article/details/97518023
https://sublimerui.top/archives/f10b0e1a.html

2019年电赛，前前后后经历了四天吧。从8月7好开始，到10号结束，浑浑噩噩，不分白昼地为了无人机的题目而努力吧。我的队友负责飞控，我也就负责视觉模块OpenMV程序的编写啦。虽然比赛下来感觉发挥不是特别好，但还是有所收获吧。这里，我把比赛自己用到的相关程序代码贴出来并做了简要总结。

无论如何都不能放弃呀！勤做笔记，加油！

无人机题目分析

今年的电赛题目着实让人觉得出题挺新颖的。新颖的同时，困难度就直线提升了（呜呜呜，我们队就是受害者之一，说好的光流可以定点呢，结果那种灰白条纹地面根本就定不住，真的想狠狠地吐槽一下砖家组）

哎，做下来大部分时间懵逼，都是一把辛酸一把泪呀~

言归正传，今年的电赛无人机题目B题——巡线机器人，具体要求是让我们的无人机从一个杆起飞，沿着线飞向宁一个杆，飞行过程中会拍摄条形码和二维码，绕杆一圈后，再降落。题目如下：

PS:这里附上2019年电赛的各方向题目，已经放在Github上：2019电赛题目.zip

逐类型分析

拍摄条形码和二维码并储存SD卡

有关于条形码和二维码的讲解我已将在上一篇博文中有所总结和归纳了，这里，直接贴上我写的部分代码吧，全部代码已经放在我的Github上面了，需要的话可以自己下载呐~

自己手写的完整程序已放在Github上：shot_images_to_save.py

条形码和二维码拍摄：
函数shot_images_while_tracking_lines()用于拍摄并储存找照片于SD卡中。其中，此段程序会分别对条形码连续循环拍3三张，分别命名为“barcod_1.jpg”，“barcod_2.jpg”和“barcod_3.jpg”（二维码同理），只要OpenMV插上了SD卡后，一旦识别到相关条码后，便会拍摄并自动保存到卡中。
完整程序代码中，如果识别到条形码，OpenMV就会闪绿灯拍照；识别到二维码后，OpenMV会闪红灯拍照。

############ 拍照 ###############barcode_num = 0
qrcode_num = 0# 拍摄照片
def shot_images_while_tracking_lines():#global had_finished_barcode, had_finished_qrcodeglobal barcode_detected, qrcode_detected, barcode_num, qrcode_numif barcode_detected: #and (not had_finished_barcode):#sensor.set_framesize(sensor.QVGA)#barcode_detected = 0if barcode_num <= 3:barcode_num += 1barcode_name = "barcode_" + str(barcode_num)sensor.snapshot().save(barcode_name + ".jpg")print(barcode_name + ".jpg is saved!")time.sleep(5)if barcode_num >= 3:barcode_num = 0#barcode_detected = 0print("bar:", barcode_detected)#had_finished_barcode = 1return Trueif qrcode_detected: #and (not had_finished_qrcode):#sensor.set_framesize(sensor.QVGA)#qrcode_detected = 0if qrcode_num <= 4:qrcode_num += 1qrcode_name = "qrcode_" + str(qrcode_num)sensor.snapshot().save(qrcode_name + ".jpg")print(qrcode_name + ".jpg is saved!")time.sleep(5)if qrcode_num >= 3:qrcode_num = 0#qrcode_detected = 0print("qr:", qrcode_detected)#had_finished_qrcode = 1return True

识别条形码（识别黄色）和二维码（二值化后计算像素点，设置阈值）：
此段程序中，函数count_pixels_with_movement(img)用于识别并判断识别条形码和二维码的条件和阈值。以条形码为例，这里通过色块识别的方法，调用img.find_blobs()函数，通过设置黄色阈值，达到识别到黄色条码的目的。其中，barcode_pixels_threshold是一个列表，储存的2个元素分别是黄色阈值下限和上限。
此外，我也尝试运用统计像素点的方式去识别二维码和条形码（这里已经被注释掉），其方法是先将图像按照一定的阈值二值化后，调用img.get_pixel()函数，统计满足像素值为255（即白色）的像素个数，同时，设定特定的像素阈值（如qrcode_pixels_threshold等等，与黄色检测同理，也有阈值上下限两个阈值），也可以达到同样的效果。

############ 像素识别 ###########barcode_cnt = 0
qrcode_cnt = 0
pole_cnt = 0
LED_ON = 0def count_pixels_with_movement(img):global x_width, y_heightglobal barcode_detected, qrcode_detectedglobal barcode_cnt, qrcode_cnt, pole_cntglobal LED_ONblob = img.find_blobs(barcode_pixels_threshold, pixels_threshold=150, area_threshold=150, merge=True, margin=5)if blob:passfor i in blob:img.draw_rectangle(i.rect(), color = 127)barcode_detected = 1LED_ON = 1print("132123132131313131112311231") #测试用，可删除print("aaaaaaaaaaaaaaaaaaaaaaaaaaaa")returnelse:barcode_detected = 0LED_ON = 0returnx_pos = 0y_pos = 0total_white_pixels = 0for x_pos in range(x_width):for y_pos in range(y_height):if img.get_pixel(x_pos, y_pos) == 255:total_white_pixels += 1#print("total white pixels are", total_white_pixels)
#    if total_white_pixels >= verticle_pixels_threshold[0] and \
#            total_white_pixels <= verticle_pixels_threshold[1]:       #直角
#        singleline_check.is_verticle = 2#    elif total_white_pixels >= track_line_pixels_threshold[0] and \
#            total_white_pixels <= track_line_pixels_threshold[1]:     #巡线
#        singleline_check.is_verticle = 1if total_white_pixels >= barcode_pixels_threshold[0] and \total_white_pixels <= barcode_pixels_threshold[1]:        #条形码if barcode_cnt >= 0 and barcode_cnt <= 49:barcode_cnt += 1if barcode_cnt == 50:barcode_cnt = -1barcode_detected = 1#        LED(1).toggle()  #红灯#        time.sleep(200)#        LED(1).toggle()#if total_white_pixels >= qrcode_pixels_threshold[0] and \#        total_white_pixels <= qrcode_pixels_threshold[1]:         #二维码#    if qrcode_cnt >= 0 and qrcode_cnt <= 49:#        qrcode_cnt += 1#    if qrcode_cnt == 50:#        qrcode_cnt = -1#        qrcode_detected = 1#        LED(3).toggle()   #蓝灯#        time.sleep(200)#        LED(3).toggle()#elif total_white_pixels >= near_the_pole_threshold[0] and \#        total_white_pixels <= near_the_pole_threshold[1]:         #到达杆#    if pole_cnt >= 0 and pole_cnt <= 49:#        pole_cnt += 1#    if pole_cnt == 50:#        pole_cnt = -1#        send_flag.pole_is_near = 1print("the flags are: %d %d %d"%(barcode_detected, qrcode_detected, send_flag.pole_is_near))   #测试用，可删除

OpenMV巡线

自己手写的完整程序已放在Github上：detect_and_track_edges.py

方法一（拟合两杆间直线）

巡线的时候，使用的是最小二乘法的线性回归算法，即运用img.get_regression()函数（这里打开了鲁棒算法robust = True，效果更好），计算其拟合直线后的结果，并拥有两个返回值（误差偏离值singleline_check.flag2.rho()和偏角值singleline_check.flag2.theta()）

#找线
def found_line(img):#对图像所有阈值像素进行线性回归计算。这一计算通过最小二乘法进行，通常速度较快，但不能处理任何异常值。 若 robust 为True，则将#使用泰尔指数。泰尔指数计算图像中所有阈值像素间的所有斜率的中值。thresholds：追踪的颜色范围singleline_check.flag2 = img.get_regression([(255,255)], robust = True)if (singleline_check.flag2):#print(clock.fps())singleline_check.rho_err = abs(singleline_check.flag2.rho())-0 #求解线段偏移量的绝对值if singleline_check.flag2.theta()>90: #求解角度的偏移量singleline_check.theta_err = singleline_check.flag2.theta()-0else:singleline_check.theta_err = singleline_check.flag2.theta()-0#在图像中画一条直线。singleline_check.flag2.line()意思是(x0, y0)到(x1, y1)的直线；颜色可以是灰度值(0-255)，或者是彩色值#(r, g, b)的tupple，默认是白色img.draw_line(singleline_check.flag2.line(), color = 127)#print(singleline_check.theta_err)

拟合示意图如下，（其中，红色的为拟合直线）：

PS：此方法准确度较高，但是OpenMV图像视野范围有限。当直线从图像视野最下端到达最上端，换算成无人机横向移动的距离仅有5-10cm，当无人机超出此范围时，将无法获取直线了，有一定的局限性。

方法二（拟合识别条纹边缘）

此函数track_edges(img)中，同样使用img.find_blobs()找色块的方法，其中运用了简单角度和距离的计算方法。并返回条纹底色边界线的拟合直线，此函数的计算结果为拟合直线距离画面左边界距离rho和中心线的偏离角度theta。

def track_edges(img): #invert = Trueblobs = img.find_blobs([edge_thresholds], pixels_threshold=50, area_threshold=50, merge=False, margin=5)if blobs:sum_x = 0sum_theta = 0for i in range(len(blobs)):img.draw_rectangle(blobs[i].rect(), color = 127)sum_x += (blobs[i].x() + blobs[i].w())sum_theta += math.degrees(blobs[i].rotation())per_x = sum_x / len(blobs)per_y = y_height / 2per_theta = sum_theta / len(blobs)if per_theta >= 0 and per_theta < 90:true_theta = 90 - per_thetaelif per_theta >= 90 and per_theta <180:true_theta = (180 - per_theta) + 90print("per_x: %d per_y: %d true_theta: %d"%(per_x, per_y, true_theta))horizontal_line = (int(per_x), int(per_y), 0, int(per_y))centre_cross    = (int(per_x), int(per_y))img.draw_line(horizontal_line, color = 127)img.draw_cross(centre_cross, color = 127)singleline_check.rho_err = int(per_x)singleline_check.theta_err = int(true_theta)line.flag = 1uart.write(pack_linetrack_data())

拟合示意图如下（其中，红色的为拟合直线）：

这样，当检测到条纹边界的时候，会计算拟合出条纹边界的直线。

PS：注意，使用这种方法一定要打开白平衡和自动增益！！！非常重要！！！我们队就吃了这样的亏，使得OpenMV距离地面较近的时候识别正常，一旦远离地面一定距离后，图像中将无法识别边界直线！！！

#在这里，应该将自动增益和白平衡打开
sensor.set_auto_gain(True)
sensor.set_auto_whitebal(True)

飞机悬停定圆点

定特定颜色的原点时，将运用img.find_blobs()函数（这里将图像二值化了），返回色块其中心坐标cx()和cy()即可。对于不同的颜色的色块（如题目中的红色），需要实地测试得到不同的阈值。
这里的返回值为圆点中心坐标、像素大小和标志位。

自己手写的完整程序已放在Github上：main.py

找圆点函数：

# 点检测函数
def check_dot(img):#thresholds为黑色物体颜色的阈值，是一个元组，需要用括号［ ］括起来可以根据不同的颜色阈值更改；pixels_threshold 像素个数阈值，#如果色块像素数量小于这个值，会被过滤掉area_threshold 面积阈值，如果色块被框起来的面积小于这个值，会被过滤掉；merge 合并，如果#设置为True，那么合并所有重叠的blob为一个；margin 边界，如果设置为5，那么两个blobs如果间距5一个像素点，也会被合并。for blob in img.find_blobs(thresholds, pixels_threshold=80, area_threshold=80, merge=True, margin=5):if dot.pixels<blob.pixels():#寻找最大的黑点##先对图像进行分割，二值化，将在阈值内的区域变为白色，阈值外区域变为黑色img.binary(thresholds)#对图像边缘进行侵蚀，侵蚀函数erode(size, threshold=Auto)，size为kernal的大小，去除边缘相邻处多余的点。threshold用#来设置去除相邻点的个数，threshold数值越大，被侵蚀掉的边缘点越多，边缘旁边白色杂点少；数值越小，被侵蚀掉的边缘点越少，边缘#旁边的白色杂点越多。img.erode(2)dot.pixels=blob.pixels() #将像素值赋值给dot.pixelsdot.x = blob.cx() #将识别到的物体的中心点x坐标赋值给dot.xdot.y = blob.cy() #将识别到的物体的中心点x坐标赋值给dot.xdot.ok= 1#在图像中画一个十字；x,y是坐标；size是两侧的尺寸；color可根据自己的喜好设置img.draw_cross(dot.x, dot.y, color=127, size = 10)#在图像中画一个圆；x,y是坐标；5是圆的半径；color可根据自己的喜好设置img.draw_circle(dot.x, dot.y, 5, color = 127)print("centre_x = %d, centre_y = %d"%(dot.x, dot.y))#判断标志位 赋值像素点数据dot.flag = dot.okdot.num = dot.pixels#清零标志位dot.pixels = 0dot.ok = 0

剩下的其他功能自己就没有写啦(T＿T)，比赛四天太紧张了，这样已经很不错了，已经是全部成果~

感谢你的耐心阅读呀(๑◡๑)，原创总结不易，收藏并评论一下呗~

你的支持就是我前进的动力呀~

2019电赛--无人机题目OpenMV总结相关推荐

2019电赛--OpenMV学习笔记
此文章在我的博客链接:https://sublimerui.top/archives/f10b0e1a.html NOTES:2019电赛结束啦~辛辛苦苦4天后,现已经写成了针对题目的OpenMV总结 ...
2019电赛总结（一）
2019电赛总结(一) 文章目录 2019电赛总结(一) 4 那之前 5 电赛初期 6 电赛中期 7 电赛强化练习 8 电赛预热阶段8月初 9 那以后 4 那之前 2019电赛总结(序) 5 电赛初期 ...
2019电赛总结(序）
2019电赛总结(序) 文章目录 2019电赛总结(序) 1 序 2 嵌入式与单片机省赛落败 3 电赛启航 4 PID简述 5 那之后电赛的一些经验 1 序鄙人于某工大集成电路设计专业就学,但电子 ...
2019电赛纸张计数仪分析——————致敬“谢谢惠顾”
2019电赛国赛还没出结果,但我感觉我应该是"成功参与"了. 就不给大家讲讲我们的方案----进行一波反思. 先看传感器我们用的fdc2214,没什么问题.问题出在了主控板上,我现 ...
2019电赛 H题-电磁炮视觉部分
2019电赛-H题-电磁炮-视觉自瞄部分; 硬件平台: Jetson Nano, Realsense D435 实现功能:识别到引导标志反馈坐标及距离,串口输出 #include <iostre ...
[随笔]2019省电赛无人机题（B题）总结
2019/8/7~2019/8/10在江苏赛区参加了省电子设计竞赛,这次也是省电赛和全国电赛重合的一年选择的题目是无人机题先说结果吧,直接白给了,挺遗憾的电赛结束挺久了,作为一个从飞行器设计转到 ...
2019电赛----模拟电磁曲射炮
1.吐槽电赛 2019.TI杯8月2号电赛号角其实已经吹响,虽然仅仅是清单公布,但是淘宝上早已经腥风血雨,特别是带处理器的摄像头openmv.大功率舵机以及云台一售而空,作为只会控制题的本小白,当然不 ...
模拟电磁炮国一设计资料【2019电赛H题国一作品】
经历重重测试,从初赛杀进综测再到去上海复测,真是一路坎坷啊!回顾电赛准备阶段,在实验室基地的我们熬了多少个夜,废寝忘食的学习-仅仅是为了能更有信心的面对电赛:在电赛的四天三夜中我们经历了太多,我们将近 ...
2019电赛复测测试题
对于这个2019的题目,刚好适合在电赛前练练手,对于这个复测要求在五个小时内,三个人一起完成,时间还是比较紧的,需要极强的心理素质和能力.所以在这里提供我的思路. 原理:通过振荡电路产生方波,通过可调 ...

2019电赛--无人机题目OpenMV总结