基于C++的车辆装甲板检测自瞄系统

资源下载地址:https://download.csdn.net/download/sheziqiong/85773209
资源下载地址:https://download.csdn.net/download/sheziqiong/85773209

装甲板检测

由于在比赛过程中操作手是第一视角,很难用手动瞄准。通过装甲板检测就是自瞄系统,己方车辆可自动瞄准敌方车辆装甲板,对敌方造成有效的伤害。大大提高了射击精准度。

功能:检测装甲板的位置并把位置发送给电控

  • 在目标旋转时保证目标的位置的稳定性
  • 系统延时尽可能短
  • 在多目标时,保证打击的一致性

整体架构

文件描述

文件名 作用
main.cpp 算法主函数,包括多线程处理步骤
caffe_model.cpp 自己训练的装甲板贴纸分类模型
cctag_detector.cpp 老版圆形贴纸识别圆形的方法
coordinate_process.cpp 根据通信协议对最终左边进行处理的方法
detector_methods.cpp 装甲板检测的主要方法(包括预处理,逻辑判断等)
serialport.cpp Linux 下串口使用的文件
v4l2.cpp Linux 下利用 V4L2 来调节摄像头的曝光饱和度等参数。

装甲板检测流程图

基本原理

  1. 如果上一帧的 ROI 标志位为 true 则当前帧的检测区域在上一帧目标的附近,也就是用到了 ROl 方法,如果为 false 则全图搜索,此时将与 ROI 有关的变量全部清零。
  2. 对检测区域内的图进行二值化,也就是预处理,思路就是先将图片用灰度阈值进行二值化,这样子可以将图片中发光的物体给提取出来(装甲板灯条以及日光灯等等),然后再用某种方法将图片中红色或蓝色的区域提取出来,之后再膨胀腐蚀用形态学的方法连通断开的区域,使灯条的形状更加清晰以便于之后的逻辑判断。
    • 一种方法是用 RGB 的红蓝通道相减,根据设定的阈值得到一张二值图,这种方法虽好,但是在识别蓝色的时候,有时候无法排除掉日光灯干扰,该方法,操作简洁,耗时低。
    • 另一种是先将图片转化成 HSV 颜色空间再用通道范围将红色蓝色提取出来,这种方法可以排除掉很多干扰,但是近距离的时候装甲板灯条发白,如果膨胀不到位的话会出现灯条断裂的 情况,膨胀的卷积核过大又会造成预处理耗时过久,因此要权衡一下。
    • 还有一种是在 LAB 下利用 a 通道-b 通道来提取红色。这种方法对红色灯条提取的效果是最好的。但是却极容易把比较暗的,有一点带暗红色的物体都提取出来,容易形成过多的早点。

3.在当前二值图内找到所有的轮廓点,用最小旋转矩形将他们包围,此时得到一个个单独的旋转矩形,然后对旋转矩形的四个顶点重新排序,排除长大于宽的噪点,然后根据装甲板灯条的几何特征首先筛除掉一些旋转矩形。

 if((width/height)>2&&abs(angle)>25&&abs(angle)<70&&){continue;}

4.将这些灯条两两再次组成一个大的旋转矩形(也就是候选装甲板),根据一些限制条件筛除掉不符合条件的装甲板,将剩下的待选装甲板放入一个向量中。

//两两灯条间的角度差不符合的情况
if((abs(angle_1)>5&&abs(angle_1)<20)&&(abs(angle_2)>65&&abs(angle_2)<85)&&((abs(angle_2)>5&&abs(angle_2)<20)&&(abs(angle_1)>65&&abs(angle_1)<85))){
continue;}
//中心距根据灯条的长短分开设置
if(height_1<20||height_2<20){
    cha=10;}
else{
    cha=20;}
//进一步根据两条灯条的中心距和灯条面积比例等条件进一步筛选
//一下条件参数是根据640,480分辨率下设定的,不同分辨率条件值可能不一样
if(lantern_cha<cha&&(area_rate>rate2&&area_rate<rate1)) 
{
	double diameter=sqrt(pow(rectPoint[original_index_i].center.x-			rectPoint[original_index_j].center.x,2)+pow(rectPoint[original_index_i].center.y-rectPoint[original_index_j].center.y,2));
    if(diameter<35){continue;}
    //cout<<"d: "<<diameter<<endl;

    double average_height=(height_1+height_2)*0.5;
    cout<<"h: "<<average_height<<endl;
    double  bili=average_height/diameter;
    if(bili>0.8&&bili<1.8){continue;}
    if((diameter/average_height>2.5&&diameter/average_height<6)||(diameter/average_height>0.3&&diameter/average_height<2.5)){
        Point armour_center=(rectPoint[original_index_i].center+rectPoint[original_index_j].center)*0.5;
        circle(imgOriginal,armour_center,diameter/2,Scalar(0,255,255),1);//紫色
        Vec3f armour_message(armour_center.x,armour_center.y,diameter);
        armour.push_back(armour_message);
    }
}
  1. 经过上述操作后,我们最终把筛选出来的装甲板存入 amour 向量中。

    • 如果向量中没有元素,则说明没有找到目标,只有一个的话则这就是最终选择的装甲板。(只有一个装甲板的情况下不再进一步判断装甲板的真实性,及不再传入用装甲板训练的模型。这样做能保证目标的稳定性和代码的效率)
    • 两个以上装夹板的话就得进行接下去的比较,首先我们把距离图像下半部分及比较近的装甲板存为一组,然后从最近的开始用 caffe 模型进行验证。如果模型给出这个为真,则直接输出。

资源下载地址:https://download.csdn.net/download/sheziqiong/85773209
资源下载地址:https://download.csdn.net/download/sheziqiong/85773209

本图文内容来源于网友网络收集整理提供,作为学习参考使用,版权属于原作者。
THE END
分享
二维码
< <上一篇
下一篇>>