传统图像处理方法实现车辆计数
创始人
2024-05-28 16:12:08
0

本文通过传统OpenCV图像处理方法实现单向行驶的车辆计数。用于车辆检测的视频是在https://www.bilibili.com/video/BV1uS4y1v7qN/?spm_id_from=333.337.search-card.all.click里面下载的。

思路一:来自B站某教程。大致是在视频中选取一窄长条区域,统计每帧图像中车辆检测框的中心点落入该区域的数量求和。在实现中发现该方法受限于窄长条区域的位置和高度和设置,计数效果也不好。

具体实现步骤如下:
Step1 读取视频每帧,做高斯滤波、阈值分割等处理;
Step2 背景差分,可以使用MOG或者KNN等算法;
Step3 图像形态学处理;
Step4 车辆连通域轮廓提取;
Step5 计算各个连通域的中心坐标,若落在指定区域则计数加1。
该方法思路还是很清晰的,其中包含大量传统图像处理方法,适合初学者用来练手。

一个可能的功能实现编码展示如下:

#include 
#include const int IMAGE_WIDTH = 1280;
const int IMAGE_HEIGHT = 720;
const int LINE_HEIGHT = IMAGE_HEIGHT / 2;
const int MIN_CAR_WIDTH = 80;
const int MIN_CAR_HEIGHT = 40;
const int OFFSET = 6;
const int KSIZE = 9;//计算检测框的中心
cv::Point get_center(cv::Rect detection)
{return cv::Point(detection.x + detection.width / 2, detection.y + detection.height / 2);
}int main(int argc, char** argv)
{cv::VideoCapture capture("test.mp4");cv::Mat frame, image;cv::Mat kernel = cv::getStructuringElement(cv::MORPH_RECT, cv::Size(KSIZE, KSIZE));int frame_num = 0;int count = 0;cv::Ptr mogSub = cv::createBackgroundSubtractorKNN(5, 50);while (cv::waitKey(20) < 0){capture >> frame;if (frame.empty())break;frame_num ++;cv::GaussianBlur(frame, image, cv::Size(KSIZE, KSIZE), KSIZE);cv::threshold(image, image, 100, 255, cv::THRESH_BINARY);mogSub->apply(image, image);if (frame_num < 5)continue;cv::morphologyEx(image, image, cv::MORPH_ERODE, kernel);cv::morphologyEx(image, image, cv::MORPH_DILATE, kernel, cv::Point(-1,-1), 3);cv::morphologyEx(image, image, cv::MORPH_CLOSE, kernel);cv::morphologyEx(image, image, cv::MORPH_CLOSE, kernel);std::vector hierarchy;std::vector> contours;cv::findContours(image, contours, hierarchy, cv::RETR_EXTERNAL, cv::CHAIN_APPROX_NONE);std::vector center_points;for (size_t i = 0; i < contours.size(); ++i){cv::Rect rect = cv::boundingRect(cv::Mat(contours[i]));if (rect.width < MIN_CAR_WIDTH || rect.height < MIN_CAR_HEIGHT)continue;cv::Point center_point = get_center(rect);center_points.push_back(center_point);for (auto p : center_points){if (p.y > LINE_HEIGHT - OFFSET && p.y < LINE_HEIGHT + OFFSET)count++;}cv::rectangle(image, rect, cv::Scalar(255, 0, 0), 1);}cv::cvtColor(image, image, cv::COLOR_GRAY2BGR);cv::putText(image, "car num: " + std::to_string(count), cv::Point(20, 50), cv::FONT_HERSHEY_SIMPLEX, 0.7, cv::Scalar(0, 0, 255), 1);cv::line(image, cv::Point(0, LINE_HEIGHT), cv::Point(IMAGE_WIDTH, LINE_HEIGHT), cv::Scalar(0, 0, 255));cv::imshow("output", image);}capture.release();return 0;
}

视频中向上通行的车辆一共52辆,但是该算法统计出60辆,误差还是不小的。由于效果一般,就不展示动图结果了。

思路二:除了Step5和思路一不一样之外其他相同。把落在指定区域则计数增加改为撞线计数法。
撞线计数法的步骤如下:
(1)计算初识检测框的中心点,
(2)读取视频的后续帧,计算新目标和上一帧图像中检测框中心点的距离矩阵;
(3)通过距离矩阵确定新旧目标检测框之间的对应关系;
(4)计算对应新旧目标检测框中心点之间的连线,判断和事先设置的虚拟撞线是否相交,若相交则计数加1。

一个可能的功能实现编码展示如下:

#include 
#include const int IMAGE_WIDTH = 1280;
const int IMAGE_HEIGHT = 720;
const int LINE_HEIGHT = IMAGE_HEIGHT / 2;
const int MIN_CAR_WIDTH = 80;
const int MIN_CAR_HEIGHT = 40;
const int KSIZE = 9;//计算检测框的中心
std::vector get_centers(std::vector detections)
{std::vector detections_centers(detections.size());for (size_t i = 0; i < detections.size(); i++){detections_centers[i] = cv::Point(detections[i].x + detections[i].width / 2, detections[i].y + detections[i].height / 2);}return detections_centers;
}//计算两点间距离
float get_distance(cv::Point p1, cv::Point p2)
{return sqrt(pow(p1.x - p2.x, 2) + pow(p1.y - p2.y, 2));
}//判断连接相邻两帧对应检测框中心的线段是否与红线相交
bool is_cross(cv::Point p1, cv::Point p2)
{return (p1.y <= LINE_HEIGHT && p2.y > LINE_HEIGHT) || (p1.y > LINE_HEIGHT && p2.y <= LINE_HEIGHT);
}int main(int argc, char** argv)
{cv::VideoCapture capture("test.mp4");cv::Mat frame, image;cv::Mat kernel = cv::getStructuringElement(cv::MORPH_RECT, cv::Size(KSIZE, KSIZE));int frame_num = 0;int count = 0;std::vector detections_center_old;std::vector detections_center_new;cv::Ptr mogSub = cv::createBackgroundSubtractorKNN(5, 50);while (cv::waitKey(20) < 0){capture >> frame;if (frame.empty())break;frame_num++;cv::GaussianBlur(frame, image, cv::Size(KSIZE, KSIZE), KSIZE);cv::threshold(image, image, 100, 255, cv::THRESH_BINARY);mogSub->apply(image, image);if (frame_num < 6)continue;cv::morphologyEx(image, image, cv::MORPH_ERODE, kernel);cv::morphologyEx(image, image, cv::MORPH_DILATE, kernel, cv::Point(-1, -1), 3);cv::morphologyEx(image, image, cv::MORPH_CLOSE, kernel);cv::morphologyEx(image, image, cv::MORPH_CLOSE, kernel);std::vector hierarchy;std::vector> contours;cv::findContours(image, contours, hierarchy, cv::RETR_EXTERNAL, cv::CHAIN_APPROX_NONE);std::vector detections;for (size_t i = 0; i < contours.size(); ++i){cv::Rect detection = cv::boundingRect(cv::Mat(contours[i]));	detections.push_back(detection);if (detection.y + detection.height > LINE_HEIGHT){cv::rectangle(frame, detection, cv::Scalar(255, 0, 0), 1);}}if (frame_num == 6){detections_center_old = get_centers(detections);#ifdef DEBUGstd::cout << "detections_center:" << std::endl;for (size_t i = 0; i < detections_center_old.size(); i++){std::cout << detections_center_old[i] << std::endl;}
#endif // DEBUG}else if (frame_num % 2 == 0){detections_center_new = get_centers(detections);#ifdef DEBUGstd::cout << "detections_center:" << std::endl;for (size_t i = 0; i < detections_center_new.size(); i++){std::cout << detections_center_new[i] << std::endl;}
#endif // DEBUGstd::vector> distance_matrix(detections_center_new.size(), std::vector(detections_center_old.size())); //距离矩阵for (size_t i = 0; i < detections_center_new.size(); i++){for (size_t j = 0; j < detections_center_old.size(); j++){distance_matrix[i][j] = get_distance(detections_center_new[i], detections_center_old[j]);}}#ifdef DEBUGstd::cout << "min_index:" << std::endl;
#endif // DEBUGstd::vector min_indices(detections_center_new.size());for (size_t i = 0; i < detections_center_new.size(); i++){std::vector distance_vector = distance_matrix[i];float min_val = *std::min_element(distance_vector.begin(), distance_vector.end());int min_index = -1;if (min_val < LINE_HEIGHT / 5)min_index = std::min_element(distance_vector.begin(), distance_vector.end()) - distance_vector.begin();min_indices[i] = min_index;
#ifdef DEBUGstd::cout << min_index << " ";
#endif // DEBUG}std::cout << std::endl;for (size_t i = 0; i < detections_center_new.size(); i++){if (min_indices[i] < 0)continue;cv::Point p1 = detections_center_new[i];cv::Point p2 = detections_center_old[min_indices[i]];#ifdef DEBUGstd::cout << p1 << " " << p2 << std::endl;
#endif // DEBUGif (is_cross(p1, p2)){
#ifdef DEBUGstd::cout << "is_cross" << p1 << " " << p2 << std::endl;
#endif // DEBUGcount++;}}detections_center_old = detections_center_new;}cv::putText(frame, "car num: " + std::to_string(count), cv::Point(20, 50), cv::FONT_HERSHEY_SIMPLEX, 2, cv::Scalar(0, 0, 255), 2);cv::line(frame, cv::Point(0, LINE_HEIGHT), cv::Point(IMAGE_WIDTH, LINE_HEIGHT), cv::Scalar(0, 0, 255));cv::imshow("output", frame);}capture.release();return 0;
}

效果展示如下:
在这里插入图片描述
可以看到检测框并不准确,会偏大偏小,还会和主体一分为二,这和传统算法预处理的局限性有关,即不具备普适性和鲁棒性。改进后的思路二检出55辆车,比思路一有一定提升。
在两百行C++代码实现yolov5车辆计数部署(通俗易懂版)中,我们可以看到强大的深度学习工具对车辆计数问题的精度带来巨大的提升。

相关内容

热门资讯

Python|位运算|数组|动... 目录 1、只出现一次的数字(位运算,数组) 示例 选项代...
张岱的人物生平 张岱的人物生平张岱(414年-484年),字景山,吴郡吴县(今江苏苏州)人。南朝齐大臣。祖父张敞,东...
西游西后传演员女人物 西游西后传演员女人物西游西后传演员女人物 孙悟空 六小龄童 唐僧 徐少华 ...
名人故事中贾岛作诗内容简介 名人故事中贾岛作诗内容简介有一次,贾岛骑驴闯了官道.他正琢磨着一句诗,名叫《题李凝幽居》全诗如下:闲...
和男朋友一起优秀的文案? 和男朋友一起优秀的文案?1.希望是惟一所有的人都共同享有的好处;一无所有的人,仍拥有希望。2.生活,...
戴玉手镯的好处 戴玉手镯好还是... 戴玉手镯的好处 戴玉手镯好还是碧玺好 女人戴玉?戴玉好还是碧玺好点佩戴手镯,以和田玉手镯为佳!相嫌滑...
依然什么意思? 依然什么意思?依然(汉语词语)依然,汉语词汇。拼音:yī    rán基本解释:副词,指照往常、依旧...
高尔基的散文诗 高尔基的散文诗《海燕》、《大学》、《母亲》、《童年》这些都是比较出名的一些代表作。
心在飞扬作者简介 心在飞扬作者简介心在飞扬作者简介如下。根据相关公开资料查询,心在飞扬是一位优秀的小说作者,他的小说作...
卡什坦卡的故事赏析? 卡什坦卡的故事赏析?讲了一只小狗的故事, 我也是近来才读到这篇小说. 作家对动物的拟人描写真是惟妙...
林绍涛为简艾拿绿豆糕是哪一集 林绍涛为简艾拿绿豆糕是哪一集第三十二集。 贾宽认为是阎帅间接导致刘映霞住了院,第二天上班,他按捺不...
小爱同学是女生吗小安同学什么意... 小爱同学是女生吗小安同学什么意思 小爱同学,小安同学说你是女生。小安是男的。
内分泌失调导致脸上长斑,怎么调... 内分泌失调导致脸上长斑,怎么调理内分泌失调导致脸上长斑,怎么调理先调理内分泌,去看中医吧,另外用好的...
《魔幻仙境》刺客,骑士人物属性... 《魔幻仙境》刺客,骑士人物属性加点魔幻仙境骑士2功1体质
很喜欢她,该怎么办? 很喜欢她,该怎么办?太冷静了!! 太理智了!爱情是需要冲劲的~不要考虑着考虑那~否则缘...
言情小说作家 言情小说作家我比较喜欢匪我思存的,很虐,很悲,还有梅子黄时雨,笙离,叶萱,还有安宁的《温暖的玄》 小...
两个以名人的名字命名的风景名胜... 两个以名人的名字命名的风景名胜?快太白楼,李白。尚志公园,赵尚志。
幼儿教育的代表人物及其著作 幼儿教育的代表人物及其著作卡尔威特的《卡尔威特的教育》,小卡尔威特,他儿子成了天才后写的《小卡尔威特...
海贼王中为什么说路飞打凯多靠霸... 海贼王中为什么说路飞打凯多靠霸气升级?凯多是靠霸气升级吗?因为之前刚到时确实打不过人家因为路飞的实力...
运气不好拜财神有用吗运气不好拜... 运气不好拜财神有用吗运气不好拜财神有没有用1、运气不好拜财神有用。2、拜财神上香前先点蜡烛,照亮人神...