往期回顾:

RT-Thread智能车目标识别系统连载教程——手写体识别模型 (1)

RT-Thread智能车目标识别系统连载教程——训练卷积神经网络模型(2)

RT-Thread智能车目标识别系统连载教程——运行卷积神经网络模型(3)

RT-Thread智能车目标识别系统连载教程——Darknet 训练目标检测模型(4)

RT-Thread智能车目标识别系统连载教程——连接 ROS 小车控制(5)

开源|智能车目标识别系统连载教程—RT-Thread连接ROS摄像头小车控制(6)

引言

这应当是 RT-Thread 搭配 ROS 做摄像头小车的最后一篇文档了,这篇文档会把之前的内容汇聚起来,实现一个能目标检测的小车。

先总结一下之前几篇文档的内容:

这篇文档几乎涉及了之前所有文档的内容,所以建议在看这篇文档之前先熟悉一下之前提到的内容。如果对之前的内容比较熟悉了,就会发现这篇文档很简短,但是却是建立在之前已有的基础上。

现在应当已经熟悉的内容:

  • 了解 CNN 的工作原理;

  • 能使用 Darknet 训练自己的目标检测模型

  • 能用 rosserial 建立 RT-Thread 和 ROS 的连接

  • 能用 ROS 发布图像信息

下面就会介绍如何用 ROS 发布的图像信息和 Darknet 连接做目标检测。

1.Darknet ROS

1.1 获取源码

其实下面要用到的是一个 ROS 软件包,这个软件包现在也是开源的:

1# 初始化工作环境
2$ mkdir catkin_workspace
3$ cd catkin_workspace/src
4$ catkin_init_workspace
5
6## 下载源码
7$ git clone --recursive http://github.com/leggedrobotics/darknet_ros.git

除了源码,我们还要下载一些训练好的神经网络权值,放在下面这个目录:

1$ catkin_workspace/src/darknet_ros/darknet_ros/yolo_network_config/weights/

如果觉得国外下载速度太慢的话,这里我有个国内的 CDN 加速镜像:

  • yolov2-tiny.weights:https://wuhanshare-1252843818.cos.ap-guangzhou.myqcloud.com/yolov2-tiny.weights

  • yolov2.weights:https://wuhanshare-1252843818.cos.ap-guangzhou.myqcloud.com/yolov2.weights

  • yolov3.weights:https://wuhanshare-1252843818.cos.ap-guangzhou.myqcloud.com/yolov3.weights

如果源码和权值都下载好了,我们就可以准备编译了。

1.2 编译源码

为了保证 Darknet 能够获取到摄像头的数据,我们需要先告诉它摄像头的信息发布在哪里,修改这个文件:

1$ catkin_workspace/src/darknet_ros/darknet_ros/config/ros.yaml

把下面的 topic 修改为自己图像发布的位置,例如我这里发布在 /usb_cam/image_raw

1camera_reading:
2    topic: /usb_cam/image_raw
3    queue_size: 1

然后就可以编译软件包了,在 catkin_workspace 目录下:

1$ catkin_make

一切正常的话,编译就完成了,其实不需要做太多的工作,编译完记得更新一下环境变量,这样后面才能正常启动这个软件包。

1$ sorce devel/setup.bash

1.3 目标检测

在进行目标检测前,我们先启动 ROS 节点:

1$ roscore

然后启动一个摄像头节点:

1roslaunch usb_cam usb_cam-test.launch

这样就可以实时看到摄像头的数据了,摄像头在哪里其实不重要,既可以在小车上,也可以在电脑上,这也是 ROS 的优美之处,只要节点发布了摄像头消息,不管摄像头在哪, ROS 都能拿到处理:

接下来我们启动 Darknet 的节点:

1$ roslaunch darknet_ros darknet_ros.launch

下面这张图就可以看到有两个视频流,左边的是没有处理的实时图像,右边是运行了目标检测的结果:

2.总结

RT-Thread 作为实时操作系统负责控制,Linux 则负责提供丰富的软件包运行算法,两者相结合,互相取长补短还是配合地挺好的。

3.参考文献

Darknet ROS:https://github.com/leggedrobotics/darknet_ros

RT-Thread线上/下活动

1、RT-Thread开发者大会报名】 2019年RT-Thread开发者大会将登入成都、上海、深圳与开发者们见面,还有RT-Thread在中高端智能领域的应用、一站式RTT开发工具、打造IoT极速开发模式等干货演讲,期待您的参与!本次大会也设立了codelab动手实验室活动,开发者可在现场体验RT-Thread给开发带来的便捷!

立即报名

成都站即将开始

2、双十一返场优惠,仅限今日!凡是11月12日期间在淘宝@睿赛德运营店购买柿饼派和麻雀板即享包邮及降价优惠!

柿饼派购买链接(请复制至外部浏览器打开):https://item.taobao.com/item.htm?id=586627082894

淘口令(请复制全部红字后打开TB):【柿饼Pie 柿饼GUI 智能屏 非串口屏 RTThread GUI 显示屏模组 4.3】https://m.tb.cn/h.eHwNeVQ?sm=0abbfd 嚸↑↓擊鏈﹏接,再选择瀏覽→噐咑№亓;或復zんíゞ这句话₴d46RYFbqHAb₴后咑閞綯℡寳

麻雀1号购买链接(请复制至外部浏览器打开):https://item.taobao.com/item.htm?id=606684373403

淘口令(请复制全部红字后打开TB):【BK7252 麻雀1号 麻雀一号 开发板】https://m.tb.cn/h.eHwMXIF?sm=c499fc 嚸↑↓擊鏈ㄣ接,再选择瀏覽→噐咑ぺ鐦;或復ず■淛这句话¢g2fUYFbJvyQ¢后咑閞淘宀┡ē

#题外话# 喜欢RT-Thread不要忘了在GitHub上留下你的STAR哦,你的star对我们来说非常重要!链接地址:https://github.com/RT-Thread/rt-thread

你可以添加微信17775983565为好友,注明:公司+姓名,拉进 RT-Thread 官方微信交流群

RT-Thread

让物联网终端的开发变得简单、快速,芯片的价值得到最大化发挥。Apache2.0协议,可免费在商业产品中使用,不需要公布源码,无潜在商业风险。

长按二维码,关注我们

点击“阅读原文”报名线下培训/开发者大会

开源|RT-Thread 搭配 ROS 实现目标检测小车完结篇相关推荐

  1. 2020年国内最新最优目标检测(完结篇)提供下载链接

    点击蓝字关注我们 computerVision 计算机视觉战队 ● 扫码关注,回复:目标检测 ● 获取目标检测相关下载链接 今天我们的目标检测综述最后一章,也是这个系列的完结,希望有兴趣的同学可以从中 ...

  2. 开源库 | 监控视频中的目标检测与跟踪

    介绍一份来自卡内基梅隆大学开源的主要用于监控视频中目标检测与跟踪的开源库:Object_Detection_Tracking . 其赢得了 2019 Activities in Extended Vi ...

  3. caffe框架下目标检测——faster-rcnn实战篇操作

    原有模型 1.下载fasrer-rcnn源代码并安装 git clone --recursive https://github.com/rbgirshick/py-faster-rcnn.git 1) ...

  4. 80+开源数据集资源汇总(包含目标检测、医学影像、关键点检测、工业检测等方向)

    数据集下载汇总链接:https://www.cvmart.net/dataSets 数据集将会不断更新,欢迎大家持续关注! 小目标检测 AI-TOD航空图像数据集 数据集下载地址:http://m6z ...

  5. 目标检测算法终结篇:YOLOv7(非正式版)正式开源

    点击上方"小白学视觉",选择加"星标"或"置顶" 重磅干货,第一时间送达 请注意,这里的7,不是下一代YOLO,而是一个幸运数字,姑且可以看 ...

  6. 推荐几篇开源论文,包含人脸、目标检测跟踪、分割、去噪、超分辨率等

    本文推荐本周值得关注的已开源论文,包含图像超分辨率.利用疼痛类型之间的域迁移来识别马的疼痛表情的研究.人脸检测识别.图像去噪.分割.手写文本行分割.妆容迁移与卸妆.伪装物体检测等共计 12 篇. 其中 ...

  7. WACV 2021 论文大盘点 目标检测与图像分割篇(持续更新)

    来源:OpenCV中文网 ​ ​ 目标检测篇: ​ 本篇继续对目标检测相关论文进行整理,共计 14 篇.包含2D. 3D.雷达.小目标.带方向的.半监督目标检测.弱监督目标定位等. ​ 如有遗漏,欢迎 ...

  8. 深度学习笔记之使用Faster-Rcnn进行目标检测 (原理篇)

    Object Detection发展介绍 Faster rcnn是用来解决计算机视觉(CV)领域中Object Detection的问题的.经典的解决方案是使用: SS(selective searc ...

  9. MATLAB算法实战应用案例精讲-【图像处理】小目标检测(补充篇)(附python代码实现)

    目录 前言 常用数据集及性能评估 数据集 性能评估 改进方向 小目标检测分类

最新文章

  1. linux cp命令 前面,盘点Linux命令之Linux cp命令使用大全
  2. 零序电流计算软件_低压零序电流互感器的选择配置
  3. windowservice创建及部署
  4. 基于matlab水轮机期刊,基于MATLAB/SIMULINK的水轮机调节系统寻优
  5. 说一下对象或数组转JSON怎么转【fastjson】
  6. 给定数组A []和数字X,请检查A []中是否有对X | 使用两个指针算法,O(1)空间复杂度| 套装2...
  7. IoT -- (三) 2018 Top物联网项目排名
  8. 蚂蚁爬杆 java_java蚂蚁爬杆
  9. Spring之注入集合值
  10. SqlServer日常积累(二)
  11. python电脑录屏软件_可以推荐一款电脑录屏软件吗?
  12. <2021SC@SDUSC>开源游戏引擎Overload代码分析五:OvEditor——RawShaders.cpp
  13. OpenCV Mat类的convertTo函数,数据类型转换
  14. 你可能需要的各个行业年度总结 ppt 模板
  15. 【软路由】旁路由使用配置教程
  16. safari快捷图标不见了_桌面图标不见了怎么办?这里有妙招
  17. 网络安全框架知多少?
  18. 一个屌丝程序员的青春(三二三)
  19. 浅析安全启动(Secure Boot) —写得很好
  20. ubuntu: du指令

热门文章

  1. python画蜡烛致敬烈士_用matplotlib制作的比较满意的蜡烛图
  2. 萨班斯法案全文 Full Text of the Sarbanes-Oxley Act of 2002
  3. java的跨平台性与c语言,Java为什么具有跨平台性?
  4. 软文 “垂死项目”复活记
  5. 两化融合贯标方案简单版
  6. linux 网络参数设置命令
  7. 警醒!还在利用花呗套现的你!
  8. QQ群群排名如何进行SEO优化?
  9. 区块链之《Chia 技术架构》
  10. java aescounterrng_理性讨论,rng在第三把的counter位上选择潘森辅助是不是败笔?...