ROS2视觉与控制——黑马程序员ROS2课程上课笔记(4)

opencv中的图像为BGR,摄像头为RGB

数字图像本质案例
实现图片显示
  • ai提示词
    帮我创建一个文件取名为01_create_image,要求通过opencv创建一张300×300的图片,背景为黑色,将第三行到第十行的内容为红色,并且输出效果
实现摄像头显示
  • ai提示词
    1、帮我创建一个文件02_read_camera,要求读取摄像头数据,并且进行显示
    2、将摄像头第50行50列到第100行200列的区域颜色设置为红色
hsv

H:色相

S:饱和度

V:亮度

  • ai提示词
    创建一个文件,取名为03_hsv_test,要求读取hsv的数据,将摄像头数据由BGR转换为hsv,对hsv进行分离显示
掩膜与形态学
形态学

腐蚀:只要覆盖的区域有一个像素是黑的,中心点就会变黑

膨胀:只要核覆盖区域里有一个是白的,中心点就会变白

步骤:先腐蚀后膨胀

hsv调节框选物体
  • ai提示词
    帮我创建一个文件,取名叫做04_HSV_MASK,要求读取摄像头数据,提供hsv调节方式,实时显示原图结果图,MASK图,要求提供腐蚀膨胀操作
物体实时坐标获取

1、读取摄像头数据

2、指定hsv阈值

3、指定腐蚀膨胀阈值

4、框选出物体

5、显示物体在图像中的实时坐标

  • ai提示词
    帮我创建一个文件取名05_hsv_mask_location,要求通过指定的hsv阈值范围,指定腐蚀膨胀值范围,来框选出感兴趣的物体边框,边框采用红色进行框选,并实时标注物体的中心点坐标。
ROS摄像头环境搭建

运行摄像头节点

复制代码
ros2 run usb_cam usb_cam_node_exe 

测试摄像头节点(订阅节点)(新建一个窗口)

复制代码
ros2 run rqt_image_view rqt_image_view
原生图像节点实现

ROS默认为RGB,opencv是BGR

  • ai提示词
    1、帮我在 \home\wind\dev_ws\src 下面创建vision_pkg,要求使用python语言进行开发,同时帮我创建一个节点,camera_native_node
    2、\home\wind\dev_ws\src\vision_pkg\vision_pkg\camera_native_node.py 需要订阅摄像头数据,获取摄像头数据后,通过opencv进行显示

打开摄像头节点

复制代码
ros2 run usb_cam usb_cam_node_exe 

运行刚刚新建的节点

复制代码
ros2 run vision_pkg camera_native_node
hsv图像节点实现
  • ai提示词
    在 \home\wind\dev_ws\src\vision_pkg\vision_pkg 中创建一个节点,取名hsv_image_node,要求订阅摄像头的广播数据,将订阅的图像数据经过转换交由opencv进行处理,处理的方式参考 \home\wind\dev_ws\src\vision_pkg\test\05_hsv_mask_location.py

    1. 构建工作空间

    cd /home/wind/dev_ws
    colcon build --packages-select vision_pkg
    source install/setup.bash

    2. 运行 HSV 图像处理节点

    ros2 run vision_pkg hsv_image_node

box识别节点实现
  • ai提示词

    在 \home\wind\dev_ws\src\vision_pkg 下创建一个节点,取名box_detect_node,要求参考 \home\wind\dev_ws\src\vision_pkg\vision_pkg\hsv_image_node.py 节点实现,但是不需要hsv和腐蚀膨胀调节的页面,需要将hsv和膨胀腐蚀阈值固定化,要求这些值方便我进行配置。当获取的图片中识别的坐标位置时,需要将这个坐标位置通过广播发布出去。

  • 打开rqt窗口查看话题信息

    ros2 run rqt_topic rqt_topic

相关推荐
qq_284274053 小时前
机械原理笔记:平面机构自由度计算(复合铰链、局部自由度、虚约束)与四杆机构入门(含考点)
笔记·学习·平面·自动化·制造
qq_284274054 小时前
数控铣床与加工中心笔记:铣刀与刀柄系统、G54试切对刀、镜像加工指令、孔加工工艺(钻扩铰镗)与固定循环G73/G83/G81/G76/G87/G84
笔记·学习·自动化·制造
Titan20245 小时前
MySQL访问个人学习笔记
笔记·学习·mysql
深圳老胡6 小时前
STM32CubeMX 生成 CMake 工程,用 VSCode 编译与调试的完整流程
笔记·stm32·单片机·代码规范
坤坤子吖7 小时前
C++智能指针:RAII、shared_ptr与内存泄漏
开发语言·c++·笔记·学习
乐橙开放平台7 小时前
智慧连锁客流检测和离岗检测怎么对接
大数据·人工智能·笔记·物联网·自动化·音视频·智能家居
零基础1237 小时前
FinalShell 使用教程:从安装到高效运维
运维·经验分享·笔记·finalshell
ACP广源盛139246256737 小时前
Type‑C 扩展坞方案选型笔记|国产 DP1.4 转 HDMI2.0 桥接芯片 GSV2201S @ACP评估
c语言·开发语言·笔记·硬件架构·硬件工程·国产芯片
敲个大西瓜8 小时前
langchain笔记(一)
redis·笔记·langchain
带金箍的至尊宝9 小时前
系统架构设计师笔记 05:第2章硬件与软件基础,冯诺依曼结构怎么考
数据库·笔记·系统架构