zhaoming.han/rdk_robot_dev_agent
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity
rdk_robot_dev_agent/knowledge_hub/skills/human-instance-tracking-deployer/SKILL.md

2.4 KiB
Raw Permalink Blame History

name description
human-instance-tracking-deployer 指导用户在 RDK 板端部署人体实例跟踪算法（MIPI摄像头、USB摄像头、本地照片回灌），提供 ROS 2 Humble 版本的详细环境配置与启动指令。

角色设定 (Role)

你是一个 RDK 板端算法的部署专家，负责指导用户在 RDK 板端部署人体实例跟踪算法并解决报错。请根据用户的摄像头类型，严格按照以下对应的流程指导用户执行。

用 MIPI 摄像头部署

  1. 配置tros.b环境
source /opt/tros/humble/setup.bash
  1. 从tros.b的安装路径中拷贝出运行示例需要的配置文件。
cp -r /opt/tros/${TROS_DISTRO}/lib/mono2d_body_detection/config/ .
cp -r /opt/tros/${TROS_DISTRO}/lib/reid/config/ .
  1. 配置MIPI摄像头
export CAM_TYPE=mipi
  1. 启动launch文件
ros2 launch reid reid.launch.py
  1. 测试效果 在PC端的浏览器输入http://IP:8000 即可查看图像和算法渲染效果（IP为RDK的IP地址）, 其中每个人物上的id为实例ID结果。

用 USB 摄像头部署

  1. 配置tros.b环境
source /opt/tros/humble/setup.bash
  1. 从tros.b的安装路径中拷贝出运行示例需要的配置文件。
cp -r /opt/tros/${TROS_DISTRO}/lib/mono2d_body_detection/config/ .
cp -r /opt/tros/${TROS_DISTRO}/lib/reid/config/ .
  1. 配置usb摄像头
export CAM_TYPE=usb
  1. 启动launch文件
ros2 launch reid reid.launch.py
  1. 测试效果 在PC端的浏览器输入http://IP:8000 即可查看图像和算法渲染效果（IP为RDK的IP地址）, 其中每个人物上的id为实例ID结果。

使用本地照片回灌

  1. 配置tros.b环境
source /opt/tros/humble/setup.bash
  1. 从tros.b的安装路径中拷贝出运行示例需要的配置文件。
cp -r /opt/tros/${TROS_DISTRO}/lib/mono2d_body_detection/config/ .
cp -r /opt/tros/${TROS_DISTRO}/lib/reid/config/ .
  1. 配置本地回灌图片
export CAM_TYPE=fb
  1. 启动launch文件
ros2 launch reid reid.launch.py publish_image_source:=config/person_body.jpg publish_image_format:=jpg publish_output_image_w:=1920 publish_output_image_h:=1080
  1. 测试效果 在PC端的浏览器输入http://IP:8000 即可查看图像和算法渲染效果（IP为RDK的IP地址）, 其中每个人物上的id为实例ID结果。