Isaac Sim 3（学习笔记5.8）

Isaac Sim 利用深度学习获取mask掩码图

参考内容

Kubernetes官网

在 Linux 系统中安装并设置 kubectl | Kubernetes准备开始 kubectl 版本和集群版本之间的差异必须在一个小版本号内。 例如：v1.30 版本的客户端能与 v1.29、 v1.30 和 v1.31 版本的控制面通信。 用最新兼容版的 kubectl 有助于避免不可预见的问题。在 Linux 系统中安装 kubectl 在 Linux 系统中安装 kubectl 有如下几种方法：用 curl 在 Linux 系统中安装 kubectl 用原生包管理工具安装 用其他包管理工具安装 用 curl 在 Linux 系统中安装 kubectl 用以下命令下载最新发行版：x86-64 ARM64 curl -LO "https://dl.k8s.io/release/$(curl -L -s https://dl.k8s.io/release/stable.txt)/bin/linux/amd64/kubectl" curl -LO "https://dl.k8s.io/release/$(curl -L -s https://dl.k8s.io/release/stable.txt)/bin/linux/arm64/kubectl" 说明： 如需下载某个指定的版本，请用指定版本号替换该命令的这一部分： $(curl -L -s https://dl.k8s.io/release/stable.txt)。例如，要在 Linux x86-64 中下载 1.30.0 版本，请输入：curl -LO https://dl.k8s.io/release/v1.30.0/bin/linux/amd64/kubectl 对于 Linux ARM64 来说，请输入：icon-default.png?t=N7T8https://kubernetes.io/zh-cn/docs/tasks/tools/install-kubectl-linux/使用Isaac Sim进行DNN图像分割教程

Tutorial for DNN Image Segmentation with Isaac Sim — isaac_ros_docs documentationicon-default.png?t=N7T8https://nvidia-isaac-ros.github.io/concepts/segmentation/unet/tutorial_isaac_sim.html设置开发环境等

isaac_ros_unet — isaac_ros_docs documentationicon-default.png?t=N7T8https://nvidia-isaac-ros.github.io/repositories_and_packages/isaac_ros_image_segmentation/isaac_ros_unet/index.html#quickstartDeveloper Environment Setup — isaac_ros_docs documentationicon-default.png?t=N7T8https://nvidia-isaac-ros.github.io/getting_started/dev_env_setup.html安装NVIDIA容器工具包

Installing the NVIDIA Container Toolkit — NVIDIA Container Toolkit 1.15.0 documentationicon-default.png?t=N7T8https://docs.nvidia.com/datacenter/cloud-native/container-toolkit/latest/install-guide.html#prerequisites

一.设置Docker、安装NVIDIA工具包、容器部署

这里我在别的地方写过，在下方链接的第二章内容中

Ubuntu20.04 ISAAC SIM仿真下载使用流程_ubuntu启动isaac sim后一直有rtx loading界面-CSDN博客文章浏览阅读1.4k次，点赞38次，收藏30次。Ubuntu20.04 ISAAC SIM仿真下载使用流程机器：华硕天选X2024显卡：4060Tiubuntu20.04安装显卡驱动版本：525.85.05_ubuntu启动isaac sim后一直有rtx loading界面https://blog.csdn.net/weixin_61044335/article/details/137866781?spm=1001.2014.3001.5501说实在的我不知道为什么nvidia不同文档写的下载的内容不一样，哪个是必要，哪个是不必要也不清晰，没办法我先把以前做过的东西放在这儿，我再去跟着官网走一遍捋一捋

二.跟着官网再走一次

我因为想拿到图像分割的掩码，于是跟着官网走Tutorial for DNN Image Segmentation with Isaac Sim — isaac_ros_docs documentation

提示要先完成isaac_ros_unet — isaac_ros_docs documentation 中1~9的内容，于是我又去这个网站

这里又要我根据 Developer Environment Setup — isaac_ros_docs documentation 说明来设置开发环境，好吧继续

在上文链接中我已经配置好了docker，继续走下一步

接下来是https://nvidia-isaac-ros.github.io/getting_started/dev_env_setup.html中的环境设置部分：

  1. On x86_64 platforms:

    1. Install the nvidia-container-toolkit using the instructions.

    2. Configure nvidia-container-toolkit for Docker using the instructions.

    On Jetson platforms: Follow this instruction to first set your Jetson up with SSD, then come back to this document and resume from Step 2.

  2. Restart Docker:

    sudo systemctl daemon-reload && sudo systemctl restart docker

  3. Install Git LFS to pull down all large files:

    sudo apt-get install git-lfs
    git lfs install --skip-repo

  4. Create a ROS 2 workspace for experimenting with Isaac ROS:

    For Jetson setup with SSD as optional storage:

    mkdir -p  /ssd/workspaces/isaac_ros-dev/src
echo "export ISAAC_ROS_WS=/ssd/workspaces/isaac_ros-dev/" >> ~/.bashrc
source ~/.bashrc

    mkdir -p  ~/workspaces/isaac_ros-dev/src
echo "export ISAAC_ROS_WS=${HOME}/workspaces/isaac_ros-dev/" >> ~/.bashrc
source ~/.bashrc

    We expect to use the ISAAC_ROS_WS environmental variable to refer to this ROS 2 workspace directory, in the future.

To further customize your development environment, check out this guide.

很好走完了，接下来去做图像分割的前置步骤：

  1. Clone isaac_ros_common and this repository under ${ISAAC_ROS_WS}/src.

    cd ${ISAAC_ROS_WS}/src

    git clone https://github.com/NVIDIA-ISAAC-ROS/isaac_ros_common.git

    git clone https://github.com/NVIDIA-ISAAC-ROS/isaac_ros_image_segmentation.git

  2. Pull down a ROS Bag of sample data:

    cd ${ISAAC_ROS_WS}/src/isaac_ros_image_segmentation && \
  git lfs pull -X "" -I "resources/rosbags/"

  3. Launch the Docker container using the run_dev.sh script:

    cd ${ISAAC_ROS_WS}/src/isaac_ros_common && \
  ./scripts/run_dev.sh

  4. Install this package’s dependencies.

sudo apt-get install -y ros-humble-isaac-ros-unet ros-humble-isaac-ros-triton ros-humble-isaac-ros-dnn-image-encoder

  1. Download the PeopleSemSegNet ShuffleSeg ETLT file and the int8 inference mode cache file:

    mkdir -p /tmp/models/peoplesemsegnet_shuffleseg/1 && \
  cd /tmp/models/peoplesemsegnet_shuffleseg && \
  wget https://api.ngc.nvidia.com/v2/models/nvidia/tao/peoplesemsegnet/versions/deployable_shuffleseg_unet_v1.0/files/peoplesemsegnet_shuffleseg_etlt.etlt && \
  wget https://api.ngc.nvidia.com/v2/models/nvidia/tao/peoplesemsegnet/versions/deployable_shuffleseg_unet_v1.0/files/peoplesemsegnet_shuffleseg_cache.txt

  2. Convert the ETLT file to a TensorRT plan file:

    /opt/nvidia/tao/tao-converter -k tlt_encode -d 3,544,960 -p input_2:0,1x3x544x960,1x3x544x960,1x3x544x960 -t int8 -c peoplesemsegnet_shuffleseg_cache.txt -e /tmp/models/peoplesemsegnet_shuffleseg/1/model.plan -o argmax_1 peoplesemsegnet_shuffleseg_etlt.etlt

  3. Create a file called /tmp/models/peoplesemsegnet_shuffleseg/config.pbtxt by copying the sample Triton config file:

    cp /workspaces/isaac_ros-dev/src/isaac_ros_image_segmentation/resources/peoplesemsegnet_shuffleseg_config.pbtxt /tmp/models/peoplesemsegnet_shuffleseg/config.pbtxt

  4. Run the following launch files to spin up a demo of this package:

    ros2 launch isaac_ros_unet isaac_ros_unet_triton.launch.py model_name:=peoplesemsegnet_shuffleseg model_repository_paths:=['/tmp/models'] input_binding_names:=['input_2:0'] output_binding_names:=['argmax_1'] network_output_type:='argmax' input_image_width:=1200 input_image_height:=632

    Then open another terminal, and enter the Docker container again:

    cd ${ISAAC_ROS_WS}/src/isaac_ros_common && \
  ./scripts/run_dev.sh

    Then, play the ROS bag:

    ros2 bag play -l src/isaac_ros_image_segmentation/resources/rosbags/unet_sample_data/

  5. Visualize and validate the output of the package by launching rqt_image_view in another terminal: In a third terminal, enter the Docker container again:

    cd ${ISAAC_ROS_WS}/src/isaac_ros_common && \
  ./scripts/run_dev.sh

    Then launch rqt_image_view:

    ros2 run rqt_image_view rqt_image_view

    Then inside the rqt_image_view GUI, change the topic to /unet/colored_segmentation_mask to view a colorized segmentation mask.

https://media.githubusercontent.com/media/NVIDIA-ISAAC-ROS/.github/main/resources/isaac_ros_docs/repositories_and_packages/isaac_ros_image_segmentation/isaac_ros_unet/peoplesemsegnet_shuffleseg_rqt.png/

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：/a/605559.html

如若内容造成侵权/违法违规/事实不符，请联系我们进行投诉反馈qq邮箱809451989@qq.com，一经查实，立即删除！

相关文章

gocator导出图片

gocator导出图片

想用3D扫描后的图片，但是系统自带的导出方法很麻烦，所以考虑通过sdk导出 首先需要设置点云亮度 这里是导出图片的关键代码 case GoDataMessageType.SurfaceIntensity: { Debug.WriteLine("SurfaceIntensity "); GoSu…
阅读更多...
AI换脸原理(2)——人脸检测参考文献S3FD：源码解析

AI换脸原理(2)——人脸检测参考文献S3FD：源码解析

1 介绍 S3FD是一个实时人脸检测器，这篇论文的主要思想是试图解决一个常见的问题，即基于anchor（锚点）的检测器随着人脸变小而急剧恶化。 基于锚点的目标检测方法是通过对一系列预设锚点进行分类和回归来检测目标的，这些锚点是通过在图像上有规律地平铺一组不同尺度和宽高比…
阅读更多...
凡尔码安全巡检卡替代传统纸质记录卡

凡尔码安全巡检卡替代传统纸质记录卡

建筑行业、物业管理、医院等行业的安全巡检的记录方式通常以：1、纸质记录：巡检人员使用纸质巡检表格，手动填写巡检时间、巡检区域、巡检发现的问题以及处理情况。这种方式简单直接，但可能存在信息记录不完整、易丢失等问题。 2、电…
阅读更多...
rust打包编译为mac或者linux可执行文件，发送到别的电脑不能运行

rust打包编译为mac或者linux可执行文件，发送到别的电脑不能运行

如果使用rust项目编译为linux或者mac可执行文件，发送到别的电脑之后，不可以直接运行，而是显示一个空白文件，双击也没有反应，其实这是因为这个文件没有可执行权限导致的，添加可执行权限就可以了：…
阅读更多...
用户至上！探索7种常用的用户体验研究方法

用户至上！探索7种常用的用户体验研究方法

用户体验研究是产品开放过程中的重要组成部分，优秀的产品设计与高质量的用户体验是不可分割的。对于产品开发，选择合适的用户体验研究方法在很大程度上决定了产品的使用效果。本文全面阐述了用户体验研究、用户体验研究的重要性和用户体验研究方法&#…
阅读更多...
Linux进程间通信：system V共享内存

Linux进程间通信：system V共享内存

目录 一、什么是共享内存 1.1创建共享内存 1.2释放共享内存 1.2.1shmctl 1.2.2shmat 1.2.3 shmdt 二、共享内存的实现及使用 2.1ShmClient 2.2Shm_Server 2.3Fifo.hpp 2.4Comm.hpp 一、什么是共享内存 标准系统V也叫system V的本地通信方式一般有三种： …
阅读更多...
行业新应用：电机驱动将成为机器人的动力核心

行业新应用：电机驱动将成为机器人的动力核心

电机已经遍布当今社会人们生活的方方面面，不仅应用范围越来越广，更新换代的速度也日益加快。按照工作电源分类，可以将它划分为直流电机和交流电机两大类型。直流电机中，按照线圈类型分类，又可以分为有铁芯的电机、空心…
阅读更多...
Redis 哨兵机制

Redis 哨兵机制

文章目录 哨兵机制概念相关知识铺垫主从复制缺陷哨兵工作流程选举具体流程理解注意事项 哨兵机制概念 先抽象的理解，哨兵就像是监工，节点不干活了，就要有行动了。 Redis 的主从复制模式下，⼀旦主节点由于故障不能提供服务&#…
阅读更多...
视频高效批量剪辑，一站式按顺序合并视频并添加精彩片头片尾，瞬间提升视频品质

视频高效批量剪辑，一站式按顺序合并视频并添加精彩片头片尾，瞬间提升视频品质

视频已成为传递信息、展示创意的最佳方式。但你是否也曾因为繁琐的剪辑工作而头痛不已？别担心，今天我们就来聊聊如何轻松实现视频的高效批量剪辑，让你的作品按顺序完美合并，同时增添上令人眼前一亮的片头片尾，让你的宣…
阅读更多...
【Python图像分类系列】建立CNN模型实现猫狗图像分类（案例+源码）

【Python图像分类系列】建立CNN模型实现猫狗图像分类（案例+源码）

这是我的第275篇原创文章。 一、引言 基于CNN卷积神经网络在图像识别领域的应用：猫狗图像识别。主要内容包含： 数据创建和预处理 神经网络模型搭建 神经网络模型的训练和拟合 文中使用的深度学习框架是Keras。部分数据展示： 猫&#xf…
阅读更多...
65-CPLD电路设计（安路为例）

65-CPLD电路设计（安路为例）

视频链接 CPLD电路设计（安路为例）01_哔哩哔哩_bilibili CPLD电路设计（以安路为例） 浅谈板级电源设计的三种方法_哔哩哔哩_bilibili 参考【浅谈板级电源设计的三种方法】 FPGA板级硬件实战S1～7课 实战Power2-电…
阅读更多...
【linux-IMX6ULL配置GPIO通用流程-以及时钟配置】

【linux-IMX6ULL配置GPIO通用流程-以及时钟配置】

目录 1. GPIO模式控制流程1.1 LED、蜂鸣器、按键1.2 GPIO控制流程 2. 标准库的简要分析及实现：2.1 问题引入：2.2 代码实现： 3. 时钟配置总结：3.1 时钟树概要：3.2 IMX6ULL时钟概要及时钟树：3.3 IMX6ULL时钟配…
阅读更多...
[C/C++] -- 代理模式

[C/C++] -- 代理模式

代理模式是一种结构型设计模式，允许一个对象（代理）控制另一个对象的访问。代理对象通常充当客户端和实际目标对象之间的中间人，从而控制对目标对象的访问，可以在访问前后进行一些额外的处理。 代理模式的优点包括&…
阅读更多...
Python通过定义类实现增删改查（期末考试）

Python通过定义类实现增删改查（期末考试）

python高级编程期末测试 别看我挣的少，但是我省的多，昨天法拉利又省下两百多万。 一、通过创建自己类来实现增删改查 我们已经利用模型实现单表的增删改查了 现在 我们不想使用模型来操作数据库 我们可以自己定义模型 那么 如何通过自己创建的类实现增…
阅读更多...
商标注册证下证的前后时间的注意！

商标注册证下证的前后时间的注意！

近日下了6个商标注册证，商标初审公告是3个月时间，如果没人提出异议，公告结束后1个月内基本上都可以拿到商标注册证电子版，没有纸制版的，凡是邮寄到付签收纸制商标注册证的基本都是骗。 对商标提出异议的主体平常会在公…
阅读更多...
2024年03月 C/C++（二级）真题解析#中国电子学会#全国青少年软件编程等级考试

2024年03月 C/C++（二级）真题解析#中国电子学会#全国青少年软件编程等级考试

C/C编程（1~8级）全部真题・点这里 第1题：满足条件的数的累加2 现有n个整数，将其中个位数为k的数进行累加求和 输入 第一行一个整数n。第二行n个非负整数，以空格分割，每个数不大于100000。第三行一个整数k。 …
阅读更多...
uniapp——列表分享当前话题（一个页面多个分享）

uniapp——列表分享当前话题（一个页面多个分享）

案例 分享的时候弹出对应的标题和默认第一张图片 代码 <view v-for"(item,index) in list" :key"index"><button open-type"share" :id"index" click.stop"()>{}"><image src"/static/images/cir…
阅读更多...
多客陪玩系统源码APP小程序H5陪玩开发伴游源码游戏陪玩平台源码陪玩平台开发约单源码线下陪玩接单平台app小程序H5源码游戏陪玩app小程序H5开发

多客陪玩系统源码APP小程序H5陪玩开发伴游源码游戏陪玩平台源码陪玩平台开发约单源码线下陪玩接单平台app小程序H5源码游戏陪玩app小程序H5开发

出售成品陪玩app小程序H5源码&#xff0c;免费搭建部署和售后服务&#xff0c;并提供源码二开、定制开发等相关服务。 一、陪玩app源码的功能介绍 1、语音聊天: 陪玩app小程序H5源码用户随时创建语音聊天室&#xff0c;实现多用户上麦功能&#xff0c;提高互动聊天体验。 2、游…
阅读更多...
五一劳动节：聚力开源，致敬劳动的力量

五一劳动节：聚力开源，致敬劳动的力量

阅读更多...
Apache SeaTunnel 4月回顾：明星贡献者与技术突破

Apache SeaTunnel 4月回顾：明星贡献者与技术突破

各位热爱 SeaTunnel 的小伙伴们&#xff0c;SeaTunnel 社区 4 月份月报来啦&#xff01;这里将记录 SeaTunnel 社区每月的重要更新&#xff0c;欢迎关注&#xff01; 月度 Merge 之星 感谢以下小伙伴 4 月为 Apache SeaTunnel 做的精彩贡献&#xff08;排名不分先后&#xff…
阅读更多...
最新文章

Copyright @ 2022~2023