所有移动的事物都将变得自主化。 所有自主化的事物都需要先进的实时感知。
NVIDIA这一最新宣布,向ROS开发者社区提供整套感知技术。对于寻求将先进视觉和/ML功能纳入基于ROS的机器人应用程序的开发人员来说,这将缩短开发时间并提高性能。
Open Robocs将扩展用于NVIDIA AI的ROS
Open RoboTIcs首席执行官Brian Gerkey表示:“随着越来越多的ROS开发人员利用硬件平台,这些平台包含额外的计算功能,旨在减轻主机的负担,ROS正在发展,以更容易有效地利用这些先进的硬件资源。我们与NVIDIA这样的算领导者合作,以及其在人工智能和机器人技术创新方面的丰富经验,将为整个ROS社区带来很大益处。”
NVIDIA和Open RoboTIcs已达成协议,将在NVIDIA Jetson边缘AI平台和基于的系统上加速ROS 2性能,并在 Omniverse 上实现 Open RoboTIcs 的 Ignition Gazebo 和 NVIDIA Isaac Sim 之间的无缝模拟互操作性。
NVIDIA Jetson 平台在很多应用领域中被机器人专家广泛采用。它旨在为机器人提供高性能、低延迟的处理,使其具有响应性、安全性和协作性。Open Robotics将通过升级ROS 2来高效管理位于NVIDIA Jetson平台上的GPU和其他处理器之间的数据流并共享内存,使负责实时处理摄像头和等高带宽数据的应用性能得到大幅提升。
除了增强机器人应用在Jetson上的部署,Open Robotics和NVIDIA正在制定整合 Ignition Gazebo 和 NVIDIA Isaac Sim 的计划。NVIDIA Isaac Sim已支持开箱即用的ROS 1和2,并通过连接Blender和Unreal Engine 4等流行应用来创建一个至关重要的3D内容生态系统。
Ignition Gazebo数十年来在整个机器人界,包括在正在进行的DARPA Subrranean Challenge等高知名度比赛中创造了许多纪录。
通过连接这两个模拟器,ROS开发者可以轻松地在Ignition Gazebo和Isaac Sim之间移动他们的机器人和环境以运行大型模拟,还可以使用高保真动力学、精确传感器模型和逼真渲染等两个模拟器的先进功能来生成用于训练和AI模型的数据。
此次合作所产生的预计将于2022年春季发布。
为ROS发布的Isaac GEM速度显著加快
用于ROS的Isaac GEM是一款使ROS开发者更容易在Jetson平台上构建高性能解决方案的硬件加速包。这些GEM专注于提高图像处理和基于DNN的感知模型的吞吐量,而后者对机器人专家而言正变得日益重要。这些软件包减少了主机CPU的负载,同时显著提升了性能。
用于ROS的全新Isaac GEM包含:
● SGM Stereo Disparity和 Point Cloud
● Color Space Conversion和Lens Distortion Correction
● AprilTags Detection
图1 ROS对立体相机的支持,在ROS的Rviz中可以看到左侧和右侧相机视图。Rviz能显示RGB和深度图像。
Isaac Sim的新功能为ROS开发者提供便利
本的Isaac Sim包含对ROS开发者社区的重要支持,其中比较引人注目的是ROS2导航栈和MoveIt运动规划框架。这些示例今天即开放使用,并可在Isaac Sim文档中找到:
Isaac Sim中的ROS示例列表
● ROS April Tag
● ROS Stereo Camera
● ROS Navigation
● ROS TurtleBot3 Sample
● ROS Manipulation和Camera Sample
● ROS Services
● MoveIt Motion Planning Framework
● Native ROS Usage
● ROS2 Navigation
图2 Isaac Sim on Omniverse功能模块图,包含机器人模型、环境模型和3D输入。
Isaac Sim生成用于训练感知的合成数据集
除了作为一个机器人模拟器之外,Isaac Sim还具备一套强大的功能,可以生成合成数据来训练和测试感知模型。随着机器人专家将更多的感知功能集成到他们的平台,这些功能将变得更加重要。显然,机器人对环境的感知能力越强,它的自主性就越强,所需的人为干预就越少。
一旦Isaac Sim生成了合成数据集,就可以将它们直接输入NVIDIA TAO(一个AI模型自适应平台),从而根据机器人的具体工作环境调整感知模型。在从目标环境中采集任何实际数据之前,就可以确保机器人的感知栈在特定工作环境中的表现。
长期以来,机器人专家在连接和集成经典机器人任务(如导航)和AI感知栈方面一直面临着各种挑战。Isaac Sim通过同时作为机器人和合成数据生成工具并与TAO训练平台进行集成解决了这一工作流程挑战。
https://www.ixigua.com/7010968939471569416?utm_source=xiguastudio
更多精彩内容,敬请期待 ROS World和2021年GTC大会
NVIDIA正在为2021年10月21日至22日的ROS World做准备。我们计划为Jetson开发者发布更多新的GEM,包括多个常用的DNN。我们还将发布多项支持ROS开发者社区的Isaac Sim功能。欢迎莅临我们的虚拟展台,参加NVIDIA ROS圆桌会议,观看关于Isaac Sim的技术演示等精彩内容。
在即将于11月8日至11日举行的GTC大会上,NVIDIA将为大家带来精彩纷呈的演讲、讲座和内容。我们专为机器人开发者准备了一个通道,其中包含Open Robotics首席执行官兼联合创始人Brian Gerkey的演讲。此外,我们还将举办涵盖NVIDIA Jetson、Isaac ROS、Isaac Sim、Isaac GYM等主题的讲座。
即刻启程
即刻体验NVIDIA AI Perception,请使用以下链接:
点击此处用于ROS 的Isaac GEM
点击此处进一步了解Isaac Sim
点击此处获取关于使用Isaac Sim生成合成数据的教程
点击此处进一步了解使用Tao工具包加速训练
上一篇:瓴盛科技迎新战略投资者 携手小米赋能产业发展
下一篇:使用莱迪思Automate解决方案集合实现具有预测性维护功能的电机控制
推荐阅读
史海拾趣
中移物联网自2012年成立以来,便致力于物联网专用网络的建设。根据中国移动的整体战略布局,公司开发并运营了物联网连接管理平台OneLink和物联网应用开放平台OneNET,为各行业提供稳定、高效的物联网连接服务。这些平台的建立,不仅满足了市场对于物联网连接的需求,也为公司后续业务的拓展奠定了坚实基础。
随着市场的不断变化和消费者需求的升级,泽耀科技(Ashining)意识到只有不断创新才能在竞争中立于不败之地。公司加大了对研发的投入,引进了一批高素质的研发人才,并建立了完善的研发体系。经过多次尝试和实验,泽耀科技成功突破了某项关键技术,并推出了升级版的产品。这些新产品不仅性能更加优越,而且具有更高的性价比,深受消费者的喜爱。
泽耀科技(Ashining)深知品质是企业生存和发展的关键。因此,公司始终将品质管理放在首位,从原材料采购到生产流程控制,再到产品出厂检验,每一个环节都严格把控品质。同时,泽耀科技还注重品牌建设,通过提升产品形象和服务水平,逐渐树立了良好的品牌形象。
高频电子深知技术创新是企业持续发展的核心动力。因此,公司一直保持着对研发的持续投入,不断推出新产品、新技术和新服务。同时,高频电子还积极与高校、科研机构等合作,共同开展前沿技术的研发和应用。这些努力使得高频电子在技术创新方面始终保持着领先地位,为公司的长期发展奠定了坚实的基础。
综上所述,高频电子通过战略转型、技术创新、全球化布局、多元化业务布局以及持续投入研发等举措,实现了从一家小型国防合同制造商到全球领先的高科技供应商的华丽蜕变。这些故事不仅展现了高频电子的发展历程和成就,也为我们揭示了企业成功背后的关键因素。
高频电子深知技术创新是企业持续发展的核心动力。因此,公司一直保持着对研发的持续投入,不断推出新产品、新技术和新服务。同时,高频电子还积极与高校、科研机构等合作,共同开展前沿技术的研发和应用。这些努力使得高频电子在技术创新方面始终保持着领先地位,为公司的长期发展奠定了坚实的基础。
综上所述,高频电子通过战略转型、技术创新、全球化布局、多元化业务布局以及持续投入研发等举措,实现了从一家小型国防合同制造商到全球领先的高科技供应商的华丽蜕变。这些故事不仅展现了高频电子的发展历程和成就,也为我们揭示了企业成功背后的关键因素。
[OPENVOIP.CN讯] VOIP在经历了2005年的快速发展和2005年底的“封杀”风波之后,进入了崭新的2006年,从各种渠道传出的消息可以看出,2006年应该是VOIP行业的关键一年,政策的逐步开放及行业市场的渐渐成熟,都使我们面临着新的局面和新的选择。 ...… 查看全部问答∨ |
|
ShellExecuteEx 大家分析一下为什么没有在指定的窗口里显示? // 窗体的创建: m_hHtmlWnd = ::CreateWindow (DISPLAYCLASS, NULL, dwStyle, &nb ...… 查看全部问答∨ |
实验要求: 利用8255并行接口控制的原理。 TPC-H实验向上有两个七段的LED数码显示管,要求用其做秒表显示(从00~59循环计数),每分钟误差不大于1秒。 利用8255的A口作LED数码显示的段驱动,C口输出作为位驱动(显示刷新频率不低于30次每秒) T ...… 查看全部问答∨ |
uchar code ffw[8]={0xfe,0xfc,0xfd,0xf9,0xfb,0xf3,0xf7,0xf6}; //反转uchar code rfw[8]={0xf6,0xf7,0xf3,0xfb,0xf9,0xfd,0xfc,0xfe}; //正转看到C语言写控制程序的时候都写类似的一些语句,很想知道为什么是里面的那些数,是随便想的还是有根据 ...… 查看全部问答∨ |
我用msp430f2002做开发板。在JTAG接口接到6.7.8.9.11管脚后。这几个管脚便无法使用了。这个问题怎么解决的啊~ 我是个新手,才学430不久。… 查看全部问答∨ |
#include "msp430x54x.h" //*********************************************************** const char testconst[6] = { 0x0, 0x3, 0x0, 0x3, 0x0, 0x3 }; void main(void) { WDTCTL = WDTPW + WDTHOLD; ...… 查看全部问答∨ |
AVR与STC等一些不跑操作系统的单片机,我们要想对其进行编程,首先需要了解其内部寄存器的配置,例如:做串口通信时,需要了解串口波特率、字长、校验位等相关信息的寄存器配置。芯片中各个寄存器所代表的信息不要求你能背下来,只需要你能理解,当 ...… 查看全部问答∨ |
- 下载Vishay最新通信解决方案 赢取超赞移动电源
- 用富士通Cortex-M3 Easy Kit开发板,DIY出你的精彩!l
- ADI有奖直播:基准电压源产品技术及应用选择 7月25日上午10:00-11:30 不容错过~
- “搜器件”小程序又添新功能!
- Littelfuse 碳化硅(SiC) MOSFET和肖特基二极管产品介绍及相关应用
- TE 官微人工客服功能上线,可以与 TE 技术专家直接微信沟通了!
- 电感知识大考:遇到这些问题怎么办?|“MPS电感探索季:发现小且不凡的秘密!”第一站
- 【温故喝新之单片机版块】温2016年MCUs,喝2017年版块新篇章
- TI有奖直播:伺服驱动器中电流和电压测量解决方案
- TE白皮书下载|《散热桥技术——电子设备散热领域的创新》