OpenAI机械手“自学”完成单手解魔方_历史上今天-电子工程世界

分享到: 微博; QQ; 微信; LinkedIn

近日，人工智能研究组织OpenAI在构建通用自学机器人方面取得了新的里程碑。该组织的机器人部门表示，其去年首次开发的类人机器人手Dactyl，已经学会了单手解魔方。

OpenAI将这一壮举视为机器人附件灵巧性以及自家AI软件的巨大飞跃，AI软件使Dactyl可以在面临实际挑战之前，利用虚拟仿真学习虚拟任务中的新任务。

据报道，OpenAI是一家以人工智能和机器学习研究而闻名的公司，其周二展示了能解开三阶魔方的机械手。这套名为Dactyl的机械手是通过使用称为自动域随机化（ADR）和强化学习的新技术进行训练的。在过去的Dota 2中，Dactyl所采用的强化学习算法已经证明了它可以对抗人类对手。

OpenAI机械手“学习”解开三阶魔方技术

名为Dactyl的机械手是通过使用称为自动域随机化（ADR）和强化学习的新技术进行训练的。在过去的Dota 2中，Dactyl所采用的强化学习算法已经证明了它可以对抗人类对手。

新技术ADR通过生成越来越难以训练的Dactyl训练场景来帮助教机械手解决古老的难题。自动域随机化的方式如下：

ADR从单一的非随机环境开始，在该环境中，神经网络学习了如何解开三阶魔方。随着神经网络在任务中变得更好并达到性能阈值，域随机化的数量会自动增加。

由于神经网络现在必须学会将其推广到更随机的环境，因此这使任务更加艰巨。神经网络不断学习，直到再次超过性能阈值，然后再进行更多随机化，然后重复该过程。

团队认为，ADR是一项重大进步，因为逐步困难的训练模拟的建立“使我们摆脱了对真实世界的准确模型的束缚，并使在模拟中学习到的神经网络的转移能够应用于真实世界。 ”

有些人并不完全相信增强学习是否是未来此类机器人的方法。Berenson在谈到该主题时暗示了一种更传统的方法：“到今天结束时，将会有一些学习过程－可能是强化学习。但是我认为那些过程实际上应该晚得多。”

关键字：OpenAI 机械单手解魔方引用地址：OpenAI机械手“自学”完成单手解魔方

上一篇：餐饮行业成本居高不下，送餐机器人成行业“王牌”
下一篇：苏州成功打造了国内首条自主设计的OLED照明G2.5代量产线

据外媒报道，当地时间10月16日，特斯拉首席执行官埃隆·马斯克（Elon Musk）发Twitter表示，一种改进Autopilot功能的新型芯片将于6个月后在公司所有新生产的电动汽车中投入使用。马斯克在推文中称，该新型芯片将使特斯拉Autopilot的性能提高500%至2000%。传感器没有变化，该芯片是Autopilot计算机的简单替换。将为那些订购了全自动驾驶汽车的用户进行免费...

2019年10月17日 | M31円星科技Memory Compiler 与GPIO获ISO 26262 车用安全最高等级ASIL-D认证

台湾新竹-2019年10月17日-全球精品IP开发商円星科技(M31 Technology, 6643-TW)今天宣布，继高速接口IP MIPI M-PHY后，其所开发的Memory Compiler 与GPIO IP 也获德国认证机构SGS-TÜV颁发「ISO 26262车用安全最高等级ASIL-D Ready」认证，提供安全可靠的车用电子设计解决方案。ISO 26262被国际车界誉为当今「最先进的汽车安全标准」，并且成为全...

2020年10月17日 | SA：今年Q2智能手机AP收益58亿美元，高通第一，海思第二

市调机构Strategy Analytics的最新报告显示，2020年第二季度全球智能手机应用处理器（AP）市场规模达58亿美元，同比增长20%。其中，高通以32%的收益份额保持领先地位。海思排名第二，份额为22%。苹果以19%的份额排名第三。其次是联发科和三星LSI。该报告指出，虽然全球智能手机AP出货量同比下降16％，但是价格更高的5G AP需求填补了不足，最终实现20%的...

2021年10月17日 | 瑞萨：以40纳米为界，分划自产与外包代工

日经亚洲近日专访了日本半导体供应商瑞萨的高管，谈及了公司的未来发展的总体规划。据日经亚洲评论10月13日报道，瑞萨高管Sailesh Chittipeddi向记者透露，虽然公司依然坚持芯片自主制造计划，但先进工艺节点会选择外包给台积电等代工厂。他说：“从长远来看，更先进的节点我们将不得不依赖第三方，对于任何比成熟工艺的40纳米更高级的芯片，我们都必须依...

史海拾趣

Aborn Electronics Inc公司的发展小趣事

在激烈的市场竞争中，成本控制是企业生存和发展的重要因素之一。Aborn Electronics深知这一点，因此在供应链管理上下了大力气。公司与多家优质供应商建立了长期稳定的合作关系，确保了原材料的稳定供应和质量可靠。同时，通过对生产流程的不断优化和改进，降低了生产成本，提高了生产效率。这些措施使得Aborn Electronics的产品在市场上更具竞争力。

AOS公司的发展小趣事

进入20世纪，AOS公司开始将目光投向热水领域。1936年，公司研发出了著名的“金圭特护内胆”技术，这一创新在热水器行业中引起了革命性的变化。金圭内胆不仅提高了热水器的耐用性和安全性，也大幅提升了产品的能效。这一技术的推出使AOS公司迅速成为热水领域的领先者，并奠定了其在全球热水器市场的领导地位。

Eastman Kodak Company公司的发展小趣事

伊士曼柯达公司由发明家乔治·伊士曼于1880年创立，最初名为伊斯曼干版公司。伊士曼的初衷是提供一种更便捷、更经济的摄影方式，以满足大众对摄影的日益增长的需求。他通过不断的研发和创新，成功推出了易于使用的胶卷和相机，使摄影技术得以普及。这一创新不仅改变了摄影行业的格局，也为伊士曼柯达公司的后续发展奠定了坚实的基础。

Hitron公司的发展小趣事

进入21世纪后，随着数码技术的迅速崛起，传统摄影市场遭受了巨大的冲击。面对这一挑战，伊士曼柯达公司开始尝试向数码领域转型。然而，由于公司在数码技术方面的积累相对较少，转型过程并不顺利。尽管如此，柯达仍然坚持创新，不断推出新的数码产品，以应对市场的变化。同时，公司还加强了与数码技术公司的合作，共同研发新产品，以提高市场竞争力。

Abundance Enterprise Company公司的发展小趣事

Abundance Enterprise Company注重品牌建设和市场推广工作。公司通过多种渠道加强品牌宣传和推广，提高品牌知名度和美誉度。同时，公司还积极参与社会公益活动，履行企业社会责任，树立了良好的企业形象。这些举措有效提升了公司的市场竞争力，为公司的快速发展提供了有力保障。

ACL staticide公司的发展小趣事

问答坊 | AI 解惑

学习C 和编程的50个观点下面的是学C++时要注意的。绝对经典！！ 1.把C++当成一门新的语言学习（和C没啥关系！真的。）； 2.看《Thinking In C++》，不要看《C++变成死相》； 3.看《The C++ Programming Language》和《Inside The C++ Object Model》,不要因为他 ...… 查看全部问答∨	反转式串联开关电源储能滤波电容的计算开关电源原理与设计（连载七） 1-3-3．反转式串联开关电源储能滤波电容的计算反转式串联开关电源储能滤波电容参数的计算，与串联式开关电源储能滤波电容的计算方法基本相同。但要注意，即使是在占空比D等于0.5的情况下，滤波电容器充、放电的时间都不相等，滤波电容器充电的时 ...… 查看全部问答∨
百变运动机器人摄像头机器人的手脚可以任720度任意转动，头部可360度转动，足球、篮球、棒球、橄榄球，他是样样精通。身高约15CM，摄像头像素130W。支持USB2.0,BIT24。 … 查看全部问答∨	操作系统中的进程问题被几个问题绕晕了，各位仁兄解答一下吧：设在但处理机系统中有n(n>2)个进程：（1）是否会出现等待队列为空的情况？为什么？（2）是否会出现等待队列为空且无进程运行的情况？为什么？（3）是否会出现就绪队列为空的情况？为什么？（4 ...… 查看全部问答∨
各位开发过GPRS发送彩信的项目的大侠来看了我现在在做一个用simenz MC55模块实现通过GPRS发送彩信的项目，现在有几个问题，请各位帮忙： 1.彩信MMS的具体标准格式是什么？ 2.有了彩信文件后怎么打包成PDU？ 3.打包成PDU后，已经实现连接了，怎么把彩信发送到一个指定的手机后？是不是 ...… 查看全部问答∨	winCE5.0下串口程序无法接收数据!, winCE5.0下串口程序无法接收数据!,请高手帮忙!! SOS... 下面是我在VS2005下用C#编写的,用在winCE5.0下的一个串口程序，在编译时出现了以下错误： ——“System.Windows.Form.Form”并不包含“CheckForIllegalCrossThreadCalls”的定义——如果 ...… 查看全部问答∨
请教：有没有提供SPI接口，可提供Slave模式的IC？我可以通过程序随时同步修改SPI通信的内容的？谢谢帮忙。… 查看全部问答∨	stm32lcd显示的问题在用write_string（char)函数的时候，只有while(1){write_string(char);}才能在LCD屏上看到字符串输出;如果不加while(1),就看不到。但这样我的程序就不能往其他地方跑了，从而不能执行其他的功能。怎么来实现字符串输出，而我的程序又能在运 ...… 查看全部问答∨
自加密源代码：把下面的程序段加在main的最前，可以让你的代码自行加密，不会在烧录时产生漏网之鱼：//Led_Config(); if(FLASH_GetReadOutProtectionStatus() == SET) { //Led1_ON();Led2_OFF();Led3_OFF();Led4_OFF() ...… 查看全部问答∨	目前市场上的遥控开关能实现什么功能？ <PRE id=question-content>主要是控制灯具的</PRE>… 查看全部问答∨

小广播

学习C 和编程的50个观点下面的是学C++时要注意的。绝对经典！！ 1.把C++当成一门新的语言学习（和C没啥关系！真的。）； 2.看《Thinking In C++》，不要看《C++变成死相》； 3.看《The C++ Programming Language》和《Inside The C++ Object Model》,不要因为他 ...… 查看全部问答∨	反转式串联开关电源储能滤波电容的计算开关电源原理与设计（连载七） 1-3-3．反转式串联开关电源储能滤波电容的计算反转式串联开关电源储能滤波电容参数的计算，与串联式开关电源储能滤波电容的计算方法基本相同。但要注意，即使是在占空比D等于0.5的情况下，滤波电容器充、放电的时间都不相等，滤波电容器充电的时 ...… 查看全部问答∨
百变运动机器人摄像头机器人的手脚可以任720度任意转动，头部可360度转动，足球、篮球、棒球、橄榄球，他是样样精通。身高约15CM，摄像头像素130W。支持USB2.0,BIT24。 … 查看全部问答∨	操作系统中的进程问题被几个问题绕晕了，各位仁兄解答一下吧：设在但处理机系统中有n(n>2)个进程：（1）是否会出现等待队列为空的情况？为什么？（2）是否会出现等待队列为空且无进程运行的情况？为什么？（3）是否会出现就绪队列为空的情况？为什么？（4 ...… 查看全部问答∨
各位开发过GPRS发送彩信的项目的大侠来看了我现在在做一个用simenz MC55模块实现通过GPRS发送彩信的项目，现在有几个问题，请各位帮忙： 1.彩信MMS的具体标准格式是什么？ 2.有了彩信文件后怎么打包成PDU？ 3.打包成PDU后，已经实现连接了，怎么把彩信发送到一个指定的手机后？是不是 ...… 查看全部问答∨	winCE5.0下串口程序无法接收数据!, winCE5.0下串口程序无法接收数据!,请高手帮忙!! SOS... 下面是我在VS2005下用C#编写的,用在winCE5.0下的一个串口程序，在编译时出现了以下错误： ——“System.Windows.Form.Form”并不包含“CheckForIllegalCrossThreadCalls”的定义——如果 ...… 查看全部问答∨
请教：有没有提供SPI接口，可提供Slave模式的IC？我可以通过程序随时同步修改SPI通信的内容的？谢谢帮忙。… 查看全部问答∨	stm32lcd显示的问题在用write_string（char)函数的时候，只有while(1){write_string(char);}才能在LCD屏上看到字符串输出;如果不加while(1),就看不到。但这样我的程序就不能往其他地方跑了，从而不能执行其他的功能。怎么来实现字符串输出，而我的程序又能在运 ...… 查看全部问答∨
自加密源代码：把下面的程序段加在main的最前，可以让你的代码自行加密，不会在烧录时产生漏网之鱼：//Led_Config(); if(FLASH_GetReadOutProtectionStatus() == SET) { //Led1_ON();Led2_OFF();Led3_OFF();Led4_OFF() ...… 查看全部问答∨	目前市场上的遥控开关能实现什么功能？ <PRE id=question-content>主要是控制灯具的</PRE>… 查看全部问答∨

研一怎么入门深度学习作为电子工程专业的研究生，想要在研一阶段入门深度学习，你可以按照以下步骤进行：建立基础知识：确保你掌握了必要的数学和编程基础，包括线性代数、微积分、概率统计和Python编程语言。这些是深度学习的核心基础，深入理解它们将有助于你更好地理 ...… 查看全部问答∨	对于pcb基础入门，请给一个学习大纲以下是 PCB 基础入门的学习大纲：1. 理解 PCB 的基础概念和作用了解 PCB（Printed Circuit Board，印刷电路板）的定义和基本概念。理解 PCB 在电子设备中的作用和重要性。2. 学习 PCB 的基本结构和分类了解 PCB 的基本结构，包括导体层、绝缘层和焊 ...… 查看全部问答∨
对于神经网络算法的编程初学，请给一个学习大纲以下是神经网络算法编程初学的学习大纲：第一阶段：Python编程基础和基本数学知识Python编程基础：学习Python语言的基本语法、数据类型、函数定义和调用等。基本数学知识：复习基础的数学知识，包括线性代数、微积分等，为理解神经网络算法打下基础 ...… 查看全部问答∨	对于单片机led灯入门，请给一个学习大纲以下是学习单片机 LED 灯入门的大纲：第一阶段：LED 基础知识LED 原理：了解 LED 的基本工作原理和特性。掌握 LED 的正向电压、电流和颜色等基本参数。电路连接：学习如何连接 LED 到单片机的引脚。探索常见的 LED 连接电路，如基准电阻电路和直接 ...… 查看全部问答∨
数据分析机器学习怎么入门您可能已经具备一定的数学和编程基础，这将为您学习数据分析和机器学习打下坚实的基础。以下是入门数据分析和机器学习的一些建议步骤：学习基础数学：数据分析和机器学习涉及到许多数学概念，特别是线性代数、概率统计和微积分等。建议您复习这些基 ...… 查看全部问答∨	对于学单片机32入门，请给一个学习大纲学习单片机32（STM32）是电子领域中一个重要的入门门槛，以下是一个学习大纲：了解STM32系列：了解STM32系列单片机的特点、应用领域和常见型号。选择适合自己学习的型号，例如STM32F1、STM32F4等。学习开发工具和环境：了解STM32开发所需的软硬件工 ...… 查看全部问答∨
对于神经网络时间序列入门，请给一个学习大纲以下是关于神经网络时间序列入门的学习大纲：第一阶段：时间序列基础知识和理论时间序列概念：了解时间序列数据的基本概念，包括趋势、季节性、周期性等。时间序列分析方法：学习常见的时间序列分析方法，如平稳性检验、自相关性和偏自相关性分析等 ...… 查看全部问答∨	对于神经网络原理入门，请给一个学习大纲作为电子工程师学习神经网络原理是一个很好的决定，以下是一个适用于入门神经网络原理的学习大纲：1. 基础知识人工神经元：了解人工神经元的基本结构和工作原理，包括输入、权重、激活函数和输出等。激活函数：学习常见的激活函数，如Sigmoid、ReLU ...… 查看全部问答∨
我想单片机发光二极管入门，应该怎么做呢？了解如何控制发光二极管(LED)是学习单片机编程的重要一步。以下是您可以按照的步骤：准备工作：获取一块单片机开发板，确保其中包含有一个或多个可用的 GPIO 引脚以控制 LED。您还需要一些连接线。了解硬件：查阅单片机开发板的用户手册或参考资 ...… 查看全部问答∨	我想3d机器视觉学习入门，应该怎么做呢？要入门3D机器视觉学习，你可以按照以下步骤进行：学习基础知识：熟悉计算机视觉和机器学习的基础知识，包括图像处理、特征提取、分类、回归等基本概念。了解3D机器视觉的基本概念，包括点云数据、三维坐标系统、相机模型等。选择合适的学习资源：寻 ...… 查看全部问答∨

2019年10月17日 | OpenAI机械手“自学”完成单手解魔方