MIT和UCSD开发基于Vision Pro的机器人远程控制系统
查看引用/信息源请点击:techxplore
实现身临其境的远程机器人控制体验
(映维网Nweon 2024年07月16日 )来自麻省理工学院(MIT)和加州大学圣地亚哥分校(UCSD)的专家团队基于Apple Vision Pro开发了一种名为“Open-TeleVision”的新型遥控器,从而实现了1:1的机器人远程控制。
对于机器人,提供精确对应的输入数据进行训练非常重要。所以从特斯拉到英伟达,业界正在积极利用虚拟现实的力量来帮助训练机器人。通过利用VR,人型机器人可以1:1地复刻映射人类操作员的动作,而软件可以以实现第一人称视频的实时传输和精确控制输出,同时保持极低延迟。
延伸阅读:特斯拉用VR训练Optimus机器人学习人类操作
在研究中,麻省理工学院和加州大学圣地亚哥分校的团队同样在尝试类似的体验,通过向操作员提供Apple Vision Pro来实现身临其境的远程机器人控制体验。
利用Open-TeleVision系统,操作人员可以通过机器人的“眼睛”来以第一人称视角来感知环境,并能够1:1对应地操作机器人的头,手臂和手指等。
不需要在手臂和手指佩戴传感器,团队采用了类似于Kinect系统的远程传感器来捕获用户四肢的运动。利用这种方式,机器人可以1:1地模拟人类操作员的动作,并执行诸如捡球并把球放进杯子里的活动等。
相关论文:Open-TeleVision: Teleoperation with Immersive Active Visual Feedback
研究小组在实验中展示了系统的实用性。他们表示,经过进一步的改进后,基于Open-TeleVision的系统未来可以用于远程手术、危险地区的搜索救援工作,甚至是探索其他星球。
---原文链接:https://news.nweon.com/122871
Extend Robotics集成VR与AI,简化远程控制机器人流程
Extend Robotics 将消费者 VR 技术、人工智能与机器人技术相融合,极大地简化了个人远程控制机器人的流程。该公司与工业零部件创新者 Addwerk 的联手合作,便是一个生动的例证,展示了如何通过双方的界面软件显著提升自动化生产效率。
Addwerk 作为走在时代前沿的制造商,凭借其尖端的 3D 打印技术,能够生产出高品质且符合最终用途的工业零件。其雄心勃勃的愿景是打造一个全天候、无需人工干预的全自动化工厂。然而,Addwerk 目前面临的主要挑战是如何快速将高度定制且多变的工业零件引入生产线。
对此,Addwerk 首席执行官兼创始人 Lluis Planella Pares 坦言:“我们面临的主要挑战在于处理大量含有不同零件的订单,这些零件种类繁多且变化极大,需要在短时间内完成后期处理并高速交付。因此,我们迫切需要找到一种自动化的方式来高效地分类这些订单。”
与 Extend Robotics 的合作恰好为 Addwerk 提供了这一解决方案,特别是在自动化分类流程方面。传统的工业机器人虽然使用日渐普遍,但在处理如此高度可变的自动分类任务时,往往需要专业的编程知识和对硬件的重新编程,这既耗时又费力。
而 Extend Robotics 的解决方案则彻底改变了这一现状。它通过为消费者提供对 3D 环境的全面深度感知,并结合直观的手臂和手势控制,在沉浸式实时体验中实现了易于访问的控制。这一创新技术使得即使是非技术背景的用户也能够轻松执行和自动化流程,从而有效应对了零件多样性和可变性带来的挑战。
Pares 对此表示:“在研究了多种对订单和零件多样性进行分类的方法后,我们认为人工干预与机器人化的结合是最佳选择。Extend Robotics 的解决方案完美融合了这两者,使我们能够处理大型或精密的零件,而无需过分依赖复杂的编程。”
谈及这一开创性的合作,Extend Robotics 首席执行官 Chang Liu 博士表示:“在自动化流程中,处理高度可变性一直是提高效率的最大障碍之一。通过此次与 Addwerk 的合作,我们的技术解决方案已经证明了其有效性和高效性,且具备可验证的质量和准确性。这标志着我们向着更广泛的自动化应用迈出了坚实的一步。”
相关问答
宇宙机器人无线控制器使用指南?
一、安装控制器安装宇宙机器人无线控制器需要准备宇宙机器人无线控制器以及手机。1.下载安装机器人APP,从GooglePlay或AppStore搜索安装“宇宙机器人”,打...
墨子智能机器人使用方法?
如下:1.下载安装墨子智能机器人应用,并确保手机或电脑联网正常。2.打开应用,进入主界面,点击“开始对话”按钮。3.在对话框内输入您想要咨询或交流的问...
dorfly机器人怎么连网?
要让Dorfly机器人连网,首先需要确保机器人具备无线网络连接功能,例如内置Wi-Fi模块或蓝牙功能。然后,通过机器人的控制界面或设置菜单,进入网络设置选项。在...
什么是智能语音机器人?
[回答]首先小忆机器人的活动范围就比其他类似于产品大得多,机身可以360度转动,头部可以上下水平运动,而且配有了尺寸仅次于的7英寸屏,比较核心的智能语音...
尼尔的芯片远程控制强化有什么用?
就是9s在敌人不发现他的情况下入侵他时可以选择远程控制这时候你就可以控制他就是说你从操控9s变成操控机器人远程控制强化加几级就是你左上角等级加芯片所...
场控机器人怎么设置?
场控机器人的设置需要根据具体的使用场景和需求进行调整。以下是一些常见的设置:1.声音设置:可以设置机器人的音量大小、音调、语速等参数,以便更好地与用户...
菠萝树机器人怎么联网?
关于这个问题,菠萝树机器人可以通过以下步骤联网:1.确保菠萝树机器人已经连接到电源,并且打开了机器人的Wi-Fi模块。2.手机或电脑连接到菠萝树机器人的Wi-...
福玛特扫地机器人能连接Wi-Fi远程控制吗?
可以。扫地机器人安装一个app就能远程操控了,不过就是扫地机器人要处于wifi环境中,现在家家户户应该都有wifi了吧可以。扫地机器人安装一个app就能远程操控了...
全世界排名前十的智能机器人?
TOP.1、优必选UBTECH智能机器人国内人工智能和机器人领域领先者,人工智能和人形机器人研究与开发的前沿科技企业。TOP.2、能力风暴Abilix智能机器人专注于...
华为智慧生活可以远程控制吗?
可以,360扫地机器人X90在设备正常联网状态下,通过智慧生活App可以远程控制扫地机,全屋清扫,指定房间清扫,指哪扫哪,回充,纯拖地模式切换,设置水箱出水...可...