映维网|加州大学伯克利分校研究员用ARKit训练机械臂分拣物品

【映维网|加州大学伯克利分校研究员用ARKit训练机械臂分拣物品】（映维网 2020年06月12日）加州大学伯克利分校的人工智能研究人员正在使用iPhone X和ARKit来训练机器人手臂分拣物品。这属于Dex Net AR项目的内容，并主要是研究如何通过消费者智能手机来实现机器人分拣物品。其中，通过利用将RGB摄像头围绕物品扫描两分钟而生成的数据， ARKit可以创建相应的点云。
机器人抓取是一个特殊的机器人学分支，并主要是研究如何教导机器人拾起、移动、操纵或抓取物体。加州大学伯克利分校自动实验室（UC Berkeley’s Autolab）的Dex Net（灵巧网络）研究项目可以追溯到2017年，并且包括开源培训数据集，以及在电商货物分拣场景中实现机器人操作的预训练模型。机器人快速学习如何抓取对象的能力将对亚马逊物流中心等自动化仓库的发展存在巨大影响。

本文插图

在包含八个物体的早期实验中， Dex Net AR可以将ARKit扫描转换成ABB YuMi机器人的深度映射，并以95%的成功率分拣物体。作为说明，每次扫描都会创建一个点云。
名为《Dex-Net AR: Distributed Deep Grasp Planning Using an Augmented Reality Application and a Smartphone Camera》的论文介绍道：“随着摄像头在空间中移动，点云的密度增加，这可以更好地检测和定义对象的表面，从而方便机器人抓取物品。 Dex-Net AR能够以类似于依靠昂贵工业级深度传感器的最先进系统的精度来实现物体抓取。与从固定视图（通常是自上而下）捕获图像的深度摄像头系统相比， Dex Net AR允许用户用智能手机摄像头围绕对象移动并收集三维点云数据。 ”相关论文：Dex-Net AR: Distributed Deep Grasp Planning Using an Augmented Reality Application and a Smartphone Camera
Dex-Net-AR采用离群值消除算法和k近邻算法来消除ARKit点云估计误差所引起的噪点。然后， Dex-Net抓取规划器将评估机器人应如何拾取对象。
由于每一次ARKit扫描都需要固定的两分钟，所以研究人员在未来的研究中将寻找更快速扫描物体的方法。论文写道：“一个潜在的改进是，如果只有有限的数据，我们可以尝试使用基于学习的方法来减少视频捕获的时间，从而增加和完成点云数据” 。研究人员同时计划探索如何更好地利用iPhone X深度传感摄像头来收集更少噪点的点云数据。

映维网|加州大学伯克利分校研究员用ARKit训练机械臂分拣物品

推荐阅读

「全省工商界人士」携手治污攻坚共建美丽广东

二等分打印纸尺寸设置送货单!电脑打印纸三种等分是什么尺寸?

广州番禺一民房起火消防员救出15名群众

冷冻毛豆怎么煮好吃

|昆明电子竞技公开赛决出两“王者”

黑枣和红枣的区别在哪里黑枣和红枣的区别在哪里中药

四川一精神病人电梯内砍死8岁男童-遂宁8岁男童电梯内被砍死

『精灵故事』排毒养颜的——自制蜂蜜菠萝酵素汁

茶籽渣可以做肥料吗茶籽渣怎么做肥料

「不占用村」继禁止私搭乱建后，墙外种菜或将被禁，农民不解，为啥不让种！

黎彼得|黎彼得封笔23年重返词坛！期望与许冠杰再合作，曾创造多首经典

为啥其他动物固定季节发情，人类随时都可以

科学家在南极发现“外星”尘埃

北京昌平|日晕、七彩云罕见同框，速看！

【汽扯扒谈|巨型双肾隐约可见，6月正式发布，全新宝马4系官方预告流出】

诡异的血月传说血月可怕传说

时间在撒谎|史上罕见，被传为佳话！，古代这位皇帝用一生专宠一个女子

青年|女网红的化妆台，薇娅周扬青挺好，看到程晓玥：这么不讲究？

汽车|美股三大指数集体收跌小鹏汽车逆市大涨逾33%

嗜酸性粒细胞比率高有哪些原因