baidu全新无人挖掘机功课体系登上国际权威期刊《Science Robotics》

近日,由baidu研究院机器人与自动驾驶实验室(RAL)团队牵头开发的全新无人挖掘机功课体系(AES)这一最新技能成果,登上了国际顶级期刊《Science》子刊《Science Robotics》,并获得了评审专家与期刊编委的高度评价。该研究融合了感知、活动布局和控制体系,可驱动挖掘机自主完成挖装恣意,从事24小时连续无人化功课,并成为全球首个实际落地的、可长时间功课的无人挖掘机体系,在工程机械自动化、无人化功课领域具有重要价值和影响。随着新型基础设施建设的大力推进,工程机械行业乘风而上,并不断向数字化、智能化方向演进。

近日,由baidu研究院机器人与自动驾驶实验室(RAL)团队牵头开发的全新无人挖掘机功课体系(AES)这一最新技能成果,登上了国际顶级期刊《Science》子刊《Science Robotics》,并获得了评审专家与期刊编委的高度评价。

baidu全新无人挖掘机功课体系登上国际权威期刊《Science Robotics》

该研究融合了感知、活动布局和控制体系,可驱动挖掘机自主完成挖装恣意,从事24小时连续无人化功课,并成为全球首个实际落地的、可长时间功课的无人挖掘机体系,在工程机械自动化、无人化功课领域具有重要价值和影响。

随着新型基础设施建设的大力推进,工程机械行业乘风而上,并不断向数字化、智能化方向演进。挖掘机被誉为工程机械“皇冠上的明珠”,在资源开采、产业生产、建设施工和抢险救灾等领域应用广泛,且拥有十分可观的全球市场份额。

为什么要将挖掘机无人化?实际上,由于工作情况和能力要求等原因,挖掘机行业普遍存在招工难的人力短缺问题;挖掘机操纵手还会遇到塌方、恶劣天气等问题,这些问题为产业生产带来巨大挑战。基于此,baidu无人挖掘机功课体系(AES)应运而生。

baidu全新无人挖掘机功课体系登上国际权威期刊《Science Robotics》挖掘机恶劣工况和功课情况

通用型无人挖掘功课体系

baiduRAL实验室牵头提出了baidu无人挖掘机功课体系(AES)的研究,并联合马里兰大学和baidu智能云事业部合作开发。AES包含一套以三维情况感知、实时活动布局、鲁棒活动控制为核心的AI算法,可在不同工作情况下从事无人化功课。

baidu全新无人挖掘机功课体系登上国际权威期刊《Science Robotics》无人挖掘机体系(AES)硬件体系

技能上,AES实行了三个方面的提升:使用多种传感器融合和感知算法,感知模块可以支持无人挖掘机在不同的工况和恶劣情况下从事无人化功课,保证了AES体系的功课效率、鲁棒性和泛化能力;功课和活动布局模块融合了数据驱动的学习算法和优化算法,可以有效计算挖掘位置和挖掘机铲斗轨迹,确保功课效率;高精度活动控制体系,有效实行挖掘机各机构的精准活动控制。

baidu全新无人挖掘机功课体系登上国际权威期刊《Science Robotics》无人挖掘机体系(AES)框架图

具体而言,首先,感知体系利用低成本相机和激光雷达,实时生成高精度的三维情况地图,通过计算机视觉和深度学习等算法,AES可以检测功课情况中的运输卡车、障碍物、石块、标识和人员等,并对卡车、障碍物等物体从事准确的三维姿态估计,同时也可以识别功课物料材质等信息。其次,基于感知体系的信息反馈,通过学习和优化算法,AES能够快速从事功课布局和多自由度的挖掘机各关节活动路径布局,确保提升功课效率的同时降低机械损耗。最后,通过高精度活动闭环控制算法,AES能够实行挖掘机各机构的精准活动控制,解决了传统工程机械中活动控制无法闭环、轨迹难以跟踪、跟踪精度差等难题。此外,AES还包含一整套软件和界面设计,协助终端用户完成体系的操纵、部署和使用。

baidu全新无人挖掘机功课体系登上国际权威期刊《Science Robotics》AES视觉感知体系功能模块

以石块操纵恣意为例,AES体系的操纵流程如下。感知体系以“从粗到细”的方式对场景信息从事处置惩罚。首先对图像从事增强处置惩罚,消除粉尘对整个识别体系的影响;之后对功课区域的物料从事材质识别;然后将图像中石块所在区域从事语义和实例分割算法处置惩罚。通过融合二维实例分割结果和LiDAR三维点云,确定石块的精确三维位置。感知模块最后将石块三维位置反馈给布局和控制模块,AES最后通过挖掘机多自由度活动布局和活动闭环控制,实行移除石块的恣意。

baidu全新无人挖掘机功课体系登上国际权威期刊《Science Robotics》AES石块操纵示例

目前,AES已在多种复杂的室内和室外不同工况下从事了挖装测试、石块操纵及挖沟恣意等,充分显示了AES体系具备处置惩罚多种挖掘机恣意的能力,证明了AES体系的技能先进性、功课恣意兼容性、体系稳定性和鲁棒性。

baidu全新无人挖掘机功课体系登上国际权威期刊《Science Robotics》AES测试场景

实行落地应用 baiduAI助力产业生产智能化

AES已经落地产业废物处置惩罚相关领域,在实际的无人化、自动化应用中发挥重要作用。AES实行了产业废物连续24小时自动上料功能,助力产业废物处置惩罚产线实行全程的无人化处置惩罚。在产业废物上料过程中,AES感知模块首先从事产业废物的地形三维重建,确定待挖掘区域;活动布局模块根据感知模块的信息反馈设计活动轨迹,控制模块根据活动轨迹从事产业废物处置惩罚。目前AES赋能的无人挖掘机体系已在产业废物处置惩罚产线上无故障功课了数千小时,充分显示了AES体系的稳定性和鲁棒性,有效减少了产业废物对挖掘机操纵手的损害,并为客户大幅节省人力成本。

baidu全新无人挖掘机功课体系登上国际权威期刊《Science Robotics》AES连续24小时无人功课

在AES体系的基础上,baiduRAL联合baidu智能云事业部开发的“盘古工程机械无人功课平台”,已成为国内首个基于智能云平台、软硬一体、技能领先的工程机械无人功课平台。基于盘古平台的挖掘机,在没有驾驶员操纵的情况下,自主感知功课情况、布局恣意并完成功课。

目前,baidu盘古团队和徐工等工程机械头部厂商打磨合作,优化和落地无人化功课体系,帮助工程机械用户提升生产安全性、降本增效,推动产业生产向数字化、智能化、安全化、绿色化的目标迈进。

baidu全新无人挖掘机功课体系登上国际权威期刊《Science Robotics》“baidu盘古”赋能工程机械无人化功课

建设与发展是人类社会的主旋律,产业生产的自动化和智能化是未来的主流趋势。baidu将继续创新与迭代AI技能,瞄准产业生产细分领域,为产业生产真实场景技能转型突破赋能,持续推动技能落地产业实际应用。

原创文章,作者:新闻助手,如若转载,请注明出处:https://www.iaiol.com/news/baidu-quan-xin-wu-ren-wa-jue-ji-gong-ke-ti-xi-deng-shang/

(0)
上一篇 2021年 7月 1日 下午5:04
下一篇 2021年 7月 5日 上午11:18

相关推荐

  • 参数量仅为4%,性能媲美GPT-3:开发者图解DeepMind的RETRO

    构建越来越大的模型并不是提高性能的唯一方法。

    2022年 1月 4日
  • 陈怡然、刘学等多位华人学者当选,ACM SIG新任主席名单出炉

    近日,ACM SIG 新一届选举结果出炉,多位华人学者当选SIG主席。

    2021年 6月 16日
  • 每次放一个细胞,打印心脏或上千年,斯坦福大学如何加快3D打印心脏?

    使用先进的 3D 打印技术,斯坦福大学钻研者将由活细胞制成的糊状物转化为心脏和其他器官。

    2022年 3月 27日
  • 手把手教你,从零开始实现一个稀少混合大师架构语言模型(MoE)

    本文介绍了实现一个稀少混合大师语言模型(MoE)的方法,详细解释了模型的实施过程,包括采用稀少混合大师取代传统的前馈神经网络,实现 top-k 门控和带噪声的 top-k 门控,以及采用 Kaiming He 初始化技术。作者还说明了从 makemore 架构保持不变的元素,比如数据集处理、分词预处理和语言建模任务。最后还提供了一个 GitHub 仓库链接,用于实现模型的整个过程,是一本不可多得的实战教科书。内容简介在混合大师模型 Mixtral 发布后,混合大师模型(MoE)越来越受到人们的关注。在稀少化的混合专

    2024年 2月 16日
  • 教授何恺明在MIT的第一堂课

    700 座的大教室,相比去年增加一倍容量,仍然座无虚席:这就是麻省理工学院(MIT)计算机视觉课《Advances in Computer Vision》6.8300 在 2024 新学期的盛况。今年是四位教授,每人负责一部分课程:课程信息:https://advances-in-vision.github.io/index.html有网友评论说,能选上这课的学生太幸运了,每节都是计算机视觉顶会 CVPR Oral 的体验。对于很多人来说,其中最为期待的自然是新晋教授何恺明的课。MIT 电气工程与计算机科学系副教授

    2024年 3月 11日
  • 每一年发表两个图灵奖?《ACM通讯》主编发文提议推动图灵奖改革

    如果真的改革,百万奖金需要打对折吗?

    2021年 8月 4日
  • ICLR2022:清华、腾讯AI Lab共同提出等变图力学网络,实现多刚体物理体系摹拟

    清华 AIR、计算机系与腾讯 AI Lab 合作,共同提出等变图力学网络,实现了理论力学中的一类重要任务—多刚体体系摹拟。

    2022年 3月 27日
  • 马斯克脑机接口公司Neuralink高层动荡:联合创始人兼总裁离任,曾想建侏罗纪公园

    马克斯 · 霍达克的离任会对 Neuralink 的未来发展造成什么影响呢?埃隆 · 马斯克又会选择谁来接任总裁一职呢?这些我们都拭目以待吧!

    2021年 5月 3日
  • 线上直播丨倒计时一天!一起来CSIG-机械感知与智能论坛调换学术内容

    聚会H5:https://c.eqxiu.com/s/d8DsTbD1「CSIG-机械感知与智能论坛」由华夏图像图形学学会和北京大学机械感知与智能教育部重心实验室联合主办,华夏图像图形学学会机械视觉专委会和北京智源人工智能研究院联合承办。北京大学机械感知与智能教育部重心实验室是北京大学集聚了校内计算机科学、智能科学技术、心理与认知科学的优势力量而组建的多学科交叉科研机构。实验室以实现高度智能化的机械感知和智能系统为目标,紧密结合国民经济和社会发展的要求,开展机械感知、智能信息处理与认知科学方面的基础与应用基础研究。

    2021年 1月 15日
  • Hologres揭秘:高功能原生加快MaxCompute核心原理

    Hologres(中文名交互式剖析)是阿里云自研的一站式及时数仓,这个云原生系统融合了及时服务和剖析大数据的场景,全面兼容PostgreSQL协议并与大数据生态无缝打通,能用同一套数据架构同时支援及时写入及时查问以及及时离线联邦剖析。它的出现简化了业务的架构,与此同时为业务提供及时决策的能力,让大数据发挥出更大的商业价值。从阿里集团诞生到云上商业化,随着业务的发展和技术的演进,Hologres也在持续不断优化核心技术竞争力,为了让大家更加了解Hologres,我们计划持续推出Hologres底层技术原理揭秘系列,从

    2021年 7月 12日

发表回复

您的电子邮箱地址不会被公开。 必填项已用 * 标注