您的位置:首页 > 互联网

鹅厂机器狗花式穿越10m梅花桩,全程不打一个趔趄

发布时间:2022-08-19 23:11:58  来源:互联网     背景:

丰色 Alex 发自 凹非寺
量子位 | 公众号 QbitAI

机器狗会中国功夫是一种什么体验?

且看下面这只黑白狗,直接就是一个花式过梅花桩:


瞧这单桩跳:腾空一跃,四脚稳稳落在前方小圆盘上,连个趔趄都没打。

当然,站立和起身作揖这样的传统技能也不在话下。虽然是在桩子上,但狗子完全能控制好力道不至于摔跤。


更别提下桩时,它还会耍一个完美的前空翻,稳稳落地结束表演。


真狗都很难做到吧~

如此身轻如燕的狗子很快就吸引了一波关注。

有人就表示希望再做大一点,这样就能当坐骑了。(话说见过骑狗的吗)


为什么手机屏幕尺寸越做越大

还有网友想让它可以帮忙取快递……(这还差不多)


所以,这只灵活的机器狗,到底什么来头?

大数据与存储峰会

三招功夫过梅花桩

它是Max二代机器狗,来自腾讯Robotics X实验室,今天正式对外亮相。

在一开始的训练思路上,腾讯的做法就和大众不同。

我们知道,学会适应复杂地形是大多数机器狗要学习的重要任务之一。

对于出现的踩歪、打滑等危险情况,业界一般做法都是采用提⾼步频、减慢速度、加⼤控制算法鲁棒性的⼿段来恢复它们的平衡。

而腾讯选择机器狗在梅花桩这样“一旦踩歪踩错就没有挽救机会”的极端地形上练习,就是为了限制它们规划路线的误差范围。


这样一来,机器狗就能够做到一出脚就是对的,不需要试探、也不需要多余的动作来维持或者恢复平衡,从而做到走得又快又稳。

那么,Max是如何做到每一步都找准桩⾯中⼼,精准完成各种高难度动作穿越梅花桩的呢?

简单来说,分为三大招:地图识别、行动轨迹规划和动作控制。

1、识别地图和定位

Max面对的是一段全长10米,高0.8米(Max两倍身高),最小桩面直径仅10厘米的梅花桩阵列。

在上桩之前,系统并不会给Max配备先验地图,也就是每次它面对的都是未知的地图。

因此,它要学的第一件事就是识别地形,感知自己和梅花桩的位置,以便为后面的轨迹规划做准备。

据研究人员介绍,这一步最大的挑战是如何在持续力冲击下实现精准视觉定位和地形识别,同时兼顾实时性与低延迟。

为此,他们给Max身上配备了单⽬RGB摄像头、惯性传感器(IMU)、深度传感器等多种设备,所有传感数据融合在一起获得高质量的环境数据。

在各传感器数据融合过程中,一种启发式的算法被用来保证数据一致性,并通过合理评估和选择各种传感器数据在优化过程中的权重,保证定位实时、稳定并具有鲁棒性。

由于Max在移动过程中具有速度快、步频⾼、⼒冲击⼤等特点,这会使得各种传感器数据出现大量噪声,引发干扰。

比如,在跳等动作的持续力冲击下,深度传感器就会出现拖影现象。

因此,在地形的时域融合过程中,研究人员还引⼊了一个统计分布策略,它能在⾼效过滤错误地形信息的同时,保留精确的有效地形区域结果,估计出桩⾯中⼼相对于机器⼈的精准位置,在⼀定程度上也能缓解梅花桩晃动带来的⼲扰。

最终,Max做到了地形识别精度⼩于2cm、视觉定位累积误差⼩于1%。

建成的地形⾼度图可以获取平⾯任意坐标对应的⾼度以及局部法向。


2、规划最优行动轨迹

看准地形后,下⼀步Max要根据所⻅信息完成动作轨迹规划,最大的难点是如何在快速穿越的过程中,保证实时规划出最优的路线。

这里就采用了一种6D最优轨迹⽣技术。

所谓6D,除了X、Y、Z轴上的位置数据,还包括机器狗需要做出的偏航、俯仰和滚动维度的信息。

该生成技术可根据Max的运动步态、速度等指令,预估落脚点,并根据落脚点周边的地形⾼度图,选出最优的点,也就是桩面中心。

此外,系统还会结合最优点,考虑Max运动过程中的动⼒学约束、摩擦约束、⾜端⼯作空间约束等,进行⼆次优化,实时求解真正的最优6D轨迹。

对于跳跃、空翻这类动作,Max还需要达到的一个目标是省⼒,即驱动⼒最⼩化。

这里就用到了一种基于⾮线性优化的轨迹规划技术。

该技术可以兼容四脚跳(Pronking)和双脚跳(Bounding)等多样化步态,通过跳跃距离、跳跃步态、最⼤关节⼒矩等约束条件,得出结果。

3、控制动作,按轨迹精准落点

动作轨迹规划好后,Max就可以开始正式⾏动,最大的考验是如何控制恰到好处的力、按照规划轨迹实现精准落点

在跟踪参考轨迹方面,Max 采用了最新版xMPC+WBC(Model Predictive Control and Whole-Body Impulse Control,模型预测控制和全身控制)控制架构, 基于更精确的线性化动力学模型,效果更好。

而在力控方面,据研究人员介绍,一般来说,动作越是高动态、越是不稳,就越要求控制精度。

本次表演的动作中,每个环节都有自己的难度:

空翻属于高动态,作揖、双轮站立属于易失稳;而对于单桩跳跃这个动作,机器狗的四⾜落脚点距离很近,⽀撑区域很⼩,收拢的腿部姿势也导致 Max的运动及发⼒空间受限,对力控的精度更是要求极高。

为了实现以上动作的精准力控,团队⾃研了一个模型预测控制算法,并给Max加⼊了基于关节⼒矩反馈的触地检测能⼒。

这个算法的相关论文登上了机器人领域顶会ICRA 2022。


对于平移运动的追踪,自研线性模型预测控制算法获得了和业界经典算法同等的控制效果;而对于旋转运动的追踪,其表现甚至比其他算法更优秀。

具体而言,这个算法利用⽤轴⻆和指数坐标来表示旋转运动,成功规避了之前线性化⽅法中的多个近似性假设,如:⼩⻆速度、转动惯量在预测窗⼝内时不变等。

最终保留了更多的参数,从⽽获得了一个更精确的动⼒学模型。

基于该动⼒学模型,研究团队进步构建了模型预测控制(model predictive control) 问题,通过求解⼆次规划(quadratic programming)的优化问题,来得出最优⾜端接触⼒。

此外,Max在做跳跃、前空翻等需要腾空的动作时,可利用关节⼒矩反馈来判断四肢触地状态,从而及时且精准地进行⾏主动的质⼼轨迹规划与柔顺⼒控,有效避免身体大幅晃动,使整个动作看起来更流畅丝滑。

由此,借助以上三大招的功夫,Max二代完成了精彩的花式过桩表演。

去年,一代Max亮相,当时它就开创了腿轮一体化设计,让机器狗不仅能站起来,还能滑着走。


这次,二代Max不仅学会了在桩上表演各种难度动作,过桩速度也比国内第一个会过桩的四足机器人Jamoca快了4倍。

除此之外,硬件方面,Max的轮足切换功能也做了改进,磁吸式的腿部锁定机构升级为了机械式的,并增加了冲击力解耦设计,最终提高了轮足切换的稳定性。

及Max的整体结构上也进行了拓扑优化,增加了电池功率,外形上看起来更加紧凑简洁,在整机强度、抗冲击性能等方面也有所提升。

研究人员表示,接下来,他们会基于Max这个四足机器人平台,探索更精准的传统控制和AI控制算法,最终让机器狗实现复杂环境下的任意行走。

狗子背后的实验室

看完了Max的精彩表演和它搭载的硬核技术,再来了解下这只机器狗的诞生地——

成立于2018年的腾讯旗下机器人实验室:Robotics X。

目前,实验室里一共“养”了两只“狗子”,除了Max还有一个叫Jamoca的前辈,它是国内第一只学会走梅花桩的机器狗。

当然,除了“狗子”之外,这个实验室里还有其他机器人成员:

比如会花样空翻、灵活越障的轮式机器人Ollie。

最早使用指纹识别的手机


可以保持平衡并自动驾驶的摩托车。


IPHONE六S的处理器

该实验室的负责人张正友博士,是著名的AI和机器人研究员,现任腾讯最高专业职级——17级科学家。

同时,他还是腾讯 AI Lab负责人,以及ACM Fellow和IEEE Fellow。


在加入腾讯之前,张正友曾任微软人工智能及研究事业部首席研究员和研究经理,在MSR工作了近20年。

正如前文介绍Max的未来发展方向所说,比起做简单、重复劳动的机器人,Robotics X更关注机器人的自主特性研究,注重于让其学会自主判断、自主决策等。

One More Thing

最后,一个小彩蛋:

如果你觉得机器狗遛起来没有灵魂,不妨看看这个场面。


虽为机器,Max二代却会“扑脚”、“撒欢跑”,是不是有点遛真狗的意思了?

不过,这其实是Max二代内部AI训练完成后第一次测试时的样子,研究人员表示:

  • 当时我们也不知道它会跑成什么效果,只是意外记录下了这个视频。

看来Max很有自己的想法啊!(Doge)

当然,如果想让它成为一只听主人话的狗, 通过指令即可对其发号施令。


返回网站首页

本文评论
韵达货运全国并网发电分布式光伏电站正式实现并网发电
9月28日消息,位于浏阳经开区韵达货运湖南分拨中心屋顶的分布式光伏电站于9月23日正式实现并网发电,年平均发电量约630万千瓦时,是截至目前浏阳市单体装机容量最大的分布式光伏...
日期:09-30
财富:微软创新败于苹果 丧失领袖地位_微软的创新
  北京时间5月30日《财富》刊文指出,微软作为科技行业最有价值公司的优势不复存在了。   上周三,苹果的市值终于超过了微软的市值。投资者们终于以实际行动认可了消费者...
日期:07-29
元宇宙公司招聘「元宇宙相关岗位平均月薪1.85万元 最高能拿4万」
  来源:快科技  元宇宙作为第三代互联网形态,其时空拓展、高度沉浸、感官延伸、人机融生等特点,让人心生向往。目前各大企业也纷纷布局元宇宙。  9月26日,智联招聘发布《2...
日期:09-27
图神经网络加速芯片进入倒计时  全球首款商用图神经网络加速IP核正式发布
  【2021年01月08日,北京】1月8日,在与中科院计算所和中科院计算所南研院的通力合作基础上,北京中科睿芯科技集团有限公司(简称中科睿芯)正式发布了一款图神经网络加速芯片...
日期:10-08
全局3D+自动对焦,当贝F1C投影仪苏宁首发3599元(当贝f1投影仪3d评测)
  如今,投影仪成为越来越多的家庭必入的智能家居设备之一,而当贝旗舰投影产品F1自发行以来,便受到了很多用户的喜爱。11月末,当贝投影F1C新品上线,延续旗舰配置的同时,加入无感...
日期:02-01
Facebook和Instagram上线NFT展示功能,扎克伯格的照片NFT拍出10万美元_facebook/twitter
  记者:司林威;realme的杜比全景声  NFT功能测试许久之后,Meta官宣旗下两大社交平台正式上线该功能。  9月29日,Meta发布了一封简短的官方博客,内容为“今天我们宣布,美国...
日期:10-05
百亿规模“雪王”的野心,没写进招股书里
  来源:36氪  文/任彩茹  编辑/乔芊  上市前夕,蜜雪冰城终于将瓶装水推向了市场。  早在2021年9月和今年7月,蜜雪冰城先后获得“瓶子(雪王爱喝水)”和“箱子(雪王爱喝水...
日期:09-30
苹果A16芯片造价曝光:达A15的2.4倍_苹果a14芯片成本
中关村在线消息:近日,有外媒曝光了iPhone 14 Pro/Pro Max两款机型内搭载的A16芯片的信息,称其造价高达110美元(折合人民币约782元),是上代A15仿生芯片的2.4倍有余。根据介绍,A16仿...
日期:10-11
PaddlePaddle升级解读|十余行代码完成迁移学习 PaddleHub实战篇
   迁移学习 (Transfer Learning) 是属于深度学习的一个子研究领域,该研究领域的目标在于利用数据、任务、或模型之间的相似性,将在旧领域学习过的知识,迁移应用于新领域中...
日期:08-14
国家13部门力推线上办公,为何MAXHUB更值得信赖?
  近日,国家发改委等13部门发布了《关于新业态新模式健康发展激活消费市场带动扩大就业意见》(以下简称《意见》),鼓励发展便捷化的线上办公,形成对线下模式的常态化补充...
日期:07-14
带你认识星施特,建筑节能修缮系统服务商
  初识星施特:   星施特是一家中小型科技型企业,也是上海市高新技术企业,是集研发、生产、销售和应用服务为一体的建筑修缮专业服务商。专业从事建筑修缮新材料和新工艺的...
日期:05-06
谷歌宣布将于明年1月18日关闭云游戏服务Stadia「谷歌云游戏服务公布上线信息:11月上线,月费9.9美元」
9月30日消息,据国外媒体报道,由于没有获得预期的吸引力,谷歌宣布,将于2023年1月18日关闭其云游戏服务Stadia。谷歌将退还所有通过谷歌商店购买的Stadia硬件,以及所有从Stadia商店...
日期:10-01
欢聚集团公布2021年Q2财报:营收同比增长39.7% 全球业务迈向正循环_欢聚集团二季度营收超58亿元,海外用户占比超90%
  2021 年8 月19 日--全球领先的视频社交媒体公司欢聚集团(纳斯达克股票代码:YY,“欢聚集团”或“公司”,原“欢聚时代”),今天宣布了2021年第二季度未经审计财务业绩。2021...
日期:07-17
京东贺岁片《顶牛》聚焦父子代际,陈佩斯陈大愚父子小年夜在线互顶
  时隔三十年,陈佩斯再演“父与子”,昔日叛逆的二子已为人父,儿子陈大愚则成了新晋的“菜刀鼓手”。这出父子大戏《顶牛》,由京东出品,鬼才导演张大鹏执导,喜剧表演艺术家陈佩...
日期:07-16
万里汇(WorldFirst)和Cdiscount等欧洲5大平台达成合作(WorldFirst 万里汇)
  新年好消息第一弹!万里汇(Worldfirst)和ManoMano、Cdiscount、FNAC&DARTY、Rakuten France等欧洲5大电商平台达成合作。跨境电商卖家除了享受万里汇(Worldfirst)便捷的...
日期:07-10
Twitter 解雇了整个人工智能道德和责任团队
11月7日 消息:作为Twitter 全公司裁员的一部分,该公司已经解雇了整个机器学习伦理、透明度和责任(META)团队。被解雇的人包括 META 总监 Rumman Chowdhury 和高级工程经理 Joan...
日期:11-08
王牌对王牌 | 华云数据用信创云基座助力生态繁荣 推动信创产业高质量发展
  在新基建、数字化浪潮驱动下,信创产业成为产业数字化转型、提升产业链发展的关键,促进信创行业协同发展、共建健康生态已成共识。2021年2月8日,由华云数据、麒麟软件、瀚...
日期:07-16
AMD下代显卡集体现身:首批至少8个型号「下一代amd显卡」
NVIDIA RTX 40系列已经发布,即将陆续解禁上市,AMD也已官宣将在11月3日发布下代显卡。根据曝料者_rogame,AMD Navi 3x系列首批就有至少八个不同的PCI ID,对应不同产品,其中不仅有...
日期:10-05
软银“大瘦身”:愿景基金裁员幅度或达30%,高于外界普遍预期_软银愿景基金领投
  记者/李京亚  在软银单季经历毁灭性亏损之后,负责投资的愿景基金部门裁员幅度可能高于外界想象。  北京时间9月29日晚间,彭博社援引知情人士消息报道,软银集团预计将对...
日期:10-04
1099元起!荣耀Play6C 5G今日发布:10.13正式开售「荣耀 | Play5T 新品上市4G智能手机」
据消息显示,荣耀今天发布了一款入门机型荣耀Play6C 5G,目前新机已开启预售,将于10月13日正式开售。该机采用6.5英寸+720*1600分辨率+90Hz刷新率的LCD显示屏,并通过了德国莱茵低...
日期:10-09