厲害了!騰訊公布首個機器狗,梅花樁上大秀功夫

2020-12-15 雷鋒網

少林從師數十冬,梅花樁上練真功。持之以恆銳意修,定可成名蓋群雄。

中國功夫裡,梅花樁是一項重要訓練道具。你問我梅花樁是什麼?大概就長這樣:

誒等等,梅花樁上有個什麼生物?

噢,這是鵝廠今天官宣的狗子 Jamoca。

出自騰訊 Robotics X 實驗室的 Jamoca 來頭不小,它是國內首個能完成走梅花樁複雜挑戰的四足機器人。

當然,和 Jamoca「師出同門」的一款小摩託也在剛剛首次對外亮相。

小摩託是一款自平衡輪式移動機器人,其相關研究成果還入選了機器人行業的頂級會議 IROS 2020。

一起康康騰訊 Robotics X 實驗室在機器人移動能力上的最新技術突破。

Jamoca 能跑能跳,還能挑戰梅花樁

四足移動機器人我們可能沒少聽過,其實它就是機器狗。

比如美國波士頓動力公司的一隻賣 53 萬的網紅狗子 Spot。

再比如上個月登上學術期刊 Science Robotics 封面的瑞士狗子 ANYmal。

那麼中國的機器狗有哪些亮點?

軟體上,騰訊 Robotics X 實驗室基於自研的機器人控制技術,為 Jamoca 打造了一個能應對複雜環境的智能大腦。

硬體上,Jamoca 由外部提供的平臺改裝而成,重約 70 公斤,長 1 米、寬 0.5 米、站高 0.75 米。

軟硬體加持下,Jamoca 能行走、小跑和跳躍,自主定位和避障自然不在話下。

真這麼強,出來溜溜?

這不,挑戰來了——第一步,上高 60 釐米、呈 20° 斜面角度的臺階;第二步,走鄰樁最大高度差 16 釐米、間距不等的梅花樁。

這其中,考驗狗子移動能力的難點有二:

理解梅花樁的排布(包括位置和高度);選擇最佳落腳點及路線並穩定精準地行走(落腳到梅花樁中心點)。正如騰訊 Robotics X 實驗室研究員所說:

和國際上其他四足機器人走木塊的場景比較,此次 Jamoca 所挑戰的梅花樁落腳面積更小、高度更高,並有臺階的組合,實現的難度要更大。

而這兩大難點恰巧對應了鵝廠在移動技術方面深耕的兩個核心技術模塊:「感知」和「運動規劃與控制」。同時,二者通過另一核心技術模塊「整機系統設計與搭建」,實現了系統性的集成融合。

從 Jamoca 的挑戰來看,它已然達到了這樣的標準——誤差 1 釐米內的感知定位、根據環境進行的 10 毫秒級路線規劃、基於動力學的 1KHz 實時力矩控制、梅花樁中心點 1 釐米內的落腳誤差,以及全系統的高度協同。

這背後,其實是騰訊 Robotics X 實驗室在這幾方面下了功夫:

精準環境感知方面,Jamoca 創新性地實現了魯棒的眼腳標定,並利用 RGB-D 相機對周圍環境實時感知;通過特徵點匹配的方式,對 Jamoca 自身的運動軌跡在線跟蹤;將基於視覺的定位信息與基於運動學的裡程計信息和 IMU(慣性測量單元) 數據進行融合,提高了定位追蹤的精度和頻率;利用算法識別和提取出臺階和梅花樁的表面區域範圍和中心點位置,將數據進行融合,重建出整個三維運動場景。最優運動線路規劃和實時運動控制方面,Jamoca 基於實時感知到的本體及梅花樁位置信息,基於質心動力學,實現在線質心軌跡生成和落腳點規劃。在保證機器人的四條腿可以安全地踏到下一步的梅花樁的同時,優化出一條本體移動長度最短、綜合耗力最小的運動軌跡,並且可以在線持續地進行上述運動規劃。基於實時本體狀態估計,Jamoca 能結合質心動力學模型來構建優化問題,實時求解機器人足端所需的地面反作用力,並結合反饋控制實現精準魯棒的實時力控,可完成行走、對角小跑以及跳躍等的運動控制。總而言之,相比一些預先設計好規則後做重複運動的工業機器人,Robotics X 實驗室更關注機器人有意識、有判斷的自主特性研究,希望有很大不確定性的動態環境裡,機器人學會自主做決策、完成任務。

現階段,Jamoca 主要用於實驗室內部科研實驗,未來它還能幫助機器人小夥伴們更好地適應複雜的現實環境,小小期待一下它成名蓋群雄的模樣吧。

小摩託靜止、行進自主保持平衡

就在 Jamoca 苦苦練功的時候,師兄小摩託在國際上已經小有名氣了。

小摩託大名叫做自平衡輪式移動機器人,也可稱之為自平衡自行車,是騰訊 Robotics X 實驗室的首個整機自研機器人。

此前舉行的機器人頂會 IROS 2020 上,騰訊 Robotics X 實驗室聯合國際團隊,發布了兩篇平衡控制方向的 Oral 論文。

一是與紐約大學的論文《自平衡輪式移動機器人的非線性平衡控制:設計與實驗》,主要關注自平衡輪式移動機器人的動靜態平衡控制的穩定性問題。

在傳統輪式移動機器人的基礎上,騰訊 Robotics X 實驗室增加了動量輪和電機驅動系統,使用了級聯與阻尼配置的無源控制(Interconnection and Damping Assignment - Passivity Based Control, IDA-PBC)方法,並應用李雅普諾夫理論,從理論上證明了自平衡輪式移動機器人的閉環系統穩定性。

二是《自平衡輪式移動機器人平衡的增益規劃控制器設計》——不同於傳統的靜動態平衡區分對待,研究團隊建立了可以同時描述輪式移動機器人動態特性和靜態特性的統一數學模型。

基於統一模型,動態平衡和靜態平衡對不同驅動輸入的依賴程度不同,無法使用同樣的控制參數。因此,研究團隊使用了基於增益規劃(Gain Scheduling)的控制方法,在兩種情況下都能保持輪式機器人的平衡。

兩份研究展現了小摩託軟體方面的研發思路。

而硬體上,該平臺完全由騰訊 Robotics X 自研,重約 15 公斤,長 1.15 米,高 0.52 米。

再看看小摩託究竟有多穩。

比如試著放一杯咖啡上去。

靜止、前進、轉彎,都不用擔心咖啡灑出來。

這是由於:

相比傳統的輪式移動機器人,小摩託增加了動量輪及電機驅動系統。它的控制能力可細分為行進中的動態自平衡和停止行進時的靜態自平衡,應用角動量守恆的原理實現自平衡控制。

甚至鵝廠員工狠心攻擊,依靠平衡算法的小摩託也毫無壓力。

蕪湖~再來上個坡。

在不同的路面狀況下,都表現出了較好的運動能力和平衡性能。甚至對於行駛路徑上存在特定約束的情況,比如沿著獨木橋行駛的場景,它也能從容應對。

移動是機器人最基礎的能力之一,而移動又可分為四個技術模塊:機械設計、感知、運動規劃與控制、整機系統設計與搭建。

通俗的說,前三者是機器人的軀幹、眼睛和大腦,最後一項則是各「器官」協調的能力。

不論是 Jamoca 還是小摩託,都是騰訊在機器人移動能力方向上的重要研究進展。

正如騰訊 Robotics X 與騰訊 AI Lab 實驗室主任張正友博士所說:

移動或運動能力,是機器人最核心、也是最基本的能力之一,決定了它能去到什麼場景,做什麼事情,未來有什麼樣的想像力。我們很高興能看到這兩項進展,並將繼續深入探索機器人的通用能力,為虛擬到真實世界搭建一個有力的橋梁。

相關焦點

  • 梅花樁上練真功!騰訊公布機器人移動技術探索的兩項新突破
    11月20日,騰訊公布了其在移動機器人研究方面的新進展:四足移動機器人 Jamoca 和自平衡輪式移動機器人首次對外亮相。Jamoca 是國內首個能完成走梅花樁複雜挑戰的四足機器人,而自平衡輪式移動機器人的相關研究成果還入選了機器人行業的頂級會議 IROS 2020。
  • 機器狗走梅花樁?自行車能自平衡?騰訊 Robotics X 實驗室研究首次...
    【環球網科技綜合報導】11月20日,騰訊公布了其在移動機器人研究方面的新進展:四足移動機器人 Jamoca 和自平衡輪式移動機器人首次對外亮相。Jamoca 是國內首個能完成走梅花樁複雜挑戰的四足機器人,而自平衡輪式移動機器人的相關研究成果還入選了機器人行業的頂級會議 IROS 2020。
  • 騰訊造「國產」機器狗 花式走梅花樁
    剛剛,騰訊 Robotics X 實驗室公布了在移動機器人研究方面的新進展:四足移動機器人 Jamoca 和自平衡輪式移動機器人首次對外亮相。騰訊 Robotics X 實驗室研究員表示,與國際上其他四足機器人走木塊的場景相比,此次 Jamoca 所挑戰的梅花樁落腳面積更小、高度更高。Jamoca 也是國內首個能完成走梅花樁複雜挑戰的四足機器人。在走梅花樁之前,Jamoca 還要爬上一個高 60 釐米、呈 20° 斜面角度的臺階。
  • 前瞻機器人產業全球周報第96期:騰訊四足機器狗Jamoca首次亮相...
    騰訊 Robotics X 實驗室機器狗 Jamoca 首亮相,可挑戰高難度梅花樁11月20日,騰訊公布了其在移動機器人研究方面的新進展:四足移動機器人(機器狗)Jamoca據介紹,Jamoca 是國內首個能完成走梅花樁複雜挑戰的四足機器人,而自平衡輪式移動機器人的相關研究成果還入選了機器人行業的頂級會議 IROS 2020。這兩項進展均來自騰訊 Robotics X 實驗室,屬於移動方向上的技術突破,也是機器人最基礎的能力之一。
  • Science 子刊封面:機器狗「絕影」陌生環境中摸...
    11 月 20 日,出自騰訊 Robotics X 實驗室的 Jamoca 作為國內首個能完成走梅花樁複雜挑戰的機器狗亮相。首先,在各自的深度神經網絡(DNN)中,一組(8 個)經過訓練的專家技能對 MELA 進行初始化。然後,通過門控神經網絡(GNN)學習 DNN 的組合,MELA 獲得更多的跨各種運動模式的專家技能、過渡技能。運行過程中,MELA 不斷混合多種 DNN,動態合成一種新的 DNN,以產生適應環境變化的行為。
  • 波士頓動力機器狗首個開箱:53萬,我買到了啥?
    「他們的視頻不是在騙人,這是真的」剛拿到的波士頓動力機器人被裝在一個大箱子裡,乍一看很像我們平時用到的工具箱。那麼,接下來就正式開箱了:「比想像中要大,它佔滿了整個箱子」在打開的一瞬間,Lew Later 有點意外地說到。接下來是安裝電池。
  • 梅花樁五勢架子(套路)基本動作名稱與行動方位詳解
    應往哪裡上?需往哪裡撤?梅花樁從五勢架子(套路)的行動方位開始2012年5月崑崙功夫俱樂部左憲宗教練、魏巍總教練根據韓其昌老先生的教學實踐並參考李佩基、丁寶源、陳樹坤老師著《梅花樁拳基礎功法》等書籍整理編寫了供梅花樁五勢初練者掌握套路中的方位與動作方向的
  • 淺談《伍六七》最厲害的大招,大春榜上有名,而她堪比梅花十三!
    今天小明同學就給大家淺談一下,這部國漫中到底誰的大招是最厲害的?何大春榜上有名,而梅花十一她堪比梅花十三!第一位我們就先從雞大保開始說起吧!雞大保他其實並沒有什麼大招的,他和山雞王打鬥的時候,使用的也都是一些拳腳功夫,但其實他獲勝的關鍵,是他的心境。小明同學相信,如果他沒有偷了山雞王的強力變身劑的話,他也不會贏得這麼快的!
  • 夏雨全英文出演《龍之誕生》 合作好萊塢首秀功夫
    網易娛樂9月14日報導9月13日,由夏雨主演,美國著名導演、編劇喬治·諾非,金牌製片人麥克·倫敦、龐洪等人傾力打造的好萊塢功夫巨製《龍之誕生》在多倫多國際電影節舉行全球首映式,一眾主創出席活動,並與現場媒體、觀眾交流拍攝心得。主演夏雨因拍戲檔期原因未能出席,但三料影帝此番首次飾演功夫大師便合作好萊塢,也引起了現場媒體與觀眾的無限期待。
  • 璧華詠春館主喊話雷龍:我們梅花樁上切磋,雷龍已回應
    璧華詠春館主喊話雷龍:我們梅花樁上切磋,雷龍已回應。近日,自稱「璧華詠春第一人」的關龍在福清詠春拳館被業餘泰拳手太古雷龍30秒打服的視頻,在搏擊圈瘋狂傳播,一時間詠春國術能否實戰再次被推上了風口浪尖。針對太古雷龍和關龍兩人之間切磋的前因後果,圈內知名搏擊媒體人格鬥小師妹專門對雷龍做了一個採訪。
  • 深入醫院抗疫、督導市民隔離,全能波士頓動力機器狗大顯身手
    而如今在疫情大流行的環境下,在公共區域進行活動十分危險,各國都在呼籲民眾不要聚集,各個密集區域也有人流督導員,而 Spot 機器狗也是其中一員,新加坡市政當局正在使用它來提醒遊客彼此保持安全距離
  • 從東京到拉斯維加斯 OWE引爆中國功夫真人格鬥秀
    翌日,作為OWE(東方職業摔角)創始人的傅華陽又飛抵東京,為OWE職業摔角秀的熱烈演出慶功,他還在微信朋友圈曬出了這個消息。  這是OWE應日本聯合摔角聯盟的邀請,第二次抵達日本,參加東京摔角殿堂新木園的摔角比賽。  一個多月前,OWE首次在日本亮相,引起轟動。在長達一年的「魔鬼式訓練」調教下,OWE成員的首場職業摔角秀大獲成功。
  • 騰訊AI首秀領唱中國新兒歌
    歷時整整一年,2020年6月1日,「騰訊荷風藝術行動」攜手QQ音樂、全民K歌發起的「藝術行動兒童音樂共創活動」評選揭曉,6首優秀原創兒歌及10個優秀兒歌創詞作品從8000多首作品中脫穎而出,榮獲優勝獎項。兒童節當天,「藝術行動」聯合QQ音樂首發的公益音樂專輯《兒歌新唱》也正式上線,並收錄了其中的《未來的你加油》《小螞蟻》《爸爸》《雪娃娃》4首獲獎作品,成為送給孩子們最為特別的一份節日禮物。
  • 首鋼滑雪大跳臺完美首秀
    首鋼滑雪大跳臺完美首秀 來源:中國鋼鐵新聞網 • 2019-12-13 16:03:56 作為北京2022年冬奧會北京賽區首個建成的新建比賽場館,首鋼滑雪大跳臺於
  • 亞馬遜熱帶雨林辦公室刷屏後,貝佐斯攜機器狗霸氣亮相!
    驅動中國2018年3月20日消息 近日,亞馬遜不斷刷屏,首先是亞馬遜公布了他們在西雅圖總部的新辦公室,瀰漫著「熱帶雨林」氣息的辦公環境引得眾人醉倒在屏幕前。400種來自全世界的植物,還有巖石、小溪、燕子窩會議室……隱藏在這片熱帶雨林裡面。
  • 騰訊四足移動機器人Jamoca和自平衡輪式移動機器人首次對外亮相
    打開APP 騰訊四足移動機器人Jamoca和自平衡輪式移動機器人首次對外亮相 機器人技術與應用 發表於 2020-12-11 15:20:59
  • 上海迪士尼公布首份演出「菜單」 將現最全公主秀
    唐老鴨和花慄鼠會打「唐式太極拳」,人猿泰山藉助中國雜技綢吊功夫「談情說愛」,虛擬的花木蘭或將在夜光幻影秀中「攀」上迪士尼奇幻童話城堡的塔頂……  上海迪士尼度假區5日公布首份園內演出「菜單」,原汁原味的迪士尼人物融合傳統中國風,共同構成主題樂園內豐富多彩的文娛活動。
  • 國家電網公布大數據 充電樁概念股大漲
    來源:中國基金報國家電網公布大數據!充電樁概念股大漲新能源車現如今火遍大江南北,一波又一波的政策利好信息頻出,把新能源車的發展推上了「快軌「。國家電網電動汽車充電樁突破百萬據國家電網顯示,截至今天(20日),國家電網智慧車聯網平臺接入的充電樁超過了100萬個,服務的電動汽車消費者達到550萬人,已初步形成覆蓋全國的電動汽車充電網絡。