梅花樁上練真功!騰訊公布機器人移動技術探索的兩項新突破

2021-01-09 齊魯壹點

11月20日,騰訊公布了其在移動機器人研究方面的新進展:四足移動機器人 Jamoca 和自平衡輪式移動機器人首次對外亮相。

Jamoca 是國內首個能完成走梅花樁複雜挑戰的四足機器人,而自平衡輪式移動機器人的相關研究成果還入選了機器人行業的頂級會議 IROS 2020。

這兩項進展均來自騰訊 Robotics X 實驗室,屬於移動方向上的技術突破,也是機器人最基礎的能力之一。

騰訊 Robotics X 實驗室於2018年成立,致力推進人機協作的下一代機器人研究,打造虛擬世界到真實世界的載體與連接器。目前實驗室主攻移動、靈巧操作和智能體等三大通用機器人技術的研究與應用,並聚焦於多模態移動機器人的研發。

四足移動機器人 Jamoca :

能走、能跑、能跳,可挑戰梅花樁複雜地形

「少林從師數十冬,梅花樁上練真功。持之以恆銳意修,定可成名蓋群雄。」

梅花樁是中國功夫的重要訓練道具之一,習練梅花樁也是武俠小說中修煉輕功的基礎。現在,梅花樁上迎來了一位新的「練功者」—— 騰訊四足移動機器人 Jamoca。

Jamoca 本體基於外部提供的硬體平臺改裝,重約70公斤,長1米、寬0.5米、站高0.75米

四足移動機器人,更常見的一個名字是機器狗。騰訊 Robotics X 實驗室在外部提供的本體之上,基於自研的機器人控制技術,為 Jamoca 打造了一個能應對複雜環境的智能大腦。這個大腦讓 Jamoca 能行走、小跑和跳躍,並賦予了它自主定位和避障的能力。

此次 Jamoca 完成的挑戰由高60釐米、呈20°斜面角度的臺階和鄰樁最大高度差16釐米、間距不等的梅花樁兩部分組成。

據騰訊 Robotics X 實驗室研究員介紹,和國際上其他四足機器人走木塊的場景比較,此次 Jamoca 所挑戰的梅花樁落腳面積更小、高度更高,並有臺階的組合,實現的難度要更大。

其中,考驗機器人移動能力的難點主要有兩個:理解梅花樁的排布(包括位置和高度)、選擇最佳落腳點及路線並穩定精準地行走(落腳到梅花樁中心點)。

這正對應了實驗室在移動技術方面鑽研的的兩個核心技術模塊:感知、運動規劃與控制;同時二者通過實驗室的另一核心技術模塊:整機系統設計與搭建,實現了系統性的集成融合。

從 Jamoca 挑戰的結果看,騰訊 Robotics X 實驗室已經達到了極高的技術標準——誤差1釐米內的感知定位、根據環境進行的10毫秒級路線規劃、基於動力學的1KHz實時力矩控制、梅花樁中心點1釐米內的落腳誤差,以及全系統的高度協同。

在精準環境感知方面,Jamoca 創新性地實現了魯棒的眼腳標定,並利用RGB-D相機對周圍環境進行實時的感知。通過特徵點匹配的方式,對 Jamoca 自身的運動軌跡進行在線跟蹤,並將基於視覺的定位信息與基於運動學的裡程計信息和 IMU(Inertial measurement unit,慣性測量單元) 數據進行融合,提高了定位追蹤的精度和頻率。同時利用算法識別和提取出臺階和梅花樁的表面區域範圍和中心點位置,將定位和識別的數據進行融合,從而重建出整個三維運動場景。

在最優運動線路規劃和實時的運動控制方面,Jamoca 基於感知系統實時感知到的機器人本體及梅花樁位置信息,基於質心動力學,實現在線的質心軌跡生成和落腳點規劃。在保證機器人的四條腿可以安全地踏到下一步的梅花樁的同時,優化出一條本體移動長度最短、綜合耗力最小的運動軌跡,並且可以在線持續地進行上述運動規劃。

同時,基於實時的本體狀態估計,Jamoca 能夠結合質心動力學模型來構建優化問題,實時求解機器人足端所需的地面反作用力,並結合反饋控制實現精準魯棒的實時力控,可完成行走、對角小跑以及跳躍等的運動控制。

不同於預先設計好規則之後做重複的運動的工業機器人,Robotics X 實驗室更關注機器人有意識、有判斷的自主特性研究,目的就是要在有很大不確定性的動態環境裡,能夠實現機器人的自主判斷、自主決策,並自主完成任務。

現階段,Jamoca 主要用於實驗室內部科研實驗。它的在線環境感知、最優運動規劃和實時運動控制等能力,未來將幫助騰訊其他機器人產品更好地適應複雜的現實環境。

靜止、行進均能自主保持平衡的輪式機器人

此次一同亮相的,還有一款自平衡輪式移動機器人,也可稱之為自平衡自行車,是騰訊 Robotics X 實驗室的首個整機自研機器人。

它在傳統輪式移動機器人的基礎上,增加了動量輪及其電機驅動系統,使得機器人可以在靜止及行進狀態下均保持平衡不倒。

自平衡輪式移動機器人的硬體平臺完全由騰訊Robotics X自研,重約15公斤,長1.15米,高0.52米

它的控制能力又可以細分為行進中的動態自平衡和停止行進時的靜態自平衡。行進中的動態自平衡是依靠前把轉動進而帶動車身的轉動實現,而停止行進時的靜態自平衡則採用動量輪力矩平衡技術,應用角動量守恆的原理實現自平衡控制。

依靠平衡算法,即使受到一定的外界幹擾,騰訊自平衡輪式移動機器人仍然可以在保持自平衡狀態的同時,實現平穩地向前行駛。

機器人在不同的路面狀況下,例如遇到上下坡時,也都表現出了較好的運動能力和平衡性能。甚至對於行駛路徑上存在特定約束的情況,比如沿著獨木橋行駛的場景,它也能從容應對。

在此前舉行的機器人行業國際頂會IROS 2020上,騰訊 Robotics X 實驗室發布的兩篇平衡控制方向的Oral論文,就來自於該機器人項目。

IROS由IEEE(電氣和電子工程師協會)和RSJ(日本機器人學會)共同舉辦,是機器人領域三大國際頂級會議之一,今年的主題為Consumer Robots and Our Future,接收來自機器人與人工智慧、機器人視覺、傳感器、雲機器人等相關領域的研究。

在第一項研究《自平衡輪式移動機器人的非線性平衡控制:設計與實驗》中,騰訊 Robotics X 實驗室與紐約大學合作研究了自平衡輪式移動機器人的動靜態平衡控制的穩定性問題。

在傳統輪式移動機器人的基礎上,騰訊 Robotics X 實驗室增加了動量輪和電機驅動系統,使用了級聯與阻尼配置的無源控制(Interconnection and Damping Assignment - Passivity Based Control, IDA-PBC)方法,並應用李雅普諾夫理論從理論上證明了自平衡輪式移動機器人的閉環系統穩定性。

此外,實驗室還在自建平臺上證明了新控制器效果良好,能讓機器人保持自平衡,並有一定的抗外界幹擾能力。

而在另一項研究《自平衡輪式移動機器人平衡的增益規劃控制器設計》中,不同於傳統方法將靜態和動態平衡區分對待,研究團隊建立了可以同時描述輪式移動機器人動態特性和靜態特性的統一的數學模型。

基於同一個模型,動態平衡和靜態平衡對不同驅動輸入的依賴程度不同,無法使用同樣的控制參數。因此,研究團隊使用基於增益規劃(Gain Scheduling)的控制方法。該控制方法可在兩種情況下都保持輪式機器人的平衡,這一點在理論和實驗中都得到證明。

移動機器人的技術框架

騰訊 Robotics X 實驗室主攻機器人移動、靈巧操作和智能體等三大核心通用技術的研究與應用。

其中,移動是機器人最基礎的能力之一,此次發布的兩項進展就屬於移動方向。

而移動方向又可分為四個技術模塊:機械設計、感知、運動規劃與控制、整機系統設計與搭建。通俗的說,前三者分別是機器人的軀幹、眼睛和大腦,最後一項則是它的各「器官」協調的能力。

算法自研的 Jamoca 正是結合了騰訊在感知、運動規劃與控制兩方面的研究成果。而整機自研的自平衡輪式移動機器人則可以視作騰訊在機器人的機械設計和整機系統設計與搭建方向能力上的一個裡程碑項目。

騰訊 Robotics X 與騰訊 AI Lab 實驗室主任張正友博士表示:「移動或運動能力,是機器人最核心、也是最基本的能力之一,決定了它能去到什麼場景,做什麼事情,未來有什麼樣的想像力。我們很高興能看到這兩項進展,並將繼續深入探索機器人的通用能力,為虛擬到真實世界搭建一個有力的橋梁。」

相關焦點

  • 騰訊公布首個機器狗,梅花樁上大秀功夫
    ,梅花樁上練真功。一起康康騰訊 Robotics X 實驗室在機器人移動能力上的最新技術突破。Jamoca 能跑能跳,還能挑戰梅花樁四足移動機器人我們可能沒少聽過,其實它就是機器狗。比如美國波士頓動力公司的一隻賣 53 萬的網紅狗子 Spot。
  • 騰訊Robotics X 實驗室研究首次「開箱」
    騰訊 Robotics X 實驗室研究首次「開箱」  【環球網科技綜合報導】11月20日,騰訊公布了其在移動機器人研究方面的新進展:四足移動機器人 Jamoca 和自平衡輪式移動機器人首次對外亮相。  Jamoca 是國內首個能完成走梅花樁複雜挑戰的四足機器人,而自平衡輪式移動機器人的相關研究成果還入選了機器人行業的頂級會議 IROS 2020。
  • 騰訊 Robotics X 實驗室研究首次...
    【環球網科技綜合報導】11月20日,騰訊公布了其在移動機器人研究方面的新進展:四足移動機器人 Jamoca 和自平衡輪式移動機器人首次對外亮相。Jamoca 是國內首個能完成走梅花樁複雜挑戰的四足機器人,而自平衡輪式移動機器人的相關研究成果還入選了機器人行業的頂級會議 IROS 2020。
  • 騰訊造「國產」機器狗 花式走梅花樁
    剛剛,騰訊 Robotics X 實驗室公布了在移動機器人研究方面的新進展:四足移動機器人 Jamoca 和自平衡輪式移動機器人首次對外亮相。騰訊 Robotics X 實驗室研究員表示,與國際上其他四足機器人走木塊的場景相比,此次 Jamoca 所挑戰的梅花樁落腳面積更小、高度更高。Jamoca 也是國內首個能完成走梅花樁複雜挑戰的四足機器人。在走梅花樁之前,Jamoca 還要爬上一個高 60 釐米、呈 20° 斜面角度的臺階。
  • 15樓財經 負責機器人和人工智慧兩大實驗室 騰訊產生首位最高職級...
    1月8日騰訊宣布,騰訊Robotics X實驗室及騰訊AI Lab負責人張正友博士成為騰訊首位17級研究員/傑出科學家,17級是騰訊歷史上最高的專業職級。公司高級執行副總裁、技術工程事業群總裁盧山在張正友博士的職級授予儀式上談到:「正友老師榮升T17級,是騰訊歷史上最高的專業職級,可以說是當之無愧的。『學術有影響,工業有產出』這句話不僅是Lab的口號,更是一種技術人的情懷,當你老了,和小孩去聊的時候,就可以說這輩子不僅是在學術上很牛,我們在落地上也有值得驕傲的成就。」
  • 騰訊首位17級傑出科學家誕生 系公司歷史上最高專業職級
    1月8日,騰訊宣布,騰訊Robotics X實驗室及騰訊AI Lab負責人張正友博士成為騰訊首位17級研究員/傑出科學家。 據悉,17級是騰訊歷史上最高的專業職級。在騰訊數萬名技術人員中,目前僅有十幾位15級以上的傑出科學家,而17級,在張正友之前還沒有人達到過。
  • 當鵝看上了狗,騰訊發布的四足機器人高難挑戰走梅花樁
    這條「狗」的突破之處在於機器人最基礎的移動方向的突破,用演示的案例表達就是,它能走梅花樁這樣的複雜地形。這種挑戰的結果顯示,它已經達到了極高的技術標準。 如果你覺得機器狗的技術突破好像也沒什麼的話,那麼我告訴你,這個Jamoca不是別人做的,是鵝廠騰訊發布的。你會不會有點點驚訝?
  • 前瞻機器人產業全球周報第96期:騰訊四足機器狗Jamoca首次亮相...
    Robotics X 實驗室機器狗 Jamoca 首亮相,可挑戰高難度梅花樁11月20日,騰訊公布了其在移動機器人研究方面的新進展:四足移動機器人(機器狗)Jamoca 和自平衡輪式移動機器人首次對外亮相。
  • 馬斯克執著的蛇形機器人充電,在中國的機器人充電樁產業下,可能終究只是一場空!
    其實除了特斯拉,在中國如今5G時代和無人駕駛技術快速推廣之際,作為推動新能源汽車發展的重要舉措,還有很多公司也正在進行著機器人充電樁的探索。尤其「充電樁」也被納入到中國新基建目錄內,很多新能源汽車企業在響應國家號召大力推動充電樁建設的同時,也在不斷探索創新型能源補給方案。 19年大眾提出過一種概念機器人,可以把小型移動充電站拖到相應的車輛面前,並連接到汽車充電口上。
  • 騰訊移動遊戲五周年:20款新品亮相 共同「探索遊戲更多可能」
    在市場培育上,騰訊移動遊戲最早以「天天系列」撬動手遊市場,隨後以細分品類挖掘深度用戶,近年則通過《王者榮耀》普及移動電競,這些動作幫助整個行業找到了新的空間;騰訊移動遊戲亦以開放的心態與行業合作,呂鵬透露在過去5年,騰訊與57家廠商合作,代理了78款代理遊戲,分成超過150億元;在品類探索上,騰訊移動遊戲通過精品遊戲、功能遊戲和極光計劃等不同業務模塊積極探索遊戲的創新玩法、細分品類和社會價值,給行業帶來更多可能
  • 60後「AI大牛」成騰訊最高專業職級科學家
    去年11月,張正友領導創建的世界領先的機器人實驗室 Robotics X曾發布可走梅花樁複雜挑戰的四足機器人及自平衡輪式移動機器人,引發外界關注。「張氏標定法」世界通行公開資料顯示:張正友出生於1965年,浙江溫嶺人。1985年,他本科畢業於浙江大學信息與電子工程系,2年後在法國南錫(Nancy)大學獲計算機科學碩士學位。
  • 騰訊遊戲線上發布會:超40款產品探索遊戲更多可能
    對遊戲價值認知的拓展,將驅動遊戲產業不斷去探索遊戲新的邊界,打開全新的想像空間。同時,騰訊遊戲將進一步提升產品能力 ,聚焦「技術、玩法和故事」三大核心要素,探索遊戲進化的更多可能。 「在全球範圍內,新技術的普及正在加速,玩法的創新周期正在縮短,故事IP的創作也日益豐富,遊戲產業正站在一個充滿各種可能性的時代路口。」馬曉軼在演講中指出。
  • 美國公布兩項探索電離層的新計劃
    新華社華盛頓1月4日電(記者周舟 林小春)美國航天局4日公布兩項探索電離層的新計劃,旨在了解空間天氣、地磁暴等現象如何影響大氣層上部的電離層。這一區域與現代人類生活密切相關,但人們對它卻所知不多。今年晚些時候,美國航天局還將發射「電離層連接探索」(簡稱ICON)太空飛行器進入電離層。  電離層是受太陽高能輻射激發等原因而電離的大氣層,從距地表約50千米延伸到約1000千米高度,飛機、船隻導航和手機通信使用的無線電波就在電離層中傳播。
  • 騰訊AI Lab 2020 年度回顧
    在虛實集成世界框架下,現實虛擬化、虛擬真實化、全息網際網路、智能執行體四大發展方向將成為騰訊 AI Lab 和 Robotics X 實驗室未來發展的重要指導。 下面將呈現騰訊 AI Lab 和 Robotics X 實驗室在 2020 年取得的兩項重大突破:虛擬人和機器人。
  • (科技)美國公布兩項探索電離層的新計劃
    新華社華盛頓1月4日電(記者周舟 林小春)美國航天局4日公布兩項探索電離層的新計劃,旨在了解空間天氣、地磁暴等現象如何影響大氣層上部的電離層。這一區域與現代人類生活密切相關,但人們對它卻所知不多。
  • 騰訊安全玄武實驗室公布全球首例克隆攻擊技術
    中新網1月10日電 1月9日,「應用克隆」這一移動攻擊威脅模型正式對外披露。騰訊安全玄武實驗室與知道創宇404實驗室,在聯合召開的技術研究成果發布會上公布並展示了這一重大研究成果。目前,大部分移動應用在設計上都沒有考慮這種攻擊方式。」於暘表示,移動網際網路時代,安全廠商必須意識到各種新技術新設計會帶來更多新問題,要用移動思維來評估每一個安全風險,才能避免最終在安全上積重難返。  騰訊安全玄武實驗室聚集了頂尖的技術人才,在很多安全領域都取得了突破進展。而此次「應用克隆」漏洞利用方式的發現,也得益於玄武實驗室的深厚技術儲備。
  • 騰訊Qrobot:小小機器人的大野心
    這是說網際網路在把人和物體都虛擬化之後,會反過來把虛擬的東西通過一個實體呈現出來,智能硬體和機器人就是在順應這個趨勢。Qrobot起因和對於騰訊的意義2010年初,中國科學院和騰訊高層有個會晤,在會上兩邊想到,「中科院有機器人技術,而騰訊有網際網路和QQ形象,為什麼不利用中科院的機器人技術把QQ形象做活?」隨後,中科院深圳、騰訊、中科院下屬企業中科睿成三者就聯合發起了Qrobot項目。
  • 稀罕物種 仿生機器人「真香」
    四足機器人進入商業化元年 中國機器人企業爭相湧入「真香」賽道 目前在仿生機器人的生態鏈中,四足機器人的投入與研發技術相對成熟,其中,較為知名的廠家非波士頓動力機器狗莫屬,作為四足機器人研發製造的王牌廠家,旗下機器狗可上下樓梯且摔倒可以自己爬起來
  • 【PW早報】騰訊貴安數據中心將保存核心數據/百度百科上線「區塊鏈...
    PingWest品玩5月29日報導騰訊將把核心數據存儲在貴安七星綠色數據中心騰訊 CEO 馬化騰表示,騰訊在貴安新區建設的 「貴安七星綠色數據中心」 已經投入一期試運行,未來會把最重要的數據存儲在這裡。