為滿足用戶需求,匯星海推出無人機AI追蹤整體開源方案:可對運動目標實時捕捉鎖定和跟蹤,同時支持飛機對運動目標自主追蹤飛行。
視頻1:AI追蹤功能展示:飛機自主追蹤飛行
視頻2:AI追蹤功能地面站展示
整套方案源碼開源支持二次開發,為研發工作者提供科研平臺支持,縮短研發時間人力等成本。除此之外,可提供開源雷射SLAM、視覺引導降落等擴展功能。
該方案具備如下特點:
*軟體代碼開源
*無人機平臺小巧性能穩定可擴展
*傳輸系統低延遲穩定性強
*PX4無人系統直接適配
*輸出期望的速度,位置追蹤目標物體
*支持ROS/Gazebo跟蹤算法三維仿真
*光電三軸吊艙,高解析度,ROS/串行接口模塊,支持吊艙三軸角度控制、速度控制模式、pwm模式控制支持10倍變焦距控制。
方案更多優勢:
無人機平臺:小巧便攜 可擴展
hover1四旋翼無人機為全碳纖機身,輕巧耐用,性能穩定,可摺疊成ipad mini的小尺寸,還可放到背包中四處攜帶,飛機性能穩定,操控簡單,兼容性強,大載重,方便用戶繼續擴展。
傳輸穩定 低延遲
方案採用高度集成數據傳輸系統VDC,內置遙控、數據和視頻鏈,傳輸距離有7km和15km兩個版本,具備重量輕、低功耗、低延遲等特徵。
精準追蹤 響應快
基於KCF相關濾波檢測算法,實現對運動目標進行實時地捕捉、鎖定和跟蹤,在計算速度、追蹤效果、通用性上有著十分亮眼表現。
飛機自主可追蹤飛行
在px4_commander中開發了基於三軸視覺吊艙的運動目標追蹤算法,支持offboard模式下四旋翼飛行器對地面或空中運動目標的自主追蹤飛行,代碼包含在此次發布的套件中。
高度集成
整體外觀小型化,內部集成化:
體現在軟體上,目標檢測和跟蹤模塊代碼已集成在開發套件中,在ROS環境下運行吊艙的跟蹤控制採用PID控制器通過ROS/串行接口實現代碼包含在開發套件中,已完成和吊艙適配,對目標的跟蹤和鎖定效果很好可進一步擴展應用場景和更新算法。
體現在整體架構設計上,hover1整體靈巧緊湊,吊艙、VDC等各種設備等高度集成於機身中,整體輕量便攜。
更多AI功能可定製
可定製掛載雷射雷達、雙目視覺、光電跟蹤吊艙等智能化設備,實現開源雷射SLAM、視覺引導降落等擴展功能。
總結:
順應智能生活的發展趨勢,AI研發成為很多領域產業升級的重點,如,智能家居、智慧出行等,無人機AI方向研發亦是時下無人機應用研究的一個重點方向。基於Nvidia Jetson TX2等高性能板卡,我們可以為客戶帶來強大的視覺及人工智慧神經網絡處理能力,此次推出的AI追蹤整體開源方案具備通用性廣、算法精準速度快、飛機小巧性能穩定高擴展等特徵,適用於研發機構或者個人用於無人機AI方向二次開發,節省研發時間、人力成本,助力提升研發效率。除此之外,還可提供視覺感知/雷射雷達避障/導航融合等多種方案支持,滿足用戶更多需求。
*此方案由匯星海和阿木實驗室合作完成