會躲閃的AI無人機,籃球砸不到!新算法讓飛行器更智能
2020-03-21 21:04:05AI云資訊1402
用籃球砸中 3 米外懸停的無人機,你能做到嗎?
那些打過籃球并玩過無人機的人,會想當然地回答,小事一樁。但在這臺無人機面前,你錯了,因為它會快速、靈活地躲避飛來的襲擊。
最近,來自瑞士蘇黎世大學(University of Zurich)的研究人員設計出一種新方法,可以讓無人機在主動躲閃移動障礙物的情況下快速導航。該研究讓無人機向著擁有更優(yōu)異的性能,比如在惡劣環(huán)境下更快速地飛行,在更短時間內(nèi)完成更多任務等邁出很大一步。
當下市面上的無人機已經(jīng)可以承擔很多工作,但是躲避障礙物并不是它們的強項——尤其是在無人機快速移動時。盡管許多飛行機器人都配備了可以檢測障礙物的攝像頭,但通常它們都需要 20~40 毫秒的時間來處理圖像并做出反應。這個時間看似很快,但當無人機自身以較高的速度飛行時,20~40 毫秒的反應時間對于避開飛鳥或者另一架無人機,甚至是靜態(tài)障礙物來說,都是不夠的。尤其是當無人機在一個不可預測的環(huán)境中使用時,或者有多架無人機在同一片區(qū)域飛行時,這會是個棘手的問題。
蘇黎世大學的研究人員將一種類似運動傳感器的 “事件攝像頭” 整合在一起,并設計了新的算法,從而將無人機的反應時間縮短到了幾毫秒。這個近乎一個數(shù)量級的提升,足以讓無人機在空中躲開短距離內(nèi)向其砸來的球或其他物品。該研究發(fā)表在了最新一期的《科學 · 機器人》(Science Robotics)雜志上,由蘇黎世大學機器人技術和感知方向的教授 Davide Scaramuzza 領導。
圖 | 躲避球的無人機(來源:Davide Scaramuzza)
新型攝像頭與算法結(jié)合,3.5 毫秒快速反應
傳統(tǒng)的攝像頭,例如智能手機上的那種,都是通過定期拍攝整個場景的快照來工作,它會同時曝光圖像的所有像素。但是,通過這種方式,只能在機載計算機分析完所有像素之后才能檢測到運動物體。
Davide 研究團隊的 “事件攝像頭” 則不同,其具有彼此獨立工作的智能像素。它在未檢測到外界的變化像素時會保持沉默,而一旦看到了光強度變化的像素就會立即發(fā)送信息。這樣一來,機載計算機只需處理圖像中的一小部分變化像素,因此大大加快了計算速度,從而縮短了反應時間。
Davide 向 DeepTech 具體解釋道:“事件在時空域中生成一個體。我們的算法只考慮在過去 10 毫秒內(nèi)出現(xiàn)的事件。我們補償攝像頭看到的運動,并分析所有事件的統(tǒng)計數(shù)據(jù)。對于每個像素,我們計算歸一化的平均時間戳,它的范圍介于 -1 和 1 之間,動態(tài)對象的得分非常接近于 1。這使我們可以將事件的閾值分別以靜態(tài)對象和動態(tài)對象區(qū)分開。”
圖 | 自我運動補償算法的各個階段,以便區(qū)分出屬于移動障礙的事件(來源:Davide Scaramuzza)
除此之外,“目前的無人機,其目標檢測算法無法很好地和我們開發(fā)的新型攝像頭配合工作?!盌avide 解釋說,“事件攝像頭”是一項最近的創(chuàng)新工作,并且功能與傳統(tǒng)攝像頭不同。我們的攝像頭不以恒定的時間間隔輸出標準圖像,而是輸出與每個像素強度變化相對應的異步事件流。因此,其他研究人員必須發(fā)明自己的算法,在很短的時間內(nèi)收集攝像頭記錄的所有事件,然后減去無人機自身運動的影響。
據(jù) Davide 介紹,該研究使用的 “事件攝像頭”,目前世界上只有 5 家公司生產(chǎn)?!耙驗檫@種傳感器直到 10 年前還只是研究原型,我們使用的是 Insightness 公司的設備?!?研究中所用的無人機平臺,是 Davide 實驗室定制的四軸飛行器,跟市售的商品區(qū)別不是很大,但用于感知和導航的算法都是他的團隊開發(fā)的。
在研究過程中,Davide Scaramuzza 和同事首先分別測試了攝像頭和算法。
在攝像頭被單獨靜止放置時,他們將各種形狀和大小的物體扔向它,同時測量了算法檢測物體的效率。結(jié)果顯示,根據(jù)物體大小和投擲距離的不同,檢測成功率在 81%~97% 之間上下浮動。此外,該系統(tǒng)的平均反應時間只需 3.5 毫秒,便可檢測到飛來的物體。
隨后,最為嚴峻的考驗開始了:他們將攝像頭安裝在真正的無人機上,讓其在室內(nèi)和室外飛行,然后直接向無人機投擲物體。經(jīng)過多次測試,無人機能夠成功避開物體的概率超過 90%,這其中包括從 3 米遠的地方以 10 米 / 秒的速度扔出的球。當測試無人機提前 “知道” 物體的大小時,只需一臺 “事件攝像頭” 就足夠了;而當無人機需要面對大小不同的飛來物體時,則需要使用兩個攝像頭來為其提供立體視覺。
視頻 | 在室外躲避多個物體的測試(來源:Davide Scaramuzza)
正在接洽商業(yè)化
那么,這項研究能否在短期內(nèi)投入規(guī)?;瘧媚??Davide 向 DeepTech 透露:“在原則上,該技術已經(jīng)做好了商業(yè)化準備,我們正在與一些公司討論細節(jié)之中?!?
至于未來的研究方向,Davide 對 DeepTech 說:“我們的計劃是在一個更靈活的四旋翼上測試這個系統(tǒng)。而對于更長遠的目標,我們最終是想有一天能夠讓無人機達到如今飛行員操縱一般的駕駛自如。當前,在涉及無人機的所有搜索和救援應用中,實際上都是人為控制的。如果我們能讓無人機擁有像人類飛行員一樣可靠的導航能力,那么就可以將其用于超出視線范圍或無法遠程控制的任務中?!?
圖 | 比較傳統(tǒng)攝像頭與事件攝像頭的輸出:傳統(tǒng)攝像頭以固定的速率捕獲幀;而事件攝像頭僅以時空事件的螺旋形式,連續(xù)輸出亮度變化的信號,紅色為正向變化,藍色為負向變化(來源:Davide Scaramuzza)
Davide Scaramuzza 所在的蘇黎世大學機器人與感知小組實驗室,一直專注于開發(fā)可以讓自動無人機快速飛行的新技術,以便執(zhí)行對時間要求更為嚴格的任務,例如在發(fā)生自然災害之后對惡劣的環(huán)境進行探索等。
“對于諸如地震、海嘯發(fā)生后的搜尋和救援工作來說,時間是非常關鍵的。因此人們需要能夠在有限的電量時間內(nèi)(通常為 10~20 分鐘)完成盡可能多任務的快速導航無人機?!?Davide 向 DeepTech 解釋道?!爱斘覀兊男聰z像頭將無人機的導航速度提高十倍左右時,也擴展了其潛在的其他應用可能?!?
“未來總有一天,無人機將會被投入到各種各樣的應用中,例如貨物交付、人員運輸、航空攝影術等,當然還有提到的搜救。” 他說,“但是,讓機器人能夠更快地感知并更快地做出決策,對于其他領域來說也可以改變游戲規(guī)則。在一些領域中,比如無人駕駛汽車、運輸、采礦機器人,以及進行遠程檢查工作的設備等,可靠地檢測視野內(nèi)的障礙也是至關重要的。
安全問題,對于每個人來說都是非常重要的事情。“我們的研究向著未來無人機或者汽車更加智能化且更加安全邁出了一小步。” 他表示,他和團隊成員對這項研究所展現(xiàn)的躲避功能感到十分興奮,“我們從未見過商用無人機對快速移動的障礙做出如此迅速的反應,這是所有飛行機器人在任何環(huán)境中安全導航的關鍵要素?!?
植根學界,兼顧創(chuàng)業(yè)
圖 | Davide Scaramuzza 教授(來源:本人)
Davide Scaramuzza 于 1980 年出生于意大利,目前是蘇黎世大學信息學和神經(jīng)信息學的教授,同時他也是蘇黎世聯(lián)邦理工學院(ETH Zurich)神經(jīng)信息學教授。他從事機器人、計算機視覺和神經(jīng)科學交叉領域的研究。具體來說,他研究標準和神經(jīng)形態(tài)攝像頭的使用,使微型無人機在搜索和救援場景中能夠自主、靈活地導航。
他在蘇黎世聯(lián)邦理工學院獲得了機器人和計算機視覺博士學位,隨后在賓夕法尼亞大學(University of Pennsylvania)進行博士后的學習和工作。從 2009 年到 2012 年,他領導了歐洲 sFly 項目——該項目引入了 PX4 自動駕駛儀,并開創(chuàng)了基于視覺沖擊的微型無人機自主導航。
由于他在視覺導航方面的研究貢獻,他被授予 IEEE 機器人與自動化社會職業(yè)生涯早期獎,SNSF-ERC 啟動資金,谷歌研究獎,庫卡、高通和英特爾等獎項,歐洲青年研究獎,Misha Mahowald 神經(jīng)形態(tài)工程獎,以及一些會議論文獎等。
他與人合著了《自主移動機器人導論》(Introduction to Autonomous Mobile Robots,由 MIT Press 出版),并在頂級期刊(TRO、PAMI、IJCV、IJRR)和會議(RSS、ICRA、CVPR、ICCV)上發(fā)表過 100 多篇關于機器人和感知的論文。
2015 年,Davide 與他人共同創(chuàng)立了一家名為“蘇黎世之眼”(Zurich-Eye)的公司,致力于將移動機器人的視覺慣性導航解決方案商業(yè)化,該公司后來成為了 Oculus 公司(2014 年被 Facebook 收購, 5 年多時間馬克 扎克伯格在虛擬現(xiàn)實領域投入了數(shù)十億美元)的歐洲研究中心。此外,他還是 Dacuda 公司(瑞士一家計算機視覺公司,其 3D 部門在 2017 年被 Magic Leap 公司收購)的戰(zhàn)略顧問。
相關文章
- 夏季高溫環(huán)境下,無人機巡檢圖像如何通過貝銳花生殼實時回傳指揮中心
- 大疆與影石相繼跨界:全景無人機,一場技術深耕與資本炒作的較量
- 金秋數(shù)碼福利瘋搶中!無人機、華為手環(huán)、現(xiàn)金紅包等好禮,做體驗官全帶走!
- 昆明市2025年職工職業(yè)技能競賽無人機賽項在飛虎實訓基地精彩啟幕
- 中小載重無人機動力系統(tǒng)推薦,植保/教培/行業(yè)通用,思翼E6動力系統(tǒng)
- 攜手共繪農(nóng)業(yè)藍圖:大疆農(nóng)業(yè)聯(lián)合農(nóng)民日報發(fā)布《農(nóng)業(yè)無人機行業(yè)白皮書》
- 超優(yōu)航空:深耕青少年無人機教育賽道,構建科技教育生態(tài)新圖景
- 應急使命丨國家召喚,卓翼智能無人機密云洪水救援“急先鋒”
- 九識智能與星邏智能達成戰(zhàn)略合作,共推“無人車 + 無人機”空地一體巡檢升級
- 無人機化身巡檢員快遞員,5G-A激活海島低空經(jīng)濟
- 亮相直擊應急使命|大疆無人機賦能災害救援 空地協(xié)同突破“三斷”孤島
- 新型防務丨卓翼智能首次攜低空安全一體化綜合解決方案亮相2025國際無人機應用及防控大會
- 領航全域,展翼未來!2025國際無人機應用及防控大會在京開幕,擘畫低空經(jīng)濟新藍圖
- 從雙城救援到DJI FC100發(fā)布:大疆無人機重塑應急救援新方式
- 2025全國無人機創(chuàng)新技能大賽決賽落戶河北赤城,京北生態(tài)名城搭建科技競技舞臺
- 大疆發(fā)布旗艦級運載無人機DJI FC100:80kg載重、9分鐘快充,開啟無人機運載新時代
人工智能企業(yè)
更多>>人工智能硬件
更多>>- 從心出發(fā),新品與新技術雙重進化,技嘉2025線下產(chǎn)品發(fā)布會強勢來襲
- 當“銀發(fā)”遇見“智眼”——神眸亮相2025深圳智慧養(yǎng)老展
- 訊飛同傳助力亞布力夏季年會,打破語言壁壘促全球?qū)υ?/a>
- 低空賦能,跨越山河,大疆運載無人機的甘孜答卷
- 預制菜又吵起來了?優(yōu)特智廚炒菜機新品發(fā)布會掀起中餐“現(xiàn)炒”熱潮
- 場景化落地部署人形機器人將超2000臺,眾擎機器人與多倫科技達成戰(zhàn)略合作
- 275W極限性能+第二代乾坤散熱!拯救者R9000P 2025至尊版成就電競創(chuàng)作雙巔峰
- 百年聲學品牌再創(chuàng)新!拜雅新品AMIRON 200 & AMIRON ZERO定義開放聆聽新方式
人工智能產(chǎn)業(yè)
更多>>- 打造張江人工智能創(chuàng)新小鎮(zhèn),全國首個人工智能創(chuàng)新應用先導區(qū)再添發(fā)展新引擎
- 人機共生 · 智啟未來——2025高交會亞洲人工智能與機器人產(chǎn)業(yè)鏈展主題發(fā)布
- 北京數(shù)基建發(fā)布“知行IntAct”混合智能體產(chǎn)品,以AI定義城市治理新范式
- 新時達“精耕小腦”,與大腦協(xié)同,加速具身智能垂直落地
- 亞洲愿景論壇 東軟蓋龍佳談AI與數(shù)據(jù)價值化重構醫(yī)療未來
- 破解AI落地難題!北大這場特訓營,為企業(yè)找到轉(zhuǎn)型“最優(yōu)解”
- 腦神經(jīng)成像提速數(shù)倍、AI練就“遺忘術”!2025螞蟻InTech獎頒發(fā)
- 一句話生成圖表!天禧智能體接入ChatExcel MCP Server讓數(shù)據(jù)處理變得如此簡單
人工智能技術
更多>>- 外灘大會首發(fā)! 螞蟻密算推出AI密態(tài)升級卡 實現(xiàn)零改動“即插即用”
- 騰訊優(yōu)圖攜Youtu-Agent開源項目亮相上海創(chuàng)智學院首屆TechFest大會
- 2025外灘大會:王堅暢談AI變革,普天科技錨定空天算力新賽道
- 騰訊正式開源Youtu-GraphRAG,圖檢索增強技術迎來落地新突破
- 聲網(wǎng)兄弟公司 Agora與OpenAI 攜手 助力多模態(tài) AI 智能體實現(xiàn)實時交互
- Qwen-Image-Edit 模型上線基石智算,圖像編輯更精準
- 火山引擎多模態(tài)數(shù)據(jù)湖落地深勢科技,提升科研數(shù)據(jù)處理效能
- 斑馬AI大模型:為每個孩子提供專屬學習方案