麻省理工學(xué)院幫助自動(dòng)駕駛汽車看清周圍角落
2019-11-05 14:59:43AI云資訊982
圖片來源:麻省理工學(xué)院
研究人員在論文中描述了自動(dòng)駕駛汽車在停車場成功行駛的實(shí)驗(yàn)。當(dāng)探測到有車輛駛近并停車時(shí),此種基于車輛的系統(tǒng)比傳統(tǒng)只能探測到可見物體的激光雷達(dá)要快半秒。目前,該系統(tǒng)僅在室內(nèi)環(huán)境下進(jìn)行了測試。機(jī)器人在室內(nèi)的速度要慢得多,照明條件也更一致,因此系統(tǒng)更容易感知和分析陰影。
擴(kuò)展ShadowCam
研究人員構(gòu)建了名為ShadowCam(陰影攝像頭)的系統(tǒng),使用計(jì)算機(jī)視覺技術(shù),檢測和分類地面陰影的變化。此前,麻省理工學(xué)院教授William Freeman和Antonio Torralba合作開發(fā)了該系統(tǒng)的較早版本。
ShadowCam使用攝像頭的視頻幀序列,瞄準(zhǔn)特定的區(qū)域,例如角落前方的地面。該系統(tǒng)可以根據(jù)多幅圖像,檢測光線強(qiáng)度隨時(shí)間的變化,這些變化可能表明有物體正遠(yuǎn)離或靠近。其中一些變化肉眼可能很難檢測到,但是可以由對象和環(huán)境的各種屬性來確定。ShadowCam計(jì)算這些信息,并將圖像進(jìn)行分類,分別為包含靜止物體的圖片,或包含動(dòng)態(tài)的、移動(dòng)的物體的圖片。如果是動(dòng)態(tài)圖像,該系統(tǒng)就會(huì)做出相應(yīng)的反應(yīng)。
將ShadowCam應(yīng)用到自動(dòng)駕駛汽車上需要一些進(jìn)展。例如,早期的版本利用增強(qiáng)現(xiàn)實(shí)標(biāo)簽AprilTags,類似于簡化的二維碼,將區(qū)域進(jìn)行排列。機(jī)器人掃描AprilTags,檢測并計(jì)算它們相對于標(biāo)簽的精確3D位置和方向。ShadowCam使用標(biāo)簽作為環(huán)境特征,瞄準(zhǔn)可能包含陰影的特定像素塊。但是利用AprilTags修改現(xiàn)實(shí)環(huán)境是不現(xiàn)實(shí)的。
研究人員開發(fā)了新方法,結(jié)合了圖像配準(zhǔn)和新的視覺測程技術(shù)。圖像配準(zhǔn)通常用于計(jì)算機(jī)視覺,本質(zhì)上是對多個(gè)圖像進(jìn)行標(biāo)注,以顯示圖像中的變化。
視覺測程技術(shù)通過分析圖像序列中的姿態(tài)和幾何圖形,實(shí)時(shí)估計(jì)攝像頭的運(yùn)動(dòng)。研究人員特別采用直接稀疏測程法(DSO),可以在類似AprilTags捕獲的環(huán)境中計(jì)算特征點(diǎn)。本質(zhì)上,DSO在3D點(diǎn)云上繪制環(huán)境特征,然后計(jì)算機(jī)視覺管道只選擇位于興趣區(qū)域的特征,例如角落附近的地板。(事先手動(dòng)標(biāo)注興趣區(qū)域。)
由于ShadowCam獲取興趣區(qū)域的輸入圖像序列,因此使用的是DSO圖像配準(zhǔn)方法,標(biāo)注機(jī)器人相同視點(diǎn)的所有圖像。即使機(jī)器人移動(dòng)時(shí),也能夠瞄準(zhǔn)陰影處的像素點(diǎn),幫助檢測圖像之間的細(xì)微偏差。
接下來是信號放大??赡馨幱暗南袼仡伾由?,會(huì)降低信噪比。這使得陰影變化的極其微弱的信號更容易被探測到。增強(qiáng)信號部分取決于它與附近其他陰影的偏離程度,如果達(dá)到某個(gè)閾值,ShadowCam會(huì)將該圖像歸類為動(dòng)態(tài)圖像。根據(jù)信號的強(qiáng)度,系統(tǒng)可能會(huì)告訴機(jī)器人減速或停止。研究人員表示,“如果檢測到該信號,你就必須小心了。它可能是從角落后面跑出來的人的影子,或者是一輛停著的車的影子,所以自動(dòng)駕駛汽車會(huì)減速或者完全停下來?!?
無標(biāo)簽測試
在一項(xiàng)測試中,研究人員使用AprilTags和基于DSO的新方法評估了該系統(tǒng)對移動(dòng)或靜止的物體進(jìn)行分類的性能。這兩種方法的分類準(zhǔn)確率都達(dá)到了70%,表明不再需要AprilTags。
在另一項(xiàng)測試中,研究人員在停車場中的一輛自動(dòng)駕駛汽車上安裝ShadowCam,關(guān)閉大燈,模擬夜間駕駛條件,并與激光雷達(dá)比較車輛檢測時(shí)間。在一個(gè)示例場景中,ShadowCam檢測到柱子后面駛來的車輛的速度比激光雷達(dá)大約快0.72秒。此外,由于研究人員特別根據(jù)車庫照明條件,對ShadowCam進(jìn)行調(diào)整,使其分類準(zhǔn)確率達(dá)到86%左右。
下一步,研究人員將進(jìn)一步開發(fā)該系統(tǒng),以確保其可在不同的室內(nèi)和室外照明條件下工作。未來,可能會(huì)有方法加速系統(tǒng)的陰影檢測速度,實(shí)現(xiàn)目標(biāo)區(qū)域標(biāo)注過程的自動(dòng)化。
相關(guān)文章
- 九識智能:自動(dòng)駕駛商業(yè)化,如何重塑千億城配物流生態(tài)?
- 重磅!元景屏幕操控智能體助力聯(lián)通云智手機(jī)“自動(dòng)駕駛”大規(guī)模商用
- 文遠(yuǎn)知行Robotaxi GXR進(jìn)軍新加坡,搶灘東南亞自動(dòng)駕駛市場
- 百度:中國自動(dòng)駕駛的黃埔軍校
- 數(shù)千萬美金注資+戰(zhàn)略合作:文遠(yuǎn)知行與Grab攜手開發(fā)自動(dòng)駕駛東南亞市場
- 九識智能:“十四五“ 算力戰(zhàn)略賦能下的自動(dòng)駕駛商業(yè)化突圍
- WeRide與Waymo雙雙受邀加入新加坡自動(dòng)駕駛車指導(dǎo)委員會(huì),參與國際規(guī)則制定
- 九識智能與上海交大簽署協(xié)議,將聚焦復(fù)合型人才培養(yǎng)、促進(jìn)自動(dòng)駕駛技術(shù)發(fā)展
- 六國通行,全球唯一!文遠(yuǎn)知行Robotaxi獲沙特自動(dòng)駕駛牌照
- 網(wǎng)約車Lyft的自動(dòng)駕駛班車即將上路
- 東南亞首個(gè)!文遠(yuǎn)知行在新加坡開啟自動(dòng)駕駛小巴純無人運(yùn)營
- 三維天地AI智能體應(yīng)用:數(shù)據(jù)資源盤點(diǎn)實(shí)現(xiàn)“自動(dòng)駕駛”
- Waymo自動(dòng)駕駛出租車在奧斯汀服務(wù)覆蓋范圍翻倍,將特斯拉甩出幾條街
- 持續(xù)加大研發(fā)投入、推進(jìn)技術(shù)創(chuàng)新 滴滴自動(dòng)駕駛發(fā)力
- 小馬智行簽約迪拜,文遠(yuǎn)知行深耕的中東成為自動(dòng)駕駛熱土
- 中東自動(dòng)駕駛進(jìn)程加速 文遠(yuǎn)知行攜手Uber及迪拜交通局啟動(dòng)Robotaxi商業(yè)化
人工智能企業(yè)
更多>>人工智能硬件
更多>>- 中科天璣支持CCF BigData 2025“數(shù)據(jù)智能計(jì)算”論壇圓滿召開——攜產(chǎn)界實(shí)踐洞見共探智能時(shí)代數(shù)據(jù)支撐新路徑
- 百年傳奇煥新:讓“RCA之聲”傳遍中國
- 在胡同與北海間流轉(zhuǎn)的光影 佳能EOS R50 V秋日氛圍感體驗(yàn)
- 一直戴,一直拍!魅族AI拍攝眼鏡StarV Snap發(fā)布
- “盎銳科技杯”2025建筑機(jī)器人技能大賽在滬啟動(dòng),助推智能建造實(shí)戰(zhàn)人才培養(yǎng)
- 國產(chǎn)芯開行業(yè)新局,至像Z35國產(chǎn)芯系列新品打印機(jī)賦能中國打印
- 神眸榮獲快手“品牌標(biāo)桿獎(jiǎng)”,以芯片級創(chuàng)新躋身行業(yè)前列
- AMD 推出 EPYC? 嵌入式 4005 處理器,助力低時(shí)延邊緣應(yīng)用
人工智能產(chǎn)業(yè)
更多>>- 騰訊啟動(dòng)AI應(yīng)用繁榮計(jì)劃,新一期AI共創(chuàng)營報(bào)名企業(yè)超300家
- 首都機(jī)場“AI繪空港”大賽完美收官,卓特視覺以技術(shù)賦能創(chuàng)意未來
- 打造張江人工智能創(chuàng)新小鎮(zhèn),全國首個(gè)人工智能創(chuàng)新應(yīng)用先導(dǎo)區(qū)再添發(fā)展新引擎
- 人機(jī)共生 · 智啟未來——2025高交會(huì)亞洲人工智能與機(jī)器人產(chǎn)業(yè)鏈展主題發(fā)布
- 北京數(shù)基建發(fā)布“知行IntAct”混合智能體產(chǎn)品,以AI定義城市治理新范式
- 新時(shí)達(dá)“精耕小腦”,與大腦協(xié)同,加速具身智能垂直落地
- 亞洲愿景論壇 東軟蓋龍佳談AI與數(shù)據(jù)價(jià)值化重構(gòu)醫(yī)療未來
- 破解AI落地難題!北大這場特訓(xùn)營,為企業(yè)找到轉(zhuǎn)型“最優(yōu)解”
人工智能技術(shù)
更多>>- 外灘大會(huì)首發(fā)! 螞蟻密算推出AI密態(tài)升級卡 實(shí)現(xiàn)零改動(dòng)“即插即用”
- 騰訊優(yōu)圖攜Youtu-Agent開源項(xiàng)目亮相上海創(chuàng)智學(xué)院首屆TechFest大會(huì)
- 2025外灘大會(huì):王堅(jiān)暢談AI變革,普天科技錨定空天算力新賽道
- 騰訊正式開源Youtu-GraphRAG,圖檢索增強(qiáng)技術(shù)迎來落地新突破
- 聲網(wǎng)兄弟公司 Agora與OpenAI 攜手 助力多模態(tài) AI 智能體實(shí)現(xiàn)實(shí)時(shí)交互
- Qwen-Image-Edit 模型上線基石智算,圖像編輯更精準(zhǔn)
- 火山引擎多模態(tài)數(shù)據(jù)湖落地深勢科技,提升科研數(shù)據(jù)處理效能
- 斑馬AI大模型:為每個(gè)孩子提供專屬學(xué)習(xí)方案