人工智能機(jī)器人平臺被發(fā)現(xiàn)安全漏洞,后果可能會是災(zāi)難性的
2024-10-18 09:12:11AI云資訊151593
(AI云資訊消息)據(jù)賓夕法尼亞大學(xué)工程學(xué)院的研究人員稱,他們發(fā)現(xiàn)了多個由人工智能控制的機(jī)器人平臺的先前未被發(fā)現(xiàn)的安全漏洞。
電氣與系統(tǒng)工程UPS基金會運輸教授喬治·帕帕斯(George Pappas)表示,“我們的研究表明,目前將大型語言模型與現(xiàn)實世界結(jié)合起來并不足夠安全?!?
帕帕斯和他的團(tuán)隊開發(fā)了一種名為RoboPAIR的算法,這是第一個專門設(shè)計用于破解由LLM控制的機(jī)器人的算法。與現(xiàn)有針對聊天機(jī)器人的即時工程攻擊不同,
RoboPAIR是專門為從LLM控制的機(jī)器人引發(fā)有害的物理行為而設(shè)計的,比如波士頓動力公司和TRI正在開發(fā)的雙足機(jī)器人平臺。
據(jù)報道,RoboPAIR在破解三個流行的機(jī)器人研究平臺方面取得了100%的成功率:四足機(jī)器人平臺Unitree Go2、四輪機(jī)器人平臺Clearpath Robotics Jackal以及用于自動駕駛的Dolphins LLM模擬器。RoboPAIR算法僅用了幾天時間就完全獲得了對這些系統(tǒng)的訪問權(quán)限,并開始繞過安全限制。一旦研究人員利用了這些平臺,他們就可以誘導(dǎo)這些平臺采取危險的行動,例如不減速闖紅燈通過馬路十字路口。
研究人員表示,“我們的研究結(jié)果首次表明,被破解的LLM的風(fēng)險遠(yuǎn)不止于文本生成,鑒于破解的機(jī)器人在現(xiàn)實世界中完全有可能造成物理傷害?!?
目前賓夕法尼亞大學(xué)的研究人員正在與平臺開發(fā)人員合作,以加強(qiáng)系統(tǒng)防止被進(jìn)一步的入侵,但他們擔(dān)心說,這些安全問題具有系統(tǒng)性。
賓夕法尼亞大學(xué)的研究者維杰·庫馬爾(Vijay Kumar)表示:“我們的研究結(jié)果充分表明,采取安全第一的做法對于實現(xiàn)負(fù)責(zé)任的創(chuàng)新至關(guān)重要。在將具備人工智能的機(jī)器人投入現(xiàn)實世界使用之前,我們必須解決其固有的弱點?!?
該項研究的第一作者亞歷山大·羅比補(bǔ)充說:“實際上,對人工智能系統(tǒng)進(jìn)行潛在威脅和漏洞的測試(即AI紅隊)是保護(hù)生成型人工智能系統(tǒng)的必要安全實踐。因為一旦發(fā)現(xiàn)漏洞,就可以對這些系統(tǒng)進(jìn)行測試甚至訓(xùn)練以修補(bǔ)這些漏洞。”
相關(guān)文章
- 深度契合人工智能+與智能網(wǎng)聯(lián)汽車主題,懂車帝智博會系列活動收官
- AI能力官方認(rèn)可!合思入選超算互聯(lián)網(wǎng)《人工智能生態(tài)產(chǎn)業(yè)圖譜》
- 人工智能引領(lǐng)體育未來:第三屆全國體育人工智能大會將于10月底在京啟幕
- “人工智能+”駛?cè)肟燔嚨?,和鯨聯(lián)合聯(lián)想、沐曦首發(fā)科研智能一體機(jī)
- 艾氪智能段豐元出席2025深圳(國際)通用人工智能大會,產(chǎn)業(yè)級 Agentic AI 智能體集群亮相
- 容聯(lián)云入選沙利文《2025人工智能全景圖》,彰顯AI Agent領(lǐng)軍實力
- 深入實施“人工智能+”,伊頓助力皓揚數(shù)據(jù)打造 AI 算力中心標(biāo)桿
- 新達(dá)內(nèi)與百度智能云達(dá)成戰(zhàn)略合作 聯(lián)合培養(yǎng)人工智能大模型人才
- 響應(yīng)“人工智能+”行動,BodyPark以“真人+AI”破解健身行業(yè)痛點,引領(lǐng)數(shù)字化升級
- CCF中國存儲大會 | 浪潮存儲劉希猛:融合存儲加快“人工智能+”行動落地
- 回應(yīng)時代,定義未來 | 漫柏集團(tuán)與阿普人工智能共建“產(chǎn)教融合人才大社區(qū)”樣板
- 微軟人工智能推出首批自研模型MAI-Voice-1語音模型與MAI-1預(yù)覽版
- 物聯(lián)網(wǎng)與人工智能的中國力量,年度AGIC+IOTE盛會深圳重磅開幕!
- 迎“人工智能+”政策東風(fēng)!2025中國智能產(chǎn)業(yè)大會&吳文俊人工智能創(chuàng)新大會即將落地常州
- 超千家AI企業(yè)“智匯”鵬城 2025 AGIC深圳(國際)通用人工智能大會暨產(chǎn)業(yè)博覽會啟幕
- 深入實施“人工智能+”行動的號角已經(jīng)吹響,曠視以“升維”解碼AI未來圖景
人工智能企業(yè)
更多>>人工智能硬件
更多>>- 從心出發(fā),新品與新技術(shù)雙重進(jìn)化,技嘉2025線下產(chǎn)品發(fā)布會強(qiáng)勢來襲
- 當(dāng)“銀發(fā)”遇見“智眼”——神眸亮相2025深圳智慧養(yǎng)老展
- 訊飛同傳助力亞布力夏季年會,打破語言壁壘促全球?qū)υ?/a>
- 低空賦能,跨越山河,大疆運載無人機(jī)的甘孜答卷
- 預(yù)制菜又吵起來了?優(yōu)特智廚炒菜機(jī)新品發(fā)布會掀起中餐“現(xiàn)炒”熱潮
- 場景化落地部署人形機(jī)器人將超2000臺,眾擎機(jī)器人與多倫科技達(dá)成戰(zhàn)略合作
- 275W極限性能+第二代乾坤散熱!拯救者R9000P 2025至尊版成就電競創(chuàng)作雙巔峰
- 百年聲學(xué)品牌再創(chuàng)新!拜雅新品AMIRON 200 & AMIRON ZERO定義開放聆聽新方式
人工智能產(chǎn)業(yè)
更多>>- 打造張江人工智能創(chuàng)新小鎮(zhèn),全國首個人工智能創(chuàng)新應(yīng)用先導(dǎo)區(qū)再添發(fā)展新引擎
- 人機(jī)共生 · 智啟未來——2025高交會亞洲人工智能與機(jī)器人產(chǎn)業(yè)鏈展主題發(fā)布
- 北京數(shù)基建發(fā)布“知行IntAct”混合智能體產(chǎn)品,以AI定義城市治理新范式
- 新時達(dá)“精耕小腦”,與大腦協(xié)同,加速具身智能垂直落地
- 亞洲愿景論壇 東軟蓋龍佳談AI與數(shù)據(jù)價值化重構(gòu)醫(yī)療未來
- 破解AI落地難題!北大這場特訓(xùn)營,為企業(yè)找到轉(zhuǎn)型“最優(yōu)解”
- 腦神經(jīng)成像提速數(shù)倍、AI練就“遺忘術(shù)”!2025螞蟻InTech獎頒發(fā)
- 一句話生成圖表!天禧智能體接入ChatExcel MCP Server讓數(shù)據(jù)處理變得如此簡單
人工智能技術(shù)
更多>>- 外灘大會首發(fā)! 螞蟻密算推出AI密態(tài)升級卡 實現(xiàn)零改動“即插即用”
- 騰訊優(yōu)圖攜Youtu-Agent開源項目亮相上海創(chuàng)智學(xué)院首屆TechFest大會
- 2025外灘大會:王堅暢談AI變革,普天科技錨定空天算力新賽道
- 騰訊正式開源Youtu-GraphRAG,圖檢索增強(qiáng)技術(shù)迎來落地新突破
- 聲網(wǎng)兄弟公司 Agora與OpenAI 攜手 助力多模態(tài) AI 智能體實現(xiàn)實時交互
- Qwen-Image-Edit 模型上線基石智算,圖像編輯更精準(zhǔn)
- 火山引擎多模態(tài)數(shù)據(jù)湖落地深勢科技,提升科研數(shù)據(jù)處理效能
- 斑馬AI大模型:為每個孩子提供專屬學(xué)習(xí)方案