昆侖萬維發(fā)布Matrix-Zero世界模型,開啟空間智能新時代
2025-02-14 14:41:09AI云資訊16595
2月14日,昆侖萬維正式推出 Matrix-Zero世界模型,成為中國第一家同時推出3D場景生成和可交互視頻生成模型的探索空間智能的企業(yè)。
Matrix-Zero世界模型包含兩款子模型:
(1)昆侖萬維自研3D場景生成大模型,支持將用戶輸入的圖片轉(zhuǎn)化為可自由探索的真實合理的3D場景,比World Labs生成場景的探索范圍更大更自由,而且包括動態(tài)物理效果;
(2)昆侖萬維自研可交互視頻生成大模型,提供以用戶輸入為核心驅(qū)動的可交互空間智能視頻生成方案,支持根據(jù)用戶實時輸入生成互動視頻效果,具備更精準控制的action model。
昆侖萬維Matrix-Zero的3D場景生成功能,支持將用戶輸入的圖片轉(zhuǎn)化為可自由探索的真實合理的3D場景,具備全局一致性、可自由探索、支持不同風格圖片輸入、支持風格遷移、支持動態(tài)場景生成等亮點。
能夠?qū)崿F(xiàn)這樣的逼真效果,得益于昆侖萬維自研3D場景生成大模型,包含兩個核心模塊:場景布局生成模塊和紋理生成模塊。幾何生成模塊借助可微渲染和擴散模型技術,能創(chuàng)造出和輸入圖片一致的3D場景布局;紋理生成模塊在圖片生成模型和視頻生成模型基礎上訓練,當用戶在場景中運動時,昆侖自研3D場景生成大模型不斷對場景缺失區(qū)域進行幾何和紋理的補全,從而確保用戶在任何位置、任何角度都能看到合理、一致的場景。
此前,谷歌Genie(可交互生成環(huán)境)系列已經(jīng)向大眾展示了世界模型的能力和魅力。為達到更好的流暢性、一致性等,昆侖萬維可交互視頻大模型建立在先進的生成式視頻模型之上,結(jié)合自主研發(fā)的用戶交互模塊,最終實現(xiàn)了一種以用戶輸入為核心驅(qū)動的空間智能視頻生成方案。
該方法能夠在保證開放領域視頻生成能力的同時,進一步增強對視頻內(nèi)容中視角移動的精確控制,使其更加符合用戶的交互需求和預期。通過這種方式,我們不僅可以生成符合用戶意圖的視頻內(nèi)容,還能夠優(yōu)化空間智能模型的適配性,從而拓展在虛擬環(huán)境、交互式應用以及沉浸式體驗中的應用場景。
作為針對圖片對應的 3D 世界中自由探索提出的視頻生成系統(tǒng),Matrix-Zero 能夠在不同環(huán)境下高效地生成高質(zhì)量的視頻內(nèi)容,并確保視頻的流暢性、一致性和合理性。
緊握AI時代脈搏,成為中國探索空間智能的領跑者。昆侖萬維作為中國AI領軍企業(yè),始終踐行公司使命——實現(xiàn)通用人工智能,讓每個人更好地塑造和表達自我,堅持在人工智能領域自主研發(fā),持續(xù)推出AI產(chǎn)品。
過去三年,昆侖萬維在視覺多模態(tài)、深度學習、強化學習等關鍵技術方向取得了一系列成績,同時構(gòu)建起了完整的AI矩陣:最懂金融、學術的天工AI搜索,全球首個AI音樂創(chuàng)作平臺Mureka,AI 短劇平臺SkyReels,AI社交產(chǎn)品Linky,AI游戲等,形成了“AI前沿基礎研究——基座模型——AI矩陣產(chǎn)品/應用”的產(chǎn)業(yè)鏈。
2025年1月,「天工大模型4.0」o1版和4o版正式上線天工APP和網(wǎng)頁。2025年2月8日,昆侖萬維旗下「天工AI」正式推出PC版重大更新——上線“DeepSeek R1 + 聯(lián)網(wǎng)搜索”功能。
勇立潮頭,敢為人先。今天,昆侖萬維Matrix-Zero系列模型的開發(fā)和迭代也代表了公司對未來AI技術的提前布局,進一步賦能公司AI業(yè)務矩陣。交互生成模型的落地將變革可交互內(nèi)容引擎,大大提升公司AI多矩陣產(chǎn)品的生產(chǎn)力。
Matrix-Zero世界模型預計4月份上線,將對公司AI游戲生產(chǎn)、AI短劇生產(chǎn)和編輯等業(yè)務進一步賦能,為用戶和開發(fā)者帶來新的平臺和工具。當視頻模型發(fā)展到可以逼真模擬物理世界時,游戲可能不再需要傳統(tǒng)的3D引擎,許多實驗和模擬將可以在虛擬環(huán)境中進行,而影視創(chuàng)作也將變得更加普及,甚至成為每個人的基本技能。雖然這些看似是未來的場景,但技術正一步步將它們變?yōu)楝F(xiàn)實,視頻生成模型的火熱正是這一趨勢的重要體現(xiàn)。
未來大模型發(fā)展將更加關注智能體工具和用戶交互??臻g智能技術不僅為未來智能體研發(fā)提供了虛擬平臺,也帶給用戶全新的與生成世界交互的體驗,大大提升了交互的多樣性??臻g智能技術的發(fā)展也將是通往具身智能乃至AGI路上的一個重要技術里程碑。我們?nèi)詫⒊掷m(xù)升級迭代,研發(fā)更先進的AI平臺、打磨體驗更好的AI產(chǎn)品,進一步推動人工智能的繁榮發(fā)展。
相關文章
- 昆侖萬維「Matrix-Game 2.0」發(fā)布,國產(chǎn)開源的Genie 3來啦!
- 昆侖萬維技術周啟幕:SkyReels模型重塑內(nèi)容創(chuàng)作基建
- 昆侖萬維天工超級智能體APP上線后爆火!全球首款Office智能體APP,開啟AI辦公新時代
- 昆侖萬維天工超級智能體APP今日正式上線!全球首款Office智能體APP,開啟AI辦公新時代
- 昆侖萬維正式開源Matrix-Game:從圖像出發(fā)構(gòu)建可控交互世界,重塑交互式世界生成標桿
- 昆侖萬維開源R1V視覺思維鏈推理模型,開啟多模態(tài)思考新時代
- 昆侖萬維開源中國首個面向AI短劇創(chuàng)作的視頻生成模型SkyReels-V1,重塑AI短劇行業(yè)格局
- 昆侖萬維發(fā)布Matrix-Zero世界模型,開啟空間智能新時代
- 昆侖萬維旗下天工AI正式上線DeepSeek R1+聯(lián)網(wǎng)搜索
- 昆侖萬維「天工大模型4.0」o1版(Skywork o1)正式啟動邀請測試
- 昆侖萬維推出「天工大模型4.0」4o版(Skywork 4o),實時語音對話助手Skyo上線在即
- 昆侖萬維重磅發(fā)布天工AI高級搜索功能,做最懂金融投資、科研學術的AI搜索
- AI視頻ChatGPT時刻到來,昆侖萬維發(fā)布全球首款AI短劇平臺
- 全球首發(fā)!昆侖萬維重磅推出AI流媒體音樂平臺Melodio
- 擁抱國產(chǎn)大模型,云捷亮數(shù)AI產(chǎn)品全面遷移至昆侖萬維天工開放平臺
- 昆侖萬維開源2千億稀疏大模型天工MoE,全球首創(chuàng)能用4090推理
人工智能企業(yè)
更多>>人工智能硬件
更多>>- 當“銀發(fā)”遇見“智眼”——神眸亮相2025深圳智慧養(yǎng)老展
- 訊飛同傳助力亞布力夏季年會,打破語言壁壘促全球?qū)υ?/a>
- 低空賦能,跨越山河,大疆運載無人機的甘孜答卷
- 預制菜又吵起來了?優(yōu)特智廚炒菜機新品發(fā)布會掀起中餐“現(xiàn)炒”熱潮
- 場景化落地部署人形機器人將超2000臺,眾擎機器人與多倫科技達成戰(zhàn)略合作
- 275W極限性能+第二代乾坤散熱!拯救者R9000P 2025至尊版成就電競創(chuàng)作雙巔峰
- 百年聲學品牌再創(chuàng)新!拜雅新品AMIRON 200 & AMIRON ZERO定義開放聆聽新方式
- 筑牢安全芯基石,紫光同芯無線充電鑒權(quán)芯片T9系列亮相2025(秋季)亞洲充電展
人工智能產(chǎn)業(yè)
更多>>- 人機共生 · 智啟未來——2025高交會亞洲人工智能與機器人產(chǎn)業(yè)鏈展主題發(fā)布
- 北京數(shù)基建發(fā)布“知行IntAct”混合智能體產(chǎn)品,以AI定義城市治理新范式
- 新時達“精耕小腦”,與大腦協(xié)同,加速具身智能垂直落地
- 亞洲愿景論壇 東軟蓋龍佳談AI與數(shù)據(jù)價值化重構(gòu)醫(yī)療未來
- 破解AI落地難題!北大這場特訓營,為企業(yè)找到轉(zhuǎn)型“最優(yōu)解”
- 腦神經(jīng)成像提速數(shù)倍、AI練就“遺忘術”!2025螞蟻InTech獎頒發(fā)
- 一句話生成圖表!天禧智能體接入ChatExcel MCP Server讓數(shù)據(jù)處理變得如此簡單
- 外灘大會重磅發(fā)布:螞蟻百寶箱Tbox超級智能體亮相,實現(xiàn)分鐘級專業(yè)軟件交付
人工智能技術
更多>>- 外灘大會首發(fā)! 螞蟻密算推出AI密態(tài)升級卡 實現(xiàn)零改動“即插即用”
- 騰訊優(yōu)圖攜Youtu-Agent開源項目亮相上海創(chuàng)智學院首屆TechFest大會
- 2025外灘大會:王堅暢談AI變革,普天科技錨定空天算力新賽道
- 騰訊正式開源Youtu-GraphRAG,圖檢索增強技術迎來落地新突破
- 聲網(wǎng)兄弟公司 Agora與OpenAI 攜手 助力多模態(tài) AI 智能體實現(xiàn)實時交互
- Qwen-Image-Edit 模型上線基石智算,圖像編輯更精準
- 火山引擎多模態(tài)數(shù)據(jù)湖落地深勢科技,提升科研數(shù)據(jù)處理效能
- 斑馬AI大模型:為每個孩子提供專屬學習方案