8 月 18 日至 19 日，AICon 2024 全球人工智能開發(fā)與應用大會（上海站）順利舉辦。本屆大會以“智能未來，探索AI無限可能”為主題，聚焦于大模型的開發(fā)與應用領域，深入探討大模型帶來的變革及其深遠影響。網(wǎng)易伏羲受邀參與會議并分享大模型實戰(zhàn)案例，一同探索人工智能和大模型如何引領行業(yè)變革與創(chuàng)新。

AICon 全球人工智能開發(fā)與應用大會是由極客邦科技旗下 InfoQ 中國主辦的人工智能和大模型技術盛會，主要面向工程師、產(chǎn)品經(jīng)理、數(shù)據(jù)分析師等中高端技術人員，會議聚焦大模型訓練與推理、AI agent、RAG、多模態(tài)大模型等熱門方向。會議設置了主題演講、閉門會議、圓桌交流和互動展區(qū)等多種社交活動，旨在為參會者提供交流學習的機會，為企業(yè)和機構提供展示實力和成果的平臺。網(wǎng)易伏羲語言智能組負責人生生受邀分享《可實時語音交流的游戲隊友AI Agent創(chuàng)新應用》，現(xiàn)場揭示這一創(chuàng)新應用如何切實落地并帶來變革。

創(chuàng)新引領，讓人工智能點亮游戲的未來

圍繞演講主題，生生向現(xiàn)場觀眾介紹道，作為中國第一個游戲人工智能研究機構，網(wǎng)易伏羲早在2017年成立之初，就對人工智能研發(fā)方向進行了極為全面的布局，包括強化學習、自然語言、用戶畫像、視覺計算、虛擬人五大方向，希望通過人工智能技術的研究與應用釋放創(chuàng)作者的生產(chǎn)力，革新游戲體驗，最終“讓人工智能點亮游戲的未來”。目前，網(wǎng)易伏羲已在全球各類學術頂級會議中發(fā)表200余篇學術論文，相關技術研發(fā)成果已擁有專利600余項。

在不斷深化AI技術研發(fā)的同時，網(wǎng)易伏羲也持續(xù)致力于將技術成果轉化為實際應用，推動AI技術在游戲及其他領域的廣泛應用。生生為現(xiàn)場觀眾詳細講解了網(wǎng)易伏羲打造的多模態(tài)大模型“易生諸相”，并指出相關技術能夠廣泛應用于數(shù)字文娛、音樂、文旅等領域，如游戲中的智能NPC、智能捏臉、AI音樂創(chuàng)作、角色扮演等場景，從而助力游戲設計、開發(fā)和運營。

基于行業(yè)領先的技術研究成果和“AI+游戲”的創(chuàng)新思維模式，網(wǎng)易伏羲幾乎每年都會推出行業(yè)首創(chuàng)的游戲AI應用，部分甚至達到全球首創(chuàng)水平。例如，2018年，網(wǎng)易伏羲率先在行業(yè)內采用基于深度學習的端到端訓練技術實現(xiàn)了AI照片捏臉功能；2019年，又運用基于Transformer的NLP技術，推出了首個智能養(yǎng)育系統(tǒng)；此后的幾年里，網(wǎng)易伏羲繼續(xù)引領潮流，接連研發(fā)出AI故事接龍玩法、文字捏臉玩法、AI游戲劇情動畫、AI游戲匹配、AI反外掛等眾多創(chuàng)新應用；自2023年《逆水寒》手游上線之后，又陸續(xù)推出了文字捏臉、智能NPC、劇組模式等突破性AI應用。

全球首創(chuàng)，語音AI隊友助力游戲體驗升級

除了技術創(chuàng)新的最新動態(tài)外，此次分享還深入展示了網(wǎng)易伏羲近期在游戲AI方面的最新應用成果：基于網(wǎng)易伏羲“易生諸相”多模態(tài) AI 技術和有靈AOP平臺所打造的多模態(tài)實時交互的語音AI隊友Agent。該玩法在《永劫無間》手游中上線后獲得了玩家的高度認可和喜愛，每日大量玩家攜手AI隊友進行戰(zhàn)斗，共同享受絲滑的多模態(tài)游戲交互體驗。

作為全球首款游戲Copilot隊友，該功能基于最新的AI大模型推理能力，成果打造出與真人玩家?guī)缀鯚o異的AI隊友。AI隊友不僅能自主完成跑圖、跑圈、搜尋物資、參與戰(zhàn)斗等戰(zhàn)術行動，還能在戰(zhàn)斗中提供輔助和救援，通過自然流暢的語音與玩家進行雙向互動溝通。

為了實現(xiàn)“能感知”、“會表達”、“懂執(zhí)行”的AI隊友這一創(chuàng)新應用，網(wǎng)易伏羲基于有靈AOP平臺，集成了先進的語音識別、語義理解、人設對話大模型、語音生成、強化學習以及模仿學習等多項智能體能力，賦予AI隊友以“感知”戰(zhàn)場情況、“認知”玩家意圖、“決策”戰(zhàn)斗策略、并采取“行動”的能力，并通過數(shù)據(jù)閉環(huán)訓練自動更新模型，不斷優(yōu)化其行為決策，實現(xiàn)了與玩家的深度協(xié)作；此外，網(wǎng)易伏羲采用強化學習、自模仿學習等技術，接入“易生諸相”人設對話大模型打造多風格AI隊友，使其具備不同的性格和行為模式，最終實現(xiàn)了這樣一個聽指揮、能戰(zhàn)斗、懂配合，也會判斷戰(zhàn)場局勢、做出決策，并且性格各異、還能聊天、保證情緒價值拉滿的AI隊友。

生生強調，AI 技術不僅能夠提升游戲玩家的交互體驗，打造更加流暢和沉浸式的游戲體驗，在教育、音樂、工業(yè)等實體領域同樣發(fā)揮著重要作用。秉承著“人機協(xié)作，萬物有靈”的愿景，網(wǎng)易伏羲正將原本專注于游戲世界的AI技術應用于更多實體產(chǎn)業(yè)，通過創(chuàng)新性研發(fā)面向智能體編程框架(Agent-oriented programming,AOP)，構建了可以直接面向智能體發(fā)布和運營各種任務的網(wǎng)易伏羲有靈AOP平臺。目前，基于AOP平臺打造的智能體，已經(jīng)在實體和虛擬機器人方面有了廣泛的應用，除了游戲中的AI隊友外，還覆蓋工程機器人自動作業(yè)、理療機器人自動按摩、二次元社區(qū)虛擬陪伴、AI玩具智能對話等多種場景，展現(xiàn)了其在多個行業(yè)的通用性和實用性。

分享的最后，生生透露網(wǎng)易伏羲AOP SDK即將迎來首次內測，期待更多的開發(fā)者和合作伙伴加入其中，攜手拓展智能體的應用邊界，共同探索和塑造未來。網(wǎng)易伏羲也將繼續(xù)深化AI領域的研究與實踐，推動AI技術與實體產(chǎn)業(yè)的深度融合，為未來社會的數(shù)字化轉型貢獻更大的力量。