9月27-29日，2024中國算力大會在鄭州舉行。會上，浪潮信息重磅發(fā)布元腦企智EPAI一體機，通過軟硬件高度協(xié)同的一體化設計，為客戶提供多元多模、簡單易用、本地部署、安全可靠的大模型開發(fā)平臺，顯著提高企業(yè)大模型以及AI原生應用的開發(fā)效率，加速大模型產(chǎn)業(yè)化落地。

大模型落地挑戰(zhàn)巨大

隨著大模型和生成式技術的飛躍式發(fā)展，基于大模型的應用創(chuàng)新正在成為新的主題，如何以大模型賦能現(xiàn)有的技術、業(yè)務，已成為企業(yè)在新一輪技術周期中保持競爭力的要素之一。但企業(yè)在應用大模型的過程中往往面臨著諸多挑戰(zhàn)，如生態(tài)離散導致的多元多模適配難，模型訓練和部署復雜、數(shù)據(jù)治理難、模型"幻覺"問題以及對專業(yè)技術人才的依賴等，導致大模型與行業(yè)場景的融合進展緩慢。

首先，多元多模適配難度大、周期長、成本高。不同場景、不同業(yè)務對模型能力的多樣需求，業(yè)務生產(chǎn)環(huán)境往往是多模并存的狀態(tài)，而由于芯片生態(tài)離散、特定應用加速等原因，所使用的算力資源也是多元并用的。因此，大模型應用開發(fā)需考慮與多元算力、多樣大模型的選擇、適配、組合調(diào)度等問題，難度大，周期長，成本高。

其次，巨大參數(shù)量級的通用大模型，很難直接用于復雜、離散的行業(yè)場景，各行業(yè)知識專業(yè)化程度高，可遷移性低，通用大模型本身難以覆蓋，所以經(jīng)常出現(xiàn)大模型"幻覺"或是"胡言亂語"的問題，因此必須結合行業(yè)和企業(yè)專業(yè)數(shù)據(jù)進行再學習。

最后，要實現(xiàn)大模型與行業(yè)場景的深度結合，實現(xiàn)高效、高可靠、高質(zhì)量的模型應用效果，涉及數(shù)據(jù)、微調(diào)、RAG、部署、上線和運維等極為復雜的流程，特別是數(shù)據(jù)治理和模型微調(diào)，需要具有豐富經(jīng)驗的實施團隊才能勝任，技術門檻高。

元腦企智EPAI一體機，讓大模型開發(fā)快到飛起

對于大多數(shù)企業(yè)而言，大模型應用開發(fā)的系統(tǒng)性、復雜性，往往讓企業(yè)對大模型開發(fā)望而卻步。因此，實現(xiàn)大模型的深入行業(yè)應用與廣泛落地，關鍵在于如何有效提高AI應用創(chuàng)新的質(zhì)量和效率，卓越的大模型及應用開發(fā)工具成為釋放智能生產(chǎn)力的關鍵。

浪潮信息元腦企智EPAI一體機基于專為大模型應用場景設計的元腦服務器，搭載了元腦企智EPAI企業(yè)大模型開發(fā)平臺，支持多元算力、多模管理、全鏈工具以及本地部署，可一站式解決數(shù)據(jù)處理、模型微調(diào)、RAG搭建、模型部署、應用上線和系統(tǒng)運維等環(huán)節(jié)開發(fā)難題，為客戶提供多元多模、簡單易用、本地部署、安全可靠的大模型應用開發(fā)平臺，滿足企業(yè)人工智能應用從開發(fā)到實施的全棧需求。

多元多模：元腦企智EPAI一體機具備多元算力和多模管理能力，通過大模型計算框架TensorGlue實現(xiàn)異構算力調(diào)度，通過算子基礎化技術實現(xiàn)上層模型算法和下層基礎設施的邏輯解耦，從而高效的屏蔽模型和芯片差異，降低企業(yè)跨算力平臺遷移、多元模型部署適配的試錯成本。目前，元腦企智EPAI一體機可以支持10+業(yè)界主流大模型計算框架，內(nèi)置7個主流基礎大模型，預設了20+微調(diào)參數(shù)，用戶可以針對知識問答、智能編碼、文檔理解、智能助手等不同應用場景和任務需求，選擇最佳產(chǎn)品型號和模型算法，快速開發(fā)模型應用。

簡單易用：元腦企智EPAI一體機提供從數(shù)據(jù)準備、大模型微調(diào)、知識庫構建、大模型部署上線運維的全流程支持工具鏈。其中，針對數(shù)據(jù)準備，預先內(nèi)置了上億條基礎知識數(shù)據(jù)以及自動化數(shù)據(jù)處理工具，支持10種以上企業(yè)常見的數(shù)據(jù)格式，并且以超過95%的抽取準確率，把這些數(shù)據(jù)轉(zhuǎn)化為知識庫以及可供模型進行微調(diào)的數(shù)據(jù)；針對大模型微調(diào)，采用低代碼可視化界面來進行微調(diào)，并且內(nèi)置了Lora、SFT等多種微調(diào)框架以及20多種優(yōu)化參數(shù)，用戶可依據(jù)具體業(yè)務需求和數(shù)據(jù)特性，選擇最為合適的框架與技術，快速且低成本地構建起企業(yè)專屬大模型能力。

本地部署、安全可靠：由于大模型應用開發(fā)需要結合企業(yè)私有數(shù)據(jù)，要求企業(yè)數(shù)據(jù)不出域。本地部署可以確保用戶數(shù)據(jù)不被上傳至云端，避免數(shù)據(jù)泄露和濫用的風險，這在處理敏感信息或符合嚴格數(shù)據(jù)保護法規(guī)的行業(yè)中尤為重要。元腦企智EPAI一體機的本地化部署模式提供全鏈路的企業(yè)數(shù)據(jù)防護能力，設置多級過濾和審核體系，讓數(shù)據(jù)的流轉(zhuǎn)更安全，讓生成結果更可靠，構建起一個既能充分利用數(shù)據(jù)價值，又能保護用戶隱私、符合法規(guī)要求的安全數(shù)據(jù)處理環(huán)境，做到"數(shù)據(jù)可用不可見"。

元腦企智EPAI一體機能顯著提升大模型應用的開發(fā)效率，并極大節(jié)省人力成本。浪潮信息先行先試，采用1臺元腦企智EPAI一體機標準版，低代碼完成企業(yè)知識庫構建、模型微調(diào)、應用開發(fā)等工作，1人1月即簡單高效、低門檻地打造出智能售前助手"元小智"，賦能日常售前業(yè)務，實現(xiàn)智慧化變革，團隊工作效率提升3-5倍。

浪潮信息產(chǎn)品方案開發(fā)部總經(jīng)理魏健表示，本次發(fā)布了基礎版、標準版、高級版、創(chuàng)新版和集群版五個版本，主要面向制造、金融等行業(yè)客戶、傳統(tǒng)ISV和SI三類用戶提供一站式大模型生產(chǎn)及應用全流程開發(fā)工具鏈，同時支持接入更多元腦伙伴的算法和模型能力，共同打造AI原生應用開發(fā)的"超級工作臺"，加速AI應用創(chuàng)新和落地。