前不久iPhone Xs發(fā)布會(huì)上，A12憑借超強(qiáng)機(jī)器學(xué)習(xí)能力再次吸睛。雖然芯片上的超強(qiáng)迭代極大提升手機(jī)性能，但對(duì)于iPhone用戶而言，搭載A12能獲得更優(yōu)質(zhì)的圖像是更為深刻的體驗(yàn)。比如 “Smart HDR”能讓照片高光和陰影的細(xì)節(jié)更豐富出色; iPhone Xs的景深攝像頭，能針對(duì)焦外作出優(yōu)化，拍完照片后再調(diào)整景深，形成精美的人像照片等等。

事實(shí)上，以iPhone等代表的智能終端出現(xiàn)，一直在推動(dòng)視頻和圖片等圖像技術(shù)由高清向超高清演進(jìn)。為滿足人們對(duì)高品質(zhì)信息的需求，內(nèi)容平臺(tái)企業(yè)一直積極探索新技術(shù)，但仍面臨諸多問(wèn)題。首先，目前網(wǎng)絡(luò)上傳輸?shù)膱D片尺寸與用戶屏幕尺寸不匹配，當(dāng)?shù)唾|(zhì)量圖片在高分辨率屏幕下展示時(shí)，會(huì)引起視覺(jué)效果的損失。其次，網(wǎng)絡(luò)上的圖片經(jīng)過(guò)層層壓縮，內(nèi)容平臺(tái)企業(yè)難以從網(wǎng)絡(luò)上獲取到高清高質(zhì)量的圖片。第三，隨著業(yè)務(wù)的發(fā)展，而提升圖像質(zhì)量提升勢(shì)必會(huì)引起帶寬成本的提升，高額的帶寬成本的提升不可忽略。

為此，金山云推出讓圖片變清晰的“神器”—— KIE(Kingsoft Image &AI Enhancement)，它基于AI技術(shù)對(duì)畫(huà)質(zhì)進(jìn)行重建增強(qiáng)，為用戶帶來(lái)超清的圖像視覺(jué)體驗(yàn)。除了支持移動(dòng)端，還新增服務(wù)端方案，以支持更多應(yīng)用場(chǎng)景，讓畫(huà)質(zhì)更清晰。

服務(wù)端圖片處理 一種更高清的實(shí)現(xiàn)方式

金山云KIE服務(wù)端解決方案，是在服務(wù)端，利用超分辨率和畫(huà)質(zhì)修復(fù)等技術(shù)，修復(fù)圖像的噪點(diǎn)、馬賽克等損失，并重構(gòu)圖像的局部與細(xì)節(jié)，大大提升用戶的觀看體驗(yàn)。與移動(dòng)端處理方式不同的是，服務(wù)端方案以計(jì)算能力更高的服務(wù)器為載體，并通過(guò)分層多模型處理，來(lái)實(shí)現(xiàn)圖片畫(huà)質(zhì)的優(yōu)化和增強(qiáng)。

采用KIE解決方案圖片對(duì)比

從左至右分別是原圖、KIE移動(dòng)端方案、KIE服務(wù)端方案

不僅如此，服務(wù)端解決方案具備更強(qiáng)的畫(huà)質(zhì)增強(qiáng)能力。在網(wǎng)絡(luò)結(jié)構(gòu)方面， 服務(wù)端的KIE模型采用了DenseNet和倒殘差網(wǎng)絡(luò)結(jié)構(gòu)，通過(guò)特征圖的升維(信息冗余)和降維，可以讓網(wǎng)絡(luò)自動(dòng)尋找起主要作用的特征信息。為了進(jìn)一步提升服務(wù)端模型的效果，該網(wǎng)絡(luò)中巧妙的堆疊了更多的基礎(chǔ)構(gòu)建塊，網(wǎng)絡(luò)深度達(dá)到50層之多，在訓(xùn)練時(shí)通過(guò)采用學(xué)習(xí)率自適應(yīng)衰減技術(shù)，可進(jìn)一步縮短訓(xùn)練時(shí)間，提高擬合精度。在訓(xùn)練數(shù)據(jù)方面，在原數(shù)據(jù)集的基礎(chǔ)上，又對(duì)部分場(chǎng)景進(jìn)行了數(shù)據(jù)補(bǔ)充，進(jìn)而達(dá)到更好的效果。

可以說(shuō)，金山云KIE服務(wù)端解決方案具備更深層的網(wǎng)絡(luò)結(jié)構(gòu)，因而在去噪、平滑等方面均能達(dá)到更好的效果，可以給用戶帶來(lái)更清晰、干凈的視覺(jué)體驗(yàn)。經(jīng)主觀評(píng)測(cè)，目前服務(wù)端方案處理的有效率可達(dá)95%以上。在人物類、文字類、靜物類等具體場(chǎng)景，服務(wù)端方案均有較好的優(yōu)化效果。

更多場(chǎng)景覆蓋 讓企業(yè)“一勞永逸”

一般來(lái)說(shuō)，在移動(dòng)端的畫(huà)質(zhì)增強(qiáng)是將分發(fā)至手機(jī)上的圖片做實(shí)時(shí)渲染?？捎捎谑謾C(jī)的計(jì)算能力有限，且不同終端的計(jì)算能力差別較大，移動(dòng)端方案的應(yīng)用場(chǎng)景和處理效果受到諸多限制。

為此，相比于要考慮不同終端的性能配置，在服務(wù)端進(jìn)行圖片處理則更顯”便捷”，它可直接將處理好的高質(zhì)量圖片分發(fā)至用戶，而不用考慮不同終端的差異化，可以做到一次優(yōu)化，N處適配，真正做到一勞永逸。目前，KIE服務(wù)端解決方案可以覆蓋到各類圖片場(chǎng)景，可對(duì)新聞資訊類插圖、瀏覽器feed流圖片、社交平臺(tái)圖片、長(zhǎng)/短視頻封面、直播封面、老照片、Gif動(dòng)圖等進(jìn)行優(yōu)化。

采用KIE解決方案圖片細(xì)節(jié)對(duì)比

從左至右分別是原圖、KIE移動(dòng)端方案、KIE服務(wù)端方案

值得一提的是，金山云KIE服務(wù)端解決方案支持私有化部署和云服務(wù)兩種方式，前者擁有簡(jiǎn)單易操作的部署方案，并能以接口的方式供客戶在本地服務(wù)器上調(diào)用，無(wú)需做資源遷移。而云服務(wù)方案則可以直接在云上對(duì)客戶圖片進(jìn)行畫(huà)質(zhì)增強(qiáng)處理，操作簡(jiǎn)單，且不需客戶維護(hù)本地服務(wù)器，極大提高效率!