當(dāng)中國移動(dòng)互聯(lián)網(wǎng)月度活躍用戶(終端)穩(wěn)定在十億之上,媒體行業(yè)在移動(dòng)互聯(lián)網(wǎng)的布局也逐步成型。同時(shí)在5G、人工智能、大數(shù)據(jù)、云計(jì)算、物聯(lián)網(wǎng)等新技術(shù)的推動(dòng)下,信息生產(chǎn)方式和傳播方式也在持續(xù)發(fā)生深刻變化。
順應(yīng)這一趨勢,人民日報(bào)社一方面堅(jiān)持移動(dòng)優(yōu)先策略,形成了以兩微兩端為主的移動(dòng)傳播新格局,另一方面也在密切關(guān)注媒體技術(shù)的革新,推動(dòng)媒體融合向縱深發(fā)展。在億級(jí)的用戶體量下,基于云計(jì)算實(shí)現(xiàn)多端互聯(lián),在人工智能等技術(shù)的加持下推進(jìn)質(zhì)變式融合,成為人民日報(bào)社新媒體中心的迫切需求。
在這一背景下,京東云與AI成為人民日報(bào)新媒體選擇的技術(shù)服務(wù)合作伙伴。隨著京東“云+AI”持續(xù)賦能,人民日報(bào)新媒體不斷完善自身的基因進(jìn)化,向智慧媒體轉(zhuǎn)型,而京東云與AI也迎來了快速增長的突破點(diǎn),在To B市場攻堅(jiān)戰(zhàn)中邁向了新的階段。
換臉H5:“云+AI”提供“有溫度”的用戶體驗(yàn)
媒體的智能化升級(jí)不斷豐富著信息的呈現(xiàn)形態(tài)和交互場景。AI技術(shù)與媒體的結(jié)合,使得用戶也可以參與到內(nèi)容的生產(chǎn)和傳播中。人民日報(bào)新媒體推出的 “換臉”微電影H5就是一個(gè)典型應(yīng)用。
2019年國慶期間,一部名為《70年,我是主角》的微電影和“換臉”H5應(yīng)用引發(fā)網(wǎng)絡(luò)熱議。這是中國第一部“全民定制微電影”,由人民日報(bào)社新媒體中心主導(dǎo),京東云與AI提供技術(shù)支持。每位網(wǎng)友在觀看電影后,還可以借助AI“換臉”技術(shù)變身為微電影里的主角,穿梭光影,跨越時(shí)空,成為新中國70年巨變的見證者。
在上線的一周時(shí)間里,這款H5應(yīng)用承受住了千萬級(jí)的頁面瀏覽量和百萬級(jí)的獨(dú)立訪問量,活動(dòng)期間總計(jì)生成10000小時(shí)視頻,相當(dāng)于6000部電影的長度。值得關(guān)注的是,在幾百萬個(gè)個(gè)性化“換臉”視頻背后,是京東云與AI超過500臺(tái)GPU服務(wù)器和1000臺(tái)CPU服務(wù)器的強(qiáng)大支持。
與APP有所區(qū)別的是,H5不能反復(fù)打開或隱藏到后臺(tái),對(duì)流暢度的要求高。而且在慶祝新中國成立70周年的項(xiàng)目中,用戶體驗(yàn)里也不適宜出現(xiàn)“服務(wù)不可用”或“服務(wù)忙”的不佳交互情況。這對(duì)網(wǎng)絡(luò)平臺(tái)的高可用、高并發(fā)能力提出了很高的要求。京東云與AI副總裁、客戶成功部負(fù)責(zé)人劉辰在接受采訪時(shí)提到:“這個(gè)項(xiàng)目的難度主要有兩點(diǎn):一是算法的復(fù)雜度,二是性能和吞吐量。”在項(xiàng)目前期的溝通中,人民日報(bào)新媒體方面明確指出:“這是國內(nèi)首次在H5中嘗試視頻‘換臉’,流量最高時(shí),后臺(tái)要在十幾秒的時(shí)間內(nèi),同時(shí)處理幾萬個(gè)‘換臉’任務(wù)。”由于應(yīng)用于國慶這樣的嚴(yán)肅場景,他們一度擔(dān)心,業(yè)界很難有一家云服務(wù)商的性能和吞吐量可以承載如此規(guī)模的H5應(yīng)用。
京東云與AI產(chǎn)品研發(fā)部高級(jí)總監(jiān)陳峰表示:“為支持這個(gè)項(xiàng)目,技術(shù)人員定制化調(diào)配了大量的服務(wù)器、GPU集群等技術(shù)支持資源。同時(shí),研發(fā)團(tuán)隊(duì)通過CDN進(jìn)行視頻的分發(fā),盡可能避開可能影響數(shù)據(jù)傳輸速度與穩(wěn)定的環(huán)節(jié),確保用戶在任何位置都能快速看到結(jié)果,提升用戶體驗(yàn)。”
此外,由于微電影中包含了大量的奔跑鏡頭和頻繁的姿態(tài)變化,給臉部實(shí)時(shí)定位和渲染帶來了極大的挑戰(zhàn)。針對(duì)這一難題,京東云與AI創(chuàng)造性地完成了“三計(jì)定乾坤”:首先提出“基于RefineDet階段選擇性改進(jìn)版人臉檢測網(wǎng)絡(luò)”的算法技術(shù),其次運(yùn)用了一種結(jié)合人臉解析的3D模型完成了人臉3D關(guān)鍵點(diǎn)檢測,最后采用了在紋理圖上進(jìn)行融合處理的手法,降低了光影變化對(duì)“換臉”效果的影響,從而使“換臉”體驗(yàn)更加連貫、自然。
這些資源和技術(shù)保障最終獲得了可觀的成果:用戶進(jìn)入H5后先觀看原版微電影,上傳照片后很快便能看到自己“出演”的微電影。從上傳照片到“換臉”完成,整個(gè)流程通常不超過1分鐘。
“云服務(wù)的關(guān)鍵,在于彈性調(diào)度。在這個(gè)項(xiàng)目中,京東云與AI調(diào)度了大量的計(jì)算資源,確保了用戶的高品質(zhì)體驗(yàn)。能夠在短期內(nèi)調(diào)集這么多的資源,又扛住了這么大的壓力,充分說明了京東云與AI整個(gè)資源的規(guī)模和調(diào)度能力,值得信賴。”人民日報(bào)新媒體項(xiàng)目技術(shù)負(fù)責(zé)人給予合作項(xiàng)目高度評(píng)價(jià)。
深化合作,探索融媒體“智能化”解決方案
除了為年度重大節(jié)點(diǎn)融媒體產(chǎn)品生成項(xiàng)目提供技術(shù)支撐,京東云與AI也在不斷加大對(duì)技術(shù)的布局和投入,深化與人民日報(bào)的合作,為其提供強(qiáng)大的基礎(chǔ)設(shè)施支持,同時(shí)利用前沿AI技術(shù)助力人民日報(bào)新媒體提升用戶體驗(yàn)。