“媒體大腦”的智媒演變：萬(wàn)物為媒 人機(jī)共生

文/傅丕毅 商艷青 張寧寧

習(xí)近平總書記在中央政治局第十二次集體學(xué)習(xí)時(shí)提出媒體需要探索將人工智能運(yùn)用在新聞采集、生產(chǎn)、分發(fā)、接收、反饋中，全面提高輿論引導(dǎo)能力?！懊襟w大腦”的發(fā)布上線，正是對(duì)習(xí)總書記這一指示精神的貫徹落實(shí)。

“媒體大腦”的誕生和進(jìn)化

過去幾年，人工智能在內(nèi)容分發(fā)、算法推薦等領(lǐng)域有了大量應(yīng)用，但生產(chǎn)環(huán)節(jié)仍相對(duì)傳統(tǒng)，缺少核心技術(shù)支撐和變革。2017年12月26日，中國(guó)第一個(gè)媒體人工智能平臺(tái)“媒體大腦”對(duì)外發(fā)布，旨在用智能技術(shù)賦能媒體，探索和實(shí)踐個(gè)性化生產(chǎn)、可視化呈現(xiàn)、互動(dòng)化傳播。“媒體大腦”由新華智云科技有限公司自主研發(fā)完成，新華智云是由新華社和阿里巴巴合資成立的一家媒體人工智能科技公司。

隨著社交平臺(tái)崛起和網(wǎng)速升級(jí)，內(nèi)容消費(fèi)尤其是視頻消費(fèi)已成為現(xiàn)代人大眾化、高頻次的剛需。然而內(nèi)容“紅?！备?jìng)爭(zhēng)日益激烈，傳統(tǒng)媒體機(jī)構(gòu)面臨用戶流失和影響力下降的挑戰(zhàn)。對(duì)媒體機(jī)構(gòu)來(lái)說(shuō)如何推進(jìn)媒體融合，快速、高產(chǎn)、高效地提供優(yōu)質(zhì)內(nèi)容吸引用戶，做大做強(qiáng)影響力，對(duì)技術(shù)的需求日益凸顯。

為應(yīng)對(duì)媒體需求，2018年12月27日，“媒體大腦”發(fā)布新版本“MAGIC短視頻智能生產(chǎn)平臺(tái)”（magic.shuwen.com），MAGIC的名字由MGC（機(jī)器生產(chǎn)內(nèi)容）和AI（人工智能）組成，平臺(tái)集納了自然語(yǔ)言處理、計(jì)算機(jī)視覺、音頻語(yǔ)義理解等多項(xiàng)人工智能技術(shù)，將人工智能引入新聞全鏈路，著力采集、生產(chǎn)、分發(fā)端創(chuàng)新，幫助用戶高效完成短視頻內(nèi)容創(chuàng)作。目前MAGIC平臺(tái)已在2018世界杯、亞運(yùn)會(huì)、世界人工智能大會(huì)、進(jìn)博會(huì)等重大活動(dòng)的內(nèi)容生產(chǎn)中取得了一定成績(jī)，正在為眾多媒體機(jī)構(gòu)的日常內(nèi)容生產(chǎn)提供技術(shù)支持和服務(wù)。

新聞即數(shù)據(jù)，數(shù)據(jù)即新聞：一切業(yè)務(wù)數(shù)據(jù)化，一切數(shù)據(jù)業(yè)務(wù)化

海量新聞資源是智媒時(shí)代最有價(jià)值的數(shù)據(jù)。數(shù)據(jù)即信息內(nèi)容，信息內(nèi)容不斷地被拆解、細(xì)分，接近無(wú)窮小的單位，機(jī)器智能挖掘分析，讓信息產(chǎn)生價(jià)值。信息需要標(biāo)記，只有可標(biāo)記，才能被檢索，只有可檢索，信息才能被重新組織和組合，這一新的有機(jī)調(diào)用形式會(huì)呈現(xiàn)指數(shù)級(jí)增長(zhǎng)。

新聞內(nèi)容以文本、圖片、視頻為主，具有非結(jié)構(gòu)化的特點(diǎn)，難以被機(jī)器所理解，無(wú)法滿足內(nèi)容生產(chǎn)者高效使用數(shù)據(jù)的需求。此外，不同媒介形態(tài)對(duì)信息的壓縮程度不同，在信息量上文本＜圖片＜視頻，而在結(jié)構(gòu)化的難度上視頻＞圖片＞文本，舉例而言，用戶在計(jì)算機(jī)上可以對(duì)一篇文章通過對(duì)關(guān)鍵詞快速檢索，而視頻必須看完才能知道內(nèi)容。

MAGIC平臺(tái)結(jié)合對(duì)媒體場(chǎng)景的深度理解，利用大數(shù)據(jù)處理、人臉識(shí)別、語(yǔ)音識(shí)別等智能技術(shù)，對(duì)非結(jié)構(gòu)化的文本、圖片、視頻等媒資數(shù)據(jù)進(jìn)行處理，建立高度智能化、標(biāo)簽化的媒資平臺(tái)。以MAGIC2018世界杯時(shí)生產(chǎn)的《圓滿！本屆世界杯1-23號(hào)球員都進(jìn)球了》視頻為例，視頻將世界杯1號(hào)到23號(hào)球員的進(jìn)球片段進(jìn)行聚合，制作這樣一個(gè)視頻，傳統(tǒng)模式下編輯至少要花費(fèi)數(shù)小時(shí)尋找素材剪輯，而在MAGIC平臺(tái)只需鼠標(biāo)幾步搜索整合包裝即可完成。

用新聞算法計(jì)算新聞數(shù)據(jù)：“AI洞見”理解新聞場(chǎng)景

數(shù)據(jù)是算法發(fā)揮價(jià)值的基礎(chǔ)原料，有了數(shù)據(jù)后需要更多“智力”對(duì)原材料進(jìn)行加工。為此媒體大腦推出“AI洞見”系列方案，用新聞算法計(jì)算新聞數(shù)據(jù)。

“AI洞見”的實(shí)踐源自2018世界杯，初衷是利用人工智能技術(shù)智能地理解內(nèi)容，實(shí)時(shí)捕捉球場(chǎng)上的精彩瞬間，為受眾提供有人工智能增強(qiáng)現(xiàn)實(shí)的實(shí)時(shí)回放體驗(yàn)。在世界杯期間，“AI洞見”近實(shí)時(shí)全自動(dòng)識(shí)別并提取射門鏡頭，通過可視化效果剖析球場(chǎng)態(tài)勢(shì)，大幅提高球場(chǎng)高光視頻的制作效率和質(zhì)量。

在球場(chǎng)上最具新聞價(jià)值和時(shí)效性的的高光時(shí)刻是射門瞬間，而在其他內(nèi)容領(lǐng)域具有新聞性的內(nèi)容又各有不同，比如突發(fā)新聞中是爆炸或者火災(zāi)搶救現(xiàn)場(chǎng)，會(huì)議新聞中是發(fā)言人的金句時(shí)刻。隨著MAGIC平臺(tái)應(yīng)用場(chǎng)景的增加，在橫向上“AI洞見”以體育領(lǐng)域?yàn)榛A(chǔ)，將相關(guān)技術(shù)遷移、擴(kuò)展至突發(fā)新聞、會(huì)議新聞、時(shí)尚娛樂等多個(gè)場(chǎng)景；在縱向上，“AI洞見”優(yōu)化特定場(chǎng)景下模型的學(xué)習(xí)能力。通過對(duì)視覺、聲音、文字等多維度分析，幫助內(nèi)容生產(chǎn)者更好地獲取、處理新聞資源，更快發(fā)現(xiàn)新聞角度和線索。

內(nèi)容生產(chǎn)流水線：“好技術(shù)+好內(nèi)容”模式

MAGIC平臺(tái)通過智能化技術(shù)將生產(chǎn)流水線引入內(nèi)容生產(chǎn)行業(yè)，力爭(zhēng)成為智能時(shí)代內(nèi)容行業(yè)的基礎(chǔ)設(shè)施，推動(dòng)媒體機(jī)構(gòu)內(nèi)容生產(chǎn)供給側(cè)改革。目前平臺(tái)通過人機(jī)結(jié)合和機(jī)器自動(dòng)化進(jìn)行短視頻生產(chǎn)，覆蓋體育、金融、時(shí)事、社會(huì)、數(shù)據(jù)可視化、娛樂、時(shí)尚等眾多領(lǐng)域。以下是MAGIC平臺(tái)部分應(yīng)用案例。

體育高光視頻。2018年6月13日，MAGIC平臺(tái)上線內(nèi)測(cè)，世界杯期間共生產(chǎn)世界杯短視頻37581條，實(shí)現(xiàn)全網(wǎng)1.2億次播放。賽事期間，MAGIC平臺(tái)通過接入電視直播流信號(hào)，對(duì)比賽視頻實(shí)時(shí)標(biāo)注，自動(dòng)追蹤運(yùn)動(dòng)員和足球每秒25次。通過計(jì)算機(jī)視覺、自然語(yǔ)言分析等多模態(tài)結(jié)合，在比賽中自動(dòng)識(shí)別包括進(jìn)球、犯規(guī)等關(guān)鍵動(dòng)作，封裝成可供移動(dòng)端分發(fā)的視頻。

MAGIC平臺(tái)生產(chǎn)的最快進(jìn)球視頻《俄羅斯2∶0領(lǐng)先埃及》耗時(shí)6秒完成，6秒內(nèi)機(jī)器完成了對(duì)進(jìn)球自動(dòng)識(shí)別、片段剪切和封面封尾剪輯，并對(duì)優(yōu)酷等多個(gè)平臺(tái)進(jìn)行推送，成為全網(wǎng)最快進(jìn)球視頻。

此外，“AI洞見”實(shí)時(shí)識(shí)別高光時(shí)刻中人眼難以實(shí)時(shí)處理標(biāo)注的信息點(diǎn)，在射門瞬間判斷、場(chǎng)上攻防判斷、球和球員的檢測(cè)跟蹤、畫面配準(zhǔn)、2D坐標(biāo)構(gòu)建、跑動(dòng)軌跡生成等方面有了較成熟的應(yīng)用，能夠?yàn)橛脩籼峁┙鼘?shí)時(shí)、多維度的高光回放體驗(yàn)。

MAGIC平臺(tái)在體育領(lǐng)域目前覆蓋足球、籃球等團(tuán)隊(duì)協(xié)作性強(qiáng)的大球項(xiàng)目，并在進(jìn)一步擴(kuò)大應(yīng)用范圍。

會(huì)議視頻報(bào)道。大型會(huì)議活動(dòng)一般設(shè)置多個(gè)分論壇，記者分身乏術(shù)難以全部覆蓋。MAGIC平臺(tái)結(jié)合會(huì)議報(bào)道場(chǎng)景，通過接入大會(huì)實(shí)時(shí)直播流信號(hào)，對(duì)大會(huì)鏡頭畫面、現(xiàn)場(chǎng)聲音、發(fā)言人話術(shù)規(guī)律等進(jìn)行分析和視頻封裝，提供智能化的會(huì)議報(bào)道解決方案。MAGIC編輯器的語(yǔ)音轉(zhuǎn)字幕功能，允許一鍵添加字幕，編輯只需做簡(jiǎn)單的審核，節(jié)約了同期聲轉(zhuǎn)寫的時(shí)間。

2018世界人工智能大會(huì)期間，MAGIC平臺(tái)通過人機(jī)協(xié)作，4名編輯覆蓋大會(huì)38場(chǎng)論壇，累計(jì)處理超過100小時(shí)的視頻素材，開幕會(huì)首日生產(chǎn)40條視頻新聞，兩條稿件相隔不到1分鐘，生產(chǎn)內(nèi)容覆蓋演講高光時(shí)刻和行業(yè)解讀數(shù)據(jù)分析。

MAGIC平臺(tái)作為世界人工智能大會(huì)的AI新聞官24小時(shí)在線，秒級(jí)處理大量生成會(huì)議視頻。

第六屆中國(guó)新興媒體產(chǎn)業(yè)融合發(fā)展大會(huì)上，MAGIC平臺(tái)現(xiàn)場(chǎng)實(shí)時(shí)演示短視頻智能生產(chǎn)過程，3個(gè)小時(shí)生產(chǎn)186條大會(huì)會(huì)議短視頻，其中97條機(jī)器生產(chǎn)，89條為人機(jī)協(xié)作生產(chǎn)。

突發(fā)新聞和暖新聞。MAGIC平臺(tái)通過深度學(xué)習(xí)，對(duì)媒資進(jìn)行分類和標(biāo)簽化處理，判斷新聞?lì)悇e，對(duì)突發(fā)事件等具有高時(shí)效性的媒資高亮，提醒用戶優(yōu)先處理；同時(shí)對(duì)長(zhǎng)視頻片段中的突發(fā)畫面進(jìn)行定位，方便用戶進(jìn)行快速審閱編輯；對(duì)正能量新聞、暖新聞進(jìn)行機(jī)器識(shí)別分析和判斷。

以新華社現(xiàn)場(chǎng)云全國(guó)服務(wù)平臺(tái)為例，現(xiàn)場(chǎng)云平臺(tái)聯(lián)合3100多家媒體，平臺(tái)內(nèi)逾70%的現(xiàn)場(chǎng)新聞報(bào)道有視頻直播流，短視頻占比超過30%，圖片占比超過60%，其中既有高時(shí)效性的突發(fā)新聞，也有正能量、打動(dòng)人心的暖新聞，MAGIC平臺(tái)對(duì)媒資進(jìn)行高亮和推薦，提升現(xiàn)場(chǎng)云編輯處理新聞的效率。

數(shù)據(jù)可視化新聞。數(shù)據(jù)可視化是數(shù)據(jù)新聞的重要形式之一，尤其是帶有動(dòng)態(tài)效果的可視化視頻，相比靜態(tài)圖表提供了更豐富的數(shù)據(jù)維度和更強(qiáng)的表現(xiàn)力。然而數(shù)據(jù)可視化視頻門檻比較高，往往需要設(shè)計(jì)或者代碼知識(shí)。MAGIC平臺(tái)為內(nèi)容生產(chǎn)者提供了專業(yè)的數(shù)據(jù)可視化模板，涵蓋餅圖、柱狀圖、折線圖等多種圖表形態(tài)，搭配流暢的動(dòng)畫效果，零基礎(chǔ)編輯只需幾步就能制作出一個(gè)數(shù)據(jù)可視化視頻。

在2019地方兩會(huì)期間，山東章丘新聞中心的編輯利用MAGIC平臺(tái)簡(jiǎn)單快速生成了關(guān)于本地的數(shù)據(jù)新聞，取得了良好的傳播效果。

金融短視頻。金融業(yè)務(wù)本身具有大量結(jié)構(gòu)化數(shù)據(jù)，MAGIC平臺(tái)通過對(duì)金融數(shù)據(jù)進(jìn)行提煉，將相關(guān)金融業(yè)務(wù)能力以短視頻為載體呈現(xiàn)和傳播。目前MAGIC平臺(tái)實(shí)時(shí)監(jiān)測(cè)3500多支股票漲幅變化情況，覆蓋盤前、盤中、盤后數(shù)據(jù)分析。如果某支股票5分鐘內(nèi)行情波動(dòng)超過5%將自動(dòng)觸發(fā)生產(chǎn)一條該股行情的可視化短視頻。基于MAGIC平臺(tái)底層的極速渲染引擎和可視化模板，實(shí)現(xiàn)金融短視頻的海量生產(chǎn)，秒級(jí)生成，受眾喜歡，讓金融數(shù)據(jù)價(jià)值發(fā)揮到最大。

對(duì)話機(jī)器人。為滿足用戶獲取內(nèi)容的個(gè)性化需求，強(qiáng)化交互性，MAGIC平臺(tái)推出對(duì)話機(jī)器人服務(wù)，用戶可以像與人聊天一樣，與機(jī)器進(jìn)行問答，從而獲取最感興趣的內(nèi)容信息。

2018世界杯期間MAGIC推出“MAGIC進(jìn)球機(jī)器人”入駐新華社公眾號(hào)，為用戶提供世界杯進(jìn)球視頻，用戶點(diǎn)擊菜單欄的“進(jìn)球機(jī)器人”，提問如“我想看梅西的最新進(jìn)球”，機(jī)器人將自動(dòng)回復(fù)相關(guān)視頻。亞運(yùn)會(huì)期間，對(duì)話機(jī)器人升級(jí)為微信小程序“金牌MAGIC”，結(jié)合新華社前方體育記者照片和實(shí)時(shí)金牌榜，提供最全金牌推送信息。

“媒體大腦”MAGIC平臺(tái)是人工智能技術(shù)首次在媒體領(lǐng)域集成化、產(chǎn)品化、商業(yè)化的應(yīng)用，為個(gè)性化生產(chǎn)、可視化呈現(xiàn)、互動(dòng)化傳播開辟了新渠道。同時(shí)，MAGIC平臺(tái)還在不斷升級(jí)迭代，在算法、數(shù)據(jù)、工程、產(chǎn)品、設(shè)計(jì)、內(nèi)容、運(yùn)營(yíng)等多個(gè)部門協(xié)同下，填補(bǔ)多項(xiàng)技術(shù)空白。在智媒時(shí)代，無(wú)論是媒體機(jī)構(gòu)還是互聯(lián)網(wǎng)公司都缺少成熟的經(jīng)驗(yàn)去借鑒，正因如此我們才有空間去開拓創(chuàng)新。

隨著內(nèi)容行業(yè)競(jìng)爭(zhēng)進(jìn)入下半場(chǎng)，將更多智能化技術(shù)引入內(nèi)容生產(chǎn)已是大勢(shì)所趨。許多人問人工智能是否會(huì)取代人類記者，我們認(rèn)為答案是否定的。MAGIC平臺(tái)的本質(zhì)是人的智慧和機(jī)器的智能相結(jié)合，形成一種相互協(xié)作的關(guān)系，而不是相互替代的關(guān)系。

我們通過人工智能技術(shù)將更多創(chuàng)新的手段和工具引入內(nèi)容生產(chǎn)，進(jìn)行流程再塑造，幫助媒體融合轉(zhuǎn)型為智媒，幫助媒體打造核心競(jìng)爭(zhēng)力，持續(xù)產(chǎn)出優(yōu)質(zhì)內(nèi)容，提升影響力和收獲經(jīng)濟(jì)效益。

我們相信，只有加強(qiáng)AI技術(shù)與內(nèi)容行業(yè)的創(chuàng)新融合，才能迎來(lái)行業(yè)更持久的共振。