視聽藝術(shù)的AI魔術(shù)大師

巴黎奧運會開幕式中，一輛火車沖破了光影與現(xiàn)實的隔閡，這動人的一幕用于致敬史上最早的電影?《火車進(jìn)站》，1895年，盧米埃爾兄弟以這部50秒黑白無聲的影片，正式開啟了電影時代。

此后，人們再也無法停止對于光影、視聽藝術(shù)探索的腳步。北京天圖萬境科技有限公司（以下簡稱天圖萬境）的創(chuàng)始人高天羿、導(dǎo)演圖拉古就是這樣一群執(zhí)著于光影編織幻境的造夢師。

高天羿表示，中國的視聽行業(yè)中電影只是很小的一部分，而MV、綜藝、演唱會，新興的元宇宙、VR、AR、XR都是視聽領(lǐng)域，這些領(lǐng)域可玩性更高，并且大有作為，因此他提出了故事的空間敘事概念和理論，并致力于實現(xiàn)視聽產(chǎn)業(yè)從屏幕敘事到空間敘事的研發(fā)與創(chuàng)新，通過融合AI與空間計算技術(shù)，為線下沉浸式消費產(chǎn)業(yè)、Vision Pro等可穿戴設(shè)備和影游制作等領(lǐng)域提供智能解決方案。

為觀眾提供新沉浸式體驗

何為空間敘事？高天羿表示：“屏幕是二維的，但是空間敘事是三維的、立體的?？臻g敘事分為兩種形式，一種是帶穿戴設(shè)備的空間敘事，例如蘋果VR眼鏡體驗的內(nèi)容；一種是為線下已有的空間提供內(nèi)容和設(shè)計以及裝備，這也是空間敘事?！?/p>

為理解空間敘事，我們可以想象這樣一個場景：當(dāng)你進(jìn)入光線黯淡的空間內(nèi)部，突然頭頂?shù)腁I感知光陣照耀著飄出的大朵烏云，并配合故事情節(jié)自動呈現(xiàn)風(fēng)雨雷電等各種光效；感知氛圍燈會利用空間計算技術(shù)，實時感知空間中的玩家情緒，營造恰到好處的氛圍感；感知投影將空間變成影院，你不必翻開劇本苦讀晦澀的文字，故事將以影像的形式推進(jìn)；超聲波束光技術(shù)和空間計算技術(shù)，則可用單音箱實現(xiàn)720°連續(xù)的感知全景聲……

這便是2023年誕生的娛樂新業(yè)態(tài)?全感超空間和超感影游，由天圖萬境提出和研發(fā)。目前天圖萬境已經(jīng)有以《大陸傳奇：永恒號》為代表的超感影游系列，包括冒險題材《命運之?！贰队撵`堡壘》、浪漫愛情題材《主角學(xué)院》、探險解謎題材《太陽神的詛咒》、現(xiàn)實題材《新的城》等。

在新沉浸式體驗中，觀眾不再只是觀眾，而是作為玩家、角色、參與者，在千變?nèi)f化的超感影游故事中，選擇自己喜愛的人物，掌控自己的命運。“當(dāng)下年輕人花錢消費購買的是個性化價值觀體驗、社交體驗、新奇體驗、故事體驗、互動體驗，人們已從看故事、走進(jìn)故事，到成為故事?！眻D拉古談道。

讓創(chuàng)作者講述自己心中的故事

在超感影游中高頻出現(xiàn)的關(guān)鍵詞就是AI。高天羿認(rèn)為，AI發(fā)展的初心，不應(yīng)該是取代人類工作的“殺傷性武器”，“我們希望AI技術(shù)的發(fā)展，要用創(chuàng)新來縫合這個世界，讓每一個個體都從AI的發(fā)展中享受到快樂?！?/p>

創(chuàng)立的幾年間，天圖萬境一直在穩(wěn)步向前：2019年，天圖萬境推出了“超級電影工業(yè)”體系；2020年，推出“感知虛擬制作”技術(shù)；2021年，形成“感知虛擬技術(shù)”體系和硬件產(chǎn)品；2022年，感知虛擬制作技術(shù)以AI為核心架構(gòu)，引領(lǐng)了下一代感知虛擬制作的技術(shù)標(biāo)準(zhǔn)。

天圖萬境自主研發(fā)的AI感知虛擬制作技術(shù)，依靠人工智能可以實現(xiàn)在一幀33毫秒之內(nèi)，完成AI摳像、AI摳影、光場還原、色彩融合、空間深度計算等一系列過程。這意味著在每一幀拍攝畫面中，該技術(shù)都將真實世界與虛擬場景實現(xiàn)了實時、動態(tài)融合，無論是萬千的光影變化，還是色彩斑斕的影像畫面，皆可自由創(chuàng)作。而且所有生產(chǎn)內(nèi)容均以100%數(shù)字化資產(chǎn)形式存在，可以隨時接受修改、調(diào)整、變化，可以選擇任意形式輸出。

“AI感知虛擬制作技術(shù)，是為下一代空間視頻和空間計算奠定基石的視聽技術(shù)，它將改變未來的視聽產(chǎn)出方式，以更高效、易使用、時間短的制作周期優(yōu)勢，讓每一位創(chuàng)作者都有機(jī)會講述自己心中的故事，實現(xiàn)每個人的藝術(shù)夢想。”高天羿談道。

擁抱AI讓一切都變得如此簡單

天圖萬境的虛擬取景技術(shù)打破了卡梅隆《阿凡達(dá)》中數(shù)字化拍攝的壟斷，成為我國虛擬拍攝不可或缺的關(guān)鍵性技術(shù)；自主研發(fā)的光影重繪技術(shù)實現(xiàn)了全世界第一個真正影視級的虛擬光場還原技術(shù)；研發(fā)了世界上第一個實時陰影處理系統(tǒng)，解決了演唱會、電影、劇集、發(fā)布會只能后期手動模擬加影子的難題……

今天，天圖萬境仍未停止探索的步伐。

感受聲音的魅力，天圖萬境與華為合作推出了Sora Opera，能夠在短時間內(nèi)為一段影像材料生成高質(zhì)量、與畫面節(jié)奏完美契合的自然流暢聲音，為AI視頻制作提供了便利。SoraOpera還能深入解讀視頻的內(nèi)容和表達(dá)含義，根據(jù)視頻內(nèi)容自動調(diào)整聲音的情感和節(jié)奏，使生成的視頻更加生動、真實。

助力圖文創(chuàng)作，2021年5月，天圖萬境推出了AI圖片自動生成模式，從角色、場景、道具、風(fēng)格、配色、物料等各種設(shè)計，都可以自動生成。

2021年9月，天圖萬境發(fā)布了文本生成（劇本創(chuàng)作）產(chǎn)品。通過輸入關(guān)鍵詞，AI模型會根據(jù)要求完成劇本段落創(chuàng)作，不僅有準(zhǔn)確的人物關(guān)系分析，更有對故事時長、情緒節(jié)奏起伏的深刻理解。再進(jìn)一步，純文字劇本還可以生成視頻，將文字中的人物、色調(diào)、場景，以及光線、道具、氛圍感等用視頻呈現(xiàn)出來。AIGC整個創(chuàng)作流程是全自動的，不用人為干預(yù)，省錢、省事。這一方式將重塑影視產(chǎn)業(yè)的發(fā)展格局，催生新一代視聽解決方案，天圖萬境也將在這一領(lǐng)域積極探索。

“新技術(shù)一定會產(chǎn)生新業(yè)態(tài)，新業(yè)態(tài)帶來新機(jī)會。新業(yè)態(tài)具備的特征包括：高科技加持、強(qiáng)社交屬性、模式可復(fù)制、內(nèi)容更新穎、成本更低廉?！眻D拉古表示，天圖萬境致力于在技術(shù)端補(bǔ)齊AI應(yīng)用落地這一塊拼圖。

無論是“超級電影工業(yè)”“感知虛擬制作”，還是最新的文本生成（劇本創(chuàng)作）產(chǎn)品，天圖萬境都在助力影視工業(yè)化，實現(xiàn)創(chuàng)作的降本增效，讓創(chuàng)作者有更多精力投入到精神與創(chuàng)作層面，進(jìn)一步構(gòu)建健康、高科技、良性的產(chǎn)業(yè)生態(tài)。