AIGC電影視覺生成機制與世界圖像建構(gòu)

目前已有不少電影通過虛擬制片的方式依托虛擬圖像和虛擬空間進行拍攝。AIGC（ArtificialIntelligenceGenerativeContent，人工智能生成內(nèi)容）改變了虛擬視覺圖像生成機制。雖然技術(shù)的發(fā)展極大地節(jié)約了制作成本和周期，但是AIGC也會因為算法生成的問題讓視覺文化產(chǎn)生新的困境。AIGC的視覺圖像建構(gòu)背后暗含了文化權(quán)力，在未來基于AIGC的電影語言中將會影響文化的認同和傳播，"，"Introduction":""，"Columns":"有據(jù)"，"Volume":""，"Content":"

目前已有不少電影通過虛擬制片的方式依托虛擬圖像和虛擬空間進行拍攝。AIGC（ArtificialIntelligenceGenerativeContent，人工智能生成內(nèi)容）改變了虛擬視覺圖像生成機制。雖然技術(shù)的發(fā)展極大地節(jié)約了制作成本和周期，但是AIGC也會因為算法生成的問題讓視覺文化產(chǎn)生新的困境。AIGC的視覺圖像建構(gòu)背后暗含了文化權(quán)力，在未來基于AIGC的電影語言中將會影響文化的認同和傳播，甚至會消解和重建文化記憶，這是急需重視和探討的。本文將會梳理AIGC的視覺圖像生成機制、其在當下和未來電影視聽語言中的運用和影響，以及在人工智能（AI）參與視覺文化生成后可能出現(xiàn)的困境，從而在學術(shù)領(lǐng)域反思AIGC對電影視覺語言的影響。

AIGC現(xiàn)有的圖像生成機制與電影運用

虛擬制片（VirtualProduction）是一種借助數(shù)字技術(shù)和虛擬現(xiàn)實技術(shù)，運用數(shù)字資產(chǎn)與真實場景混合拍攝，更高效、更沉浸，可具備實時交互的電影制作方法。作為一個相對廣義的概念，計算機輔助電影視覺生產(chǎn)實現(xiàn)了物理世界與數(shù)字世界的交匯。 ¹20 世紀?？怂辜瘓F的執(zhí)行副總裁約翰·基爾肯尼（JohnKilkenny）將電影《阿凡達》稱為“電影全虛擬化制作的誕生地（TheBirthplaceofPureVirtualProduction）”，2首次提出電影虛擬化制作概念。雖然在電影的拍攝中，虛擬混合實拍的方式早已出現(xiàn)，但與傳統(tǒng)的綠幕拍攝方式不同，虛擬制片可以通過實時交互進行預演（Previsualization）可視化，提供類似于在真實場景實拍的效果，不再受限于自然條件的影響。

虛擬制片公司Pixomondo（PXO）探索出了一套虛擬制片舞臺，配備2000塊LED面板，60多臺OptiTrack追蹤攝像機以及nDisplay虛幻引擎。表演者在這個舞臺上表演時會沉浸式進入到具有各種真實細節(jié)的虛擬舞臺中，仿佛置身于真實的場景進行表演。同時優(yōu)化拍攝流程，美術(shù)和所有資產(chǎn)及各部門協(xié)作都發(fā)生在虛幻引擎中，極大提高了拍攝及制作效率。

虛擬拍攝技術(shù)也推動了電影虛擬制片的發(fā)展。《曼達洛人》（TheMandalorian）因為大量使用了虛擬制片（VirtualProduction）技術(shù)而讓行業(yè)掀起了虛擬制片的熱潮。電影《長空之王》也首次搭建了虛擬制片舞臺，通過虛擬制片攝制。同時，北京電影學院美術(shù)學院團隊拍攝的中國首部虛擬制片教學實踐短片《異星救援》也對虛擬制片進行了研究。

AIGC （Artificial Intelligence GenerativeContent），即人工智能生成內(nèi)容，是一種創(chuàng)新型的人工智能技術(shù)，利用自然語言處理、機器學習和深度學習等技術(shù)，自動生成豐富多樣的文本、圖像、視頻等內(nèi)容。目前AIGC已經(jīng)影響了游戲、動畫乃至電影領(lǐng)域的數(shù)字資產(chǎn)的生成，并參與到動畫、游戲制作的流程之中。

在北京交通大學出品的動畫短片《高高的禮物》中，主創(chuàng)團隊對AI參與動畫場景制作的流程進行了實驗。繪圖師通過各種素材的拼貼勾勒出場景需要的構(gòu)圖，再將構(gòu)圖經(jīng)過AI軟件進行統(tǒng)一。最后，場景繪圖師在此基礎(chǔ)上進行修飾。通過實驗證明AIGC雖然目前還不能精準地實現(xiàn)對場景的百分百繪制，但是可以在風格訓練并加以人工輔助后，幫助創(chuàng)作者更高效地產(chǎn)出高質(zhì)量圖像。

英偉達的最新技術(shù)能夠?qū)I與音頻、3D面部動畫相結(jié)合，使數(shù)字角色更具活力和情感表達能力。例如：OmniverseAudio2Face可捕捉音頻中的情感和其他特征，生成與音頻同步的3D面部動畫。

倍受爭議的Deepfake技術(shù)可以通過深度學習對視頻中的角色的面部表情進行替換?；贕AN、CAN、StableDiffusion等深度學習模型的AI生成藝術(shù)形式的出現(xiàn)給電影創(chuàng)作帶來了新的可能，例如AI剪輯已經(jīng)被廣泛應(yīng)用于諸多視頻編輯軟件中，非專業(yè)人士也可以實現(xiàn)一鍵剪輯。

當下，AIGC在電影、圖文、視頻、游戲等內(nèi)容生產(chǎn)領(lǐng)域已經(jīng)能夠?qū)崿F(xiàn)大語言模型下的劇本撰寫；文本生成圖像及視頻；圖像擴容及風格遷移等。未來勢必實現(xiàn)電影全流程的深度介入。

電影虛擬制片與全息甲板4

伴隨著虛擬現(xiàn)實技術(shù)的發(fā)展，電影與虛擬現(xiàn)實敘事的終極想象愈發(fā)顯現(xiàn)。當前人們對虛擬現(xiàn)實敘事的終極想象可以概括為“全息甲板”（HolodeckCave）洞穴式沉浸系統(tǒng)模型。

虛擬制片的發(fā)展形態(tài)從以實拍為主虛擬為輔演變?yōu)樘摂M現(xiàn)實和數(shù)字資產(chǎn)為主，實拍為輔的方式，甚至在當下已經(jīng)出現(xiàn)了直接運用虛擬攝像機拍攝的方法。可以推導未來虛擬制片拍攝的電影可以通過虛幻引擎實現(xiàn)全流程的虛擬制片，類似于一個自由度極高的游戲世界，這種形態(tài)被稱為沙盒電影或者引擎電影（EngineMovie）。

在沙盒式的電影虛擬制片中，導演組可以通過游戲虛幻引擎（UnrealEngine）所建構(gòu)的各種數(shù)字資產(chǎn)進行高自由度組合，創(chuàng)造出極具個人特色的數(shù)字資產(chǎn)，無限逼近于在真實世界場景的搭建。虛擬制片中最具革命性的應(yīng)用是游戲引擎在制片管線中的使用，通過“實時渲染”技術(shù)將游戲過場動畫畫面提升至電影級，并嘗試使用游戲引擎制作電影片段。近年來，虛幻引擎加強了影視制作所需的功能模塊，實現(xiàn)了“所見即所得”的類實拍拍攝體驗。

無論是沙盒電影還是引擎電影，或者是全息甲板等概念，他們都指向一個共同的結(jié)果。一個高自由度的、可實時渲染的、依賴引擎和虛擬數(shù)字資產(chǎn)的虛擬世界?？梢岳斫鉃樵?jīng)的交互電影、游戲電影以及當下的虛擬制片，最終都指向了一種基于引擎的電影制作方法。過去已有藝術(shù)家和電影人利用游戲創(chuàng)作電影，例如2007年，藝術(shù)家曹斐在3D游戲第二人生中，創(chuàng)建了中國女孩翠西的角色，并通過翠西的視角導演了一部屬于自己的影片《我·鏡》。

“這樣的電影實際上是一個影像素材庫，欣賞者可以根據(jù)自己的意愿建構(gòu)自己喜歡的故事框架、情節(jié)和結(jié)局，看電影的過程好比玩電子游戲。”從電影《刺殺小說家》開始，越來越多的中國電影使用了虛擬制片，這也是我國電影工業(yè)化迅速發(fā)展的一大表現(xiàn)。2023年，電影《長空之王》運用虛擬制片全景舞臺（VPstage）進行虛擬拍攝，成為行業(yè)首例。

當技術(shù)發(fā)展到當下，藝術(shù)的門類已經(jīng)開始趨于融合，電影、游戲和劇場的邊界已經(jīng)日益模糊，終于成為了一個由圖像建構(gòu)的基于動態(tài)影像的沉浸式劇場。同時伴隨著人工智能技術(shù)的發(fā)展，互聯(lián)網(wǎng)的數(shù)據(jù)和各種文化都在數(shù)據(jù)化中變得更加有形可見，數(shù)字圖像正在我們的生活中生成一個超級龐大的引擎，而AI則幫助我們在這個超級龐大的引擎中進行數(shù)據(jù)的篩選和圖像的再生成。

Midjourney基于龐大的互聯(lián)網(wǎng)數(shù)據(jù)，可以根據(jù)關(guān)鍵詞信息和指令生成人們所希望的圖像，將某一類信息的大數(shù)據(jù)理解可視化。它們雖然不是完全真實的，卻代表了互聯(lián)網(wǎng)中同類數(shù)據(jù)的某種平均真實性，基本符合人們對信息的視覺經(jīng)驗。

比如一張20世紀80年代的老照片，很多人看第一眼就能感受到一種真實性。在多數(shù)人的視覺經(jīng)驗中，這就是關(guān)于80年代老照片的一種文化記憶。但是究其細節(jié)，完全無法從真實世界中找到一模一樣的，我們之所以覺得像，是由于在記憶中，僅保存了大致的圖像經(jīng)驗，而無法完全記得所有的細節(jié)。AI在數(shù)據(jù)庫中搜尋的圖像信息，是融合了關(guān)鍵詞的平均圖像，但是卻抹掉了不平均的部分，抹去了部分真實。

例如我們可以通過性格測試與長相的關(guān)鍵詞，得出一個毫無科學依據(jù)但是又讓人感覺似乎非常理性客觀代表了南北方人的長相平均臉。大數(shù)據(jù)所生成的圖像就一定具有真實性嗎？這一點值得商榷。但是AI確實通過大數(shù)據(jù)和理性分析，讓我們在多數(shù)時候相信它是可信的。所以AIGC天生就帶有超真實的意味，并且我們無法細究圖像生成的背后，是在哪一個環(huán)節(jié)對真實進行了調(diào)整而生成了這樣的一個視覺圖像。只能說當我們將圖像生成的權(quán)力讓渡給AI的時候，我們也將塑造文化記憶的權(quán)利讓渡給了AI。人們將越來越多圖像的投喂給AI，勢必會將AI培養(yǎng)成為一個非常龐大的超級虛幻引擎，AI最終會成為世界圖像的幕后建構(gòu)者。

新媒體藝術(shù)家胡介鳴的交互藝術(shù)作品“一個世界正在建構(gòu)之中”將正在建構(gòu)的虛無的賽博空間可視化，信息化的碎片正在建構(gòu)者一個新世界，如果這個虛擬的世界是可視的，那么它的每一個細節(jié)都是經(jīng)由我們的手所拾得的世界圖像的碎片構(gòu)成，它一定龐大到超乎我們的想象。同樣類似的作品還有奧拉維爾·埃利亞松（OlafurEliasson）的互聯(lián)網(wǎng)項目“MOON”。觀眾可以在虛擬“MOON”的任何角落進行涂畫，觀眾創(chuàng)作的每一幅繪畫都會被保存在項目中。越多的人參與，MOON的細節(jié)也越多，就愈加地真實。這個作品也映射出當下一個更加龐大的虛擬引擎正在生成中，它就像是一個MOON在賽博空間中被慢慢細節(jié)化、慢慢豐富、慢慢準確。隨著人與AI的交互、數(shù)據(jù)的共享和資料的上傳都在喂養(yǎng)這個新的世界，讓它慢慢長大。而我們讓AI在我們拾得的信息中重新生成新的細節(jié)，必然會遮蔽更多的真實世界。

終有一天，類似于PXO的沉浸式舞臺和虛幻引擎越來越普及，而AI可以深入?yún)⑴c到電影制作的全流程中，我們勢必可以更加輕松簡單的通過AI更便捷地獲取和創(chuàng)造圖像。受眾也將日益習慣于這種視覺圖像，最終進入一個更加依賴AI圖像的電影視覺生產(chǎn)時代。試想一下，如果引擎可以調(diào)動共享互聯(lián)網(wǎng)的圖像數(shù)據(jù)，我們便可以快速地運用AI在全息甲板中制作發(fā)生在任何文化背景、時間和地點的故事。當這個引擎的自由度無限接近于真實世界的無序與隨機，我們的創(chuàng)造力將在虛幻引擎中得到更大的解放。而另一方面，虛幻引擎所建構(gòu)的世界圖像也愈發(fā)成為禁錮我們想象力的壁壘。這仿佛是我們選擇將人類的部分生活喂養(yǎng)給了AI，眾人正在建構(gòu)一個真實的《模擬人生》游戲引擎——一個巨大的世界圖像。

技術(shù)更迭使得AI可以高效協(xié)助影視創(chuàng)作。例如，AI技術(shù)可以生成符合預設(shè)風格的劇本，并在審閱和完善后大幅提高導演的工作效率。然而值得注意的是，虛幻引擎所需的數(shù)字資產(chǎn)一旦由AI深度參與，就不可避免的帶上了某種文化批判的傾向，因為選擇也潛藏著權(quán)力。也許未來在AI對大數(shù)據(jù)篩選之下，

各種特殊性和細節(jié)都會被模糊成為一種似曾相識的視覺經(jīng)驗，慢慢替換掉我們對真實世界的記憶。從而真正做到從真實變成了超真實，甚至影響我們對文化的理解和記憶。

AIGC融合虛幻引擎，世界圖像與文化權(quán)力建構(gòu)

海德格爾（MartinHeidegger）在《世界圖像時代》一書中提出世界成為圖像和人成為主體這兩大進程決定了現(xiàn)代之本質(zhì)。世界被把握成了圖像，人成為了主體，“世界的圖像化深刻改變了人的存在，把一種身體體驗關(guān)系轉(zhuǎn)變成了一種視覺形式關(guān)系?！薄皥D像”一詞意味著世界成為了“對象”，我們把握和理解世界變成了更多依賴觀看世界這個“圖像”。而帶有權(quán)力的視覺觀看方式，則不可避免的投射出權(quán)力本身。建構(gòu)世界的賽選機制也不可避免地生成權(quán)力。當我們將AI融合虛幻引擎生成各種視覺影像，便為虛幻引擎賦予了更多的權(quán)力。當我們通過圖像將世界區(qū)隔化后，圖像成為部分割裂的世界，再經(jīng)由互聯(lián)網(wǎng)成為了虛幻引擎中人類所建構(gòu)的游戲沙盒世界觀。這就是未來我們建構(gòu)一個世界圖像的過程。海德格爾強調(diào)，現(xiàn)代科技已經(jīng)改變了我們對世界的理解方式，將世界轉(zhuǎn)化為可計算、可視化的圖像。這一理論中的關(guān)鍵觀點是，技術(shù)和媒體介質(zhì)塑造了我們對世界的感知。在人工智能領(lǐng)域，圖像生成技術(shù)使得我們能夠創(chuàng)造逼真的虛擬圖像，這些圖像可能會模糊了真實世界和虛擬世界之間的界限。這種技術(shù)進展，使我們越來越傾向于將現(xiàn)實世界視為一種圖像，而不是真實存在的事物。

鮑德里亞（JeanBaudrillard）的媒介批判為我們提供了進一步的視角。他認為媒體介質(zhì)不僅傳達信息，還塑造了我們對現(xiàn)實的認知。在人工智能時代，我們不僅能夠觀看虛擬圖像，還可以通過互聯(lián)網(wǎng)、社交媒體等渠道分享和傳播這些圖像。這導致了一種社會文化中的超真實性，即虛擬圖像變得比現(xiàn)實更有吸引力、更引人人勝。這可能導致我們越來越遠離真實世界，而不斷在我們所塑造的不全面的圖像世界中獲取被加工的視覺資料。而視覺文化建構(gòu)的權(quán)力也在我們對技術(shù)的依賴中悄然改變，更加深遠地看則可能會重新塑造我們的整個社會記憶1°。社會記憶決定著我們的文化記憶。雖然現(xiàn)在的虛擬制片主要用于科幻片和某些具備拍攝難度的電影，而未來隨著技術(shù)的普及，虛擬制片勢必會運用在更多類型片的拍攝制作之中，畢竟運用更高效的技術(shù)還可以獲得更高的經(jīng)濟回報，誰不愿意嘗試呢？

電影作為媒介也在不斷塑造者我們的文化記憶。文化和歷史中的事件被記錄、保存和傳播，形成了社會的共同記憶。弗朗西斯·艾肯（FrancesA.Yates）在她的著作《記憶的藝術(shù)》中強調(diào)，文化和社會的記憶是由各種媒介塑造和影響的。她認為，印刷術(shù)、繪畫、文學等媒介可以塑造和傳遞文化記憶。而電影的視覺文化建構(gòu)能力則無疑是遠遠大于以上傳統(tǒng)媒介的。

因此，從社會記憶和視覺文化的角度來看，媒體圖像可能會篡改人們的記憶與重新塑造文化。AI的圖片生成已經(jīng)可以變得非常逼真，甚至出現(xiàn)了基于深度偽造（DeepFake）技術(shù)可能被用于虛假信息傳播和犯罪的案例。這足以說明，人類對于AI的真實性還存在無法分辨真假的可能性。如果AI參與到視覺文化的建構(gòu)之中，則可以輕易地塑造另一種逼真的虛假，而替代部分真實。

不可否認的是，越來越多的AI參與，這個世界將會被建構(gòu)的越來越平均，越來越模糊，甚至帶上某種刻板的文化偏見。“世界圖像”一詞隱喻著世界失去了它的整體性而被簡化成為了圖像。在電影作為媒介之時，它成為了景觀的建構(gòu)者，而在游戲的視覺文化中，視覺圖像與龐大的虛擬資產(chǎn)是將人包裹的沉浸式景觀劇場。虛幻引擎毫無疑問將會比電影擁有更大的文化建構(gòu)權(quán)力。從工具維度考慮，無論采用何種模式，都必須遵循虛幻引擎的技術(shù)路線，運用與虛幻引擎兼容的技術(shù)資源，無法超越虛幻引擎系統(tǒng)提供的技術(shù)規(guī)則與框架。1虛幻引擎將成為電影視覺文化建構(gòu)的權(quán)力壟斷者，也是電影數(shù)字資產(chǎn)的建構(gòu)者。數(shù)據(jù)化作為一種提取過程，將世界轉(zhuǎn)換為量化操作。然而，這種量化也是對世界的“限定”，是對萬物的分類和分級。在這方面，數(shù)據(jù)就是暴力，因為當前的霸權(quán)數(shù)據(jù)文化建立在榨取和剝奪的基礎(chǔ)上，產(chǎn)生了一種全球性的“分類秩序”。這種分類是延續(xù)種族資本主義和父權(quán)統(tǒng)治所必需的。數(shù)據(jù)化的另一個影響是建立了霸權(quán)的新殖民主義數(shù)據(jù)文化。12

結(jié)語

從拍攝技術(shù)進步和電影工業(yè)化升級的角度而言，虛擬制片與AIGC的結(jié)合無疑是讓從業(yè)者無比期待的。但是在圖像狂歡的時代，我們更應(yīng)該辨析狂歡之下隱蔽在視覺文化建構(gòu)中的權(quán)力博弈，包括虛幻引擎和AIGC可能導致出現(xiàn)的倫理問題，視覺圖像生成機制的權(quán)力問題和文化建構(gòu)權(quán)力的問題。這種文化權(quán)力并不明顯，甚至被弱化和隱藏在了某種讓人感覺到的理性和正確之中。但這種文化權(quán)力卻可以在媒體的傳播中悄然改變著我們的社會文化記憶，抹去世界的真實。技術(shù)的發(fā)展和迭代是不可逆的，著眼未來應(yīng)如何更好的運用AIGC并在虛擬制片中實現(xiàn)我國電影工業(yè)化的快速轉(zhuǎn)型。

當前我國虛擬制片的癥結(jié)在于我們所使用的核心技術(shù)很多是依托國外的虛幻引擎，而虛幻引擎未來將會成為更大的文化權(quán)力塑造者。因此，本土虛幻引擎技術(shù)的突破非常重要。2020年8月，國家電影局、中國科協(xié)印發(fā)了《關(guān)于促進科幻電影發(fā)展的若干意見》。意見提出，要以科幻電影特效技術(shù)發(fā)展引領(lǐng)帶動電影特效水平整體提升。雖然虛擬制片目前多數(shù)用于科幻影片的拍攝，但是其先進性是有目共睹的。在科幻類型以外的其他類型的電影中，社會與文化記憶的建構(gòu)更加重要。技術(shù)的使用者還在于人，在電影人才的培養(yǎng)中我們不僅應(yīng)該重視技術(shù)的培養(yǎng)，更應(yīng)該加強電影人才對視覺文化理論和媒介批判能力的培養(yǎng)。

本文系北京市社科基金“青年項目”《數(shù)字媒體藝術(shù)融合北京鄉(xiāng)村智慧文旅的方法與路徑》（項目編號：23YTC041）階段性成果易雨瀟北京交通大學建筑與藝術(shù)學院副教授，北京電影學院博士李信煜北京交通大學研究生