宋 強
(中國電影科學(xué)技術(shù)研究所,北京 100086)
近年來,快速發(fā)展的數(shù)字電影高分辨率、高幀率、廣色域等技術(shù),已經(jīng)提前于數(shù)字電影行業(yè)的相關(guān)國際標(biāo)準(zhǔn),獲得了市場應(yīng)用,并產(chǎn)生一定反響。比如,著名導(dǎo)演李安先生拍攝的《比利·林恩的中場戰(zhàn)事》和《雙子殺手》兩部影片,均采用了4K3D120f ps格式制作和發(fā)行放映。在此之前,好萊塢著名導(dǎo)演彼得·杰克遜,拍攝了高幀率格式(3D48fps)的《霍比特人》三部曲系列。即將上映的《阿凡達(dá)2》,據(jù)稱將采用高于常規(guī)24fps的3D高幀率技術(shù)格式拍攝。上述影片的制作和導(dǎo)演主創(chuàng),足以引起電影行業(yè)的廣泛關(guān)注和討論,但是討論和熱議的結(jié)果卻沒有完全站在高幀率技術(shù)格式的應(yīng)用“勢在必行”上。實際上,一部分觀點認(rèn)為,常規(guī)電影的24fps用于2D畫面創(chuàng)作和放映已經(jīng)很好,沒有必要朝著更高幀速率發(fā)展,如果是3D電影,則可以適當(dāng)提高幀速率,但是提高到48fps,還是60fps,或者更高的120f ps,應(yīng)該有待市場的進一步檢驗,以及在此之后的相關(guān)技術(shù)標(biāo)準(zhǔn)制定。
為了研究和交流數(shù)字電影高幀率、3D、4K等技術(shù),走通4K3D60fps格式電影制作工藝,我們以4K3D60fps格式電影制作為目標(biāo),通過實踐拍攝測試,總結(jié)梳理了4K3D60fps格式電影制作工藝中核心環(huán)節(jié)的關(guān)鍵技術(shù)問題和解決方案,希望可以為業(yè)內(nèi)提供應(yīng)用參考。限于篇幅,本文將主要針對4K3D60fps格式電影前期拍攝測試和DIT技術(shù)應(yīng)用進行整理討論,后續(xù)還將針對4K3D60fps格式電影的后期制作和發(fā)行放映進行測試和整理。
數(shù)字電影的制作和生產(chǎn)基本流程一致,都要經(jīng)過前期拍攝、現(xiàn)場DIT處理、剪輯、套底和校色、母版DCP輸出等環(huán)節(jié)。4K3D60fps格式電影生產(chǎn)制作,因為增加了高幀率(24fps→60fps)和3D立體等要求,使得相應(yīng)制作環(huán)節(jié)多了些變化,技術(shù)難度有所增加。為方便后續(xù)總結(jié)敘述,繪制出4K3D60fps格式電影制作工藝流程簡圖(圖像部分),見圖1。
圖1 4K3D60fps格式電影制作工藝流程簡圖
實驗測試的設(shè)備選擇:RED EPIC5 K數(shù)字?jǐn)z影機2臺(立體匹配,同時期購買,固件版本一致)、立體匹配鏡頭2支(型號、焦距等信息完全一致)、3DRIG(Screen Plan Steady-flex,屬于“L”型半透半反式結(jié)構(gòu),是業(yè)內(nèi)3D立體拍攝的主流支架結(jié)構(gòu),便于3D立體視差的調(diào)整)、AMBIENT LOCKIT ACL204時間碼發(fā)生器,其他配件略。
數(shù)字?jǐn)z影機主要參數(shù)設(shè)置:基準(zhǔn)時間碼60fps、錄制時間碼60fps、分辨率4K、壓縮比8∶1(或更高)、Ti mecode標(biāo)簽下的Source(源)選擇為External(外部)、TC Display Mode選為TOD、Sensor Sync Mode(處理器同步模式)選擇為Genlock(鎖相)、Monitor display選擇為自動或60fps,其他參數(shù)略。
時間碼發(fā)生器主要參數(shù)設(shè)置:1080p video、TC 30f ps。時間碼發(fā)生器與數(shù)字?jǐn)z影機的實際連線如圖2所示。
圖2 外部時間碼控制器控制兩臺數(shù)字?jǐn)z影機的同步和鎖相
實驗拍攝素材格式:4K3D60fps,左右眼分離文件。
當(dāng)立體攝影機所有參數(shù)顯示正常時,進行拍攝測試。實驗測試的結(jié)果:發(fā)現(xiàn)部分鏡頭隨機出現(xiàn)“時間碼同步畫面內(nèi)容不同步”的現(xiàn)象,這將給整個制作帶來特別大的麻煩。
圖3 基于外部時間碼發(fā)生器的3 D立體同步拍攝
為了說清問題,將“時間碼同步畫面內(nèi)容不同步”的現(xiàn)象用拍攝測試得到的素材說明如表1所示(“時間碼同步畫面內(nèi)容也同步”的素材不會產(chǎn)生問題,在此不再列舉)。
表1 時間碼同步畫面內(nèi)容不同步
實拍素材文件:A001_R001_01019Z_001.R3D和B001_L001_0101G2_001.R3D。
圖4 原始圖像文件屬性信息
4K3D60 fps格式電影前期實驗拍攝時,隨機出現(xiàn)的“時間碼同步畫面內(nèi)容不同步”問題,產(chǎn)生的原因不好判斷,可能是時間碼發(fā)生器的問題,業(yè)內(nèi)領(lǐng)先的A MBIENT LOCKIT ACL204時間碼發(fā)生器,最高只能支持到原生30f ps的幀速率,用于支持60fps的3D立體拍攝可能會有隨機誤差,當(dāng)然這只是應(yīng)用層面的初步推斷;也可能是數(shù)字?jǐn)z影機的問題,畢竟數(shù)字?jǐn)z影機產(chǎn)品出現(xiàn)同步錄制方面的某種誤差也不是完全沒有可能,但如果產(chǎn)生的原因在于數(shù)字?jǐn)z影機,那么更換數(shù)字?jǐn)z影機產(chǎn)品或者挑選到完全沒有誤差的數(shù)字?jǐn)z影機似乎也并不現(xiàn)實。不管是何種原因,現(xiàn)階段依靠后期制定相應(yīng)的方案是最有效的解決辦法。
針對表1所示“時間碼同步畫面內(nèi)容不同步”的技術(shù)問題,我們知道,手動指定立體同步可以解決,可是完全依靠手動來處理全部原始圖像素材的3D立體同步,則大大浪費了基于時間碼進行3D立體同步的后期批處理效率。因此,需要找到一種解決方案,既能充分利用后期環(huán)節(jié)基于時間碼進行3D立體同步的功能,又能大大減少手動匹配和指定3D立體同步鏡頭的工作量。
基于反復(fù)的后期制作測試,我們梳理了兩個工藝流程,發(fā)現(xiàn)問題的核心主要是在DIT、剪輯、套底等環(huán)節(jié)之間的時間碼追蹤,描述如下。
(1)DIT環(huán)節(jié)處理好3 D立體同步(將板口時間碼信息滯后的L或R眼素材做時間碼偏移處理,比如DAVINCI軟件Clips Attributes→offset,-1F),之后轉(zhuǎn)碼并將轉(zhuǎn)碼素材(時間碼同步畫面內(nèi)容也同步)給到剪輯和視效,由剪輯環(huán)節(jié)完成聲畫“合板”以及剪輯定稿,推薦手動聲畫“合板”并確保聲音文件的時間碼沒有變化。如果聲音“合板”一定要基于時間碼的方式,則可能會出現(xiàn)板口畫面的時間碼和板口聲音的時間碼不一致現(xiàn)象,需要在剪輯時間線上進一步核驗聲畫是否完全同步,如果不同步,建議在時間線上以直接剪切的方式完成聲畫精準(zhǔn)同步,最終在套底環(huán)節(jié)重新鏈接原始素材文件時,解決基于時間碼同步但是畫面內(nèi)容不同步(因為重新鏈接的原始素材時間碼未曾做過offset處理)的技術(shù)問題,見表2。
表2 DIT環(huán)節(jié)為主的3D立體同步處理(時間碼偏移)
(2)DIT環(huán)節(jié)以常規(guī)轉(zhuǎn)碼為主,由剪輯環(huán)節(jié)處理轉(zhuǎn)碼后素材(和原始素材的時間碼、畫面內(nèi)容一致)的3D立體同步(將板口時間碼信息滯后的L或R素材做時間碼offset偏移處理或者是手動指定“同步幀”的方式,具體取決于剪輯軟件和剪輯師的工作習(xí)慣),之后進行聲音“合板”處理,推薦手動指定“同步幀”的方式或者在時間線上以直接剪切的方式執(zhí)行聲畫同步,最后完成剪輯并輸出AAF或XML文件,用于校色環(huán)節(jié)套底。此流程同樣需要在套底時解決時間碼同步但畫面內(nèi)容不同步的技術(shù)問題,見表3。
表3 剪輯環(huán)節(jié)為主的3D立體同步處理(時間碼偏移為例)
以上兩種方式,簡單來說,就是看3D立體同步的處理是在DIT環(huán)節(jié)完成優(yōu)化,還是在剪輯環(huán)節(jié)完成優(yōu)化。雖然都是在套底階段解決“時間碼同步畫面內(nèi)容可能不同步”的現(xiàn)象,但是綜合考慮,還是在剪輯階段處理比較好。原因主要有兩個:其一,DIT階段做3D立體同步,需要處理全部素材,而現(xiàn)場工作任務(wù)較多,時間緊張,若處理完每天拍攝的素材3D立體同步之后,再進行轉(zhuǎn)碼,難免會影響到剪輯和視效等部門的工作效率;其二,如果現(xiàn)場同期錄音文件也是基于時間碼和3D立體畫面同步,那么左、右眼文件和聲音文件的板口位置,因隨機原因產(chǎn)生的時間碼組合會有多種可能,即左右眼板口畫面的時間碼和板口聲音的時間碼完全一致(理想素材)、左右眼板口畫面的時間碼一致但是和板口聲音的時間碼不一致、左右眼板口畫面的時間碼不一致且其中一眼的板口時間碼與板口聲音的時間碼一致、左右眼板口畫面和板口聲音的時間碼都不一致(機率極低)。這些技術(shù)問題如果處理不好,會影響到后續(xù)環(huán)節(jié)的工作,給后續(xù)環(huán)節(jié)帶來特別大的麻煩。因此,包含左右眼3D立體轉(zhuǎn)碼文件的同步匹配和聲畫“合板”處理,還是放在剪輯環(huán)節(jié)處理比較穩(wěn)妥。
基于剪輯階段完成3D立體同步和“聲畫同步”,并以實拍素材為例,將4K3D60fps格式電影后期制作工藝流程細(xì)化如圖6所示,聲音部分的處理相對常規(guī),在此不做過多說明。
關(guān)于圖6的幾點說明:
(1)圖6中,Edit(剪輯)和Conform(套底)環(huán)節(jié),我們是依據(jù)Davinci系統(tǒng)做的工藝流程測試,使用的原始圖像素材為測試實拍的左右眼立體文件A001_R001_01019Z_001.R3D和B001_L001_0101G2_001.R3D。Davinci軟件的功能比較完善,可根據(jù)需要搭配不同性能硬件,實現(xiàn)DIT系統(tǒng)、剪輯系統(tǒng)、Conform(套底)/視差校正和校色等系統(tǒng)的搭建。
(2)圖6中,若Edit(剪輯)環(huán)節(jié)使用AVID Media Co mposer,則DIT轉(zhuǎn)碼后的左右眼素材文件做3D立體同步時,可使用多種方法。比如手動指定左眼素材文件(A001_R001)的板口時間碼00∶02∶40∶56與右眼素材文件(B001_L001)的板口時間碼00∶02∶40∶57同步,這樣就可以不做右眼素材文件的時間碼Offset偏移。當(dāng)然,后續(xù)使用AAF傳遞和Conform(套底)時,也會帶來新的問題,比如AAF文件中攜帶的剪輯定稿時間線上的素材時間碼信息會與Conform(套底)過程中基于AAF文件導(dǎo)入媒體池的原始圖像素材文件的時間碼信息完全一致。這個時候,就需要套底之后,采用左右眼文件疊加(分別位于視頻軌道V1、V2)的方式,進行后續(xù)的視差校正和立體校色,回歸到以前的常規(guī)通用流程。
圖6 基于時間碼同步的4K3D60fps格式電影制作工藝流程細(xì)化簡圖
需要注意的是,A001_R001_01019Z_001.R3D和B001_L001_0101G2_001.R3D合成為3D立體鏡頭時,A001_R001_01019Z_001.R3D實為左眼文件,B001_L001_0101 G2_001.R3D實為右眼文件??赡苁且驗閿z影機拍攝時的文件命名設(shè)置或安裝(物理位置)不當(dāng)?shù)仍?,造成了最終錄制素材文件命名與一般習(xí)慣上的沖突。
數(shù)字電影拍攝的DIT工作內(nèi)容十分復(fù)雜,是原始圖像數(shù)據(jù)存儲、備份、校驗和分發(fā)的核心,需要同時面對攝影組、剪輯組、視效組、導(dǎo)演組以及制片組等多個部門,工作量十分巨大,所以盡量能夠減少一部分現(xiàn)場DIT部門的工作,否則,需要聘請大量的DIT工作人員,并且搭配使用的DIT硬件設(shè)備也跟著增加成本。
針對4K3D60fps格式電影制作技術(shù)和制作工藝,拋開現(xiàn)場視頻監(jiān)看及分發(fā)(可采用常規(guī)2D審看方案,滿足現(xiàn)場導(dǎo)演組審看和其他各部門負(fù)責(zé)人的分屏審看等),DIT部門在現(xiàn)場做的工作主要包括4K3D60fps格式原始圖像數(shù)據(jù)的存儲、備份和校驗(左右眼原始素材文件),4K3D60fps原始圖像數(shù)據(jù)的daily(每日工作樣片)轉(zhuǎn)碼(用于剪輯),4K3D60fps原始圖像數(shù)據(jù)的視效鏡頭轉(zhuǎn)碼(視效提前制作或預(yù)審視)等工作。
市場上主流數(shù)字?jǐn)z影機單機都可以拍攝4K60fps格式,使用兩臺協(xié)同便可實現(xiàn)3D立體拍攝,從而得到4K3D60fps格式的原始圖像數(shù)據(jù)。但是不同數(shù)字?jǐn)z影機使用的存儲卡介質(zhì)不同,導(dǎo)致DIT環(huán)節(jié)需要配備不同的讀卡器才能快速有效的完成原始圖像數(shù)據(jù)的存儲和備份。此外,鑒于原始圖像數(shù)據(jù)的重要性,一般要分別獨立備份至少2、3份以上才保險。推薦使用高速磁盤陣列和大容量移動硬盤存儲等方式,有條件的劇組還可以增加一份數(shù)據(jù)磁帶備份。
本次拍攝使用兩臺RED EPIC 5K數(shù)字?jǐn)z影機拍攝,所用讀卡器為RED EPIC攝影機廠家專用讀卡器,數(shù)據(jù)接口為usb 3.0。備份和轉(zhuǎn)碼系統(tǒng)的選擇,使用MAC OS工作站搭配DIT轉(zhuǎn)碼軟件Davinci。MAC OS工作站的雷電3接口磁盤陣列,可用于大容量數(shù)據(jù)的快速存儲和備份。Davinci軟件運行在MAC OS系統(tǒng)平臺,搭配雷電3接口磁盤陣列,轉(zhuǎn)碼和拷貝分發(fā)的速度和效率都比較理想,二者結(jié)合,性價比高。
圖7 “電腦主機(含軟件)+磁盤陣列+讀卡器”的DIT存儲及備份
圖8 左右眼素材文件導(dǎo)入和基于時間碼的3Dsync素材創(chuàng)建(測試)
圖9 3D立體時間線(測試)
在保證至少有2、3份高速存儲陣列存儲原始圖像數(shù)據(jù)的基礎(chǔ)上,選擇一份高速磁盤陣列中的素材進行全面校驗(其他備份可以隨機校驗)。校驗的方法主要是導(dǎo)入備份的原始圖像數(shù)據(jù)進入Davinci軟件系統(tǒng),借助Davinci軟件(本次測試實驗使用的Davinci軟件版本為16)里的3D Sync功能,通過時間碼匹配的方式將左右眼素材文件直接匹配成3D素材,然后利用立體匹配后的3D素材創(chuàng)建時間線并在Color(校色)標(biāo)簽頁內(nèi)觀察素材的播放質(zhì)量(是否有技術(shù)質(zhì)量問題,如畫面瑕疵、曝光過度等)和3D立體的同步效果。發(fā)現(xiàn)問題,及時向?qū)а萁M和攝影組反饋,查找原因。若出現(xiàn)前文述及過的時間碼一致畫面內(nèi)容不一致的問題,如果差別不是數(shù)幀以上的話,可以先行忽略。
圖10 Color頁面下的3 D立體同步校驗(圖示鏡頭時間碼同步畫面內(nèi)容不同步)
本次4K3D60fps格式電影拍攝實驗測試,檢驗到部分素材文件,隨機出現(xiàn)時間碼一致而畫面內(nèi)容不一致的問題,以場記板合上瞬間的板口位置為準(zhǔn),見圖5。
圖5 左、右眼圖像素材3D立體匹配“時間碼一致畫面內(nèi)容(板口)不一致”
此外,如果導(dǎo)演要在DIT環(huán)節(jié)審看3D立體效果,則將導(dǎo)演指定要看的3D鏡頭(原始圖像文件或原始圖像文件的轉(zhuǎn)碼文件)放置在3D時間線上,率先檢查3D立體同步效果,針對隨機出現(xiàn)的時間碼同步畫面內(nèi)容不同步的問題,可暫時通過素材時間碼Offset偏移的方式,確保導(dǎo)演審看時的3D素材完全同步。
4K3D60 fps格式電影制作用于后期3D立體剪輯的DIT轉(zhuǎn)碼可沿用常規(guī)方法。雖然,3D立體的部分素材存在隨機不同步(基本上差1幀)的技術(shù)問題,但是不推薦在DIT環(huán)節(jié)將其校對和匹配。如果為了導(dǎo)演組審看,則可以臨時校對和匹配3D立體效果,但也是盡量使用轉(zhuǎn)碼后的文件比較合理(除非導(dǎo)演組要求使用原始圖像數(shù)據(jù)審看),對電腦硬件性能要求降低的同時,又可增加3D立體素材的播放流暢度。
圖11 4K3 D60fps格式電影技術(shù)演示片——左眼素材文件轉(zhuǎn)碼(測試)
圖12 4K3D60fps格式電影技術(shù)演示片——右眼素材文件轉(zhuǎn)碼(測試)
用于剪輯的常規(guī)轉(zhuǎn)碼主要注意相關(guān)參數(shù)的合理設(shè)置,設(shè)置的重點是必須保證未來可以正常套底,以及轉(zhuǎn)碼后的文件用于剪輯系統(tǒng)時能夠?qū)崟r播放。
轉(zhuǎn)碼后的文件,時間碼信息和原始素材完全一致,目的是為了用于剪輯之后的套底。轉(zhuǎn)碼后的文件分級目錄建議和原始素材的文件分級目錄一致。
將轉(zhuǎn)碼后的4K3D60fps格式素材文件,提交給剪輯部門,即可完成該部分工作。
如果未來采用4K3D60fps格式拍攝的影片中,有大量視效鏡頭,且需要趕制作周期的話,可以將視效制作部分提前介入,以提高工作效率。
DIT部門在核驗4K3D60fps原始圖像素材后,可以按照視效部門的要求,為其提供相關(guān)視效鏡頭的原始圖像文件拷貝以及原始圖像文件的轉(zhuǎn)碼服務(wù)。現(xiàn)在的視效制作軟件大多已經(jīng)支持主流數(shù)字?jǐn)z影機的原始圖像文件格式,所以DIT部門理論上只需要給視效部門提供原始圖像文件的備份文件即可,需要的話,轉(zhuǎn)碼工作可由視效環(huán)節(jié)自己完成。在DIT環(huán)節(jié)完成相應(yīng)的原始圖像文件轉(zhuǎn)碼服務(wù),只是為了節(jié)省視效制作部門的轉(zhuǎn)碼時間,提高總體工作效率。
圖13 4K3D60fps格式電影技術(shù)演示片——DIT轉(zhuǎn)碼至VFX(測試)
當(dāng)然,DIT部門也可以根據(jù)視效部門的具體要求,將原始文件匹配3D立體并校對后,將其轉(zhuǎn)碼成高質(zhì)量素材(比如*.tiff序列幀等格式),再提供給視效部門。視效部門完成相關(guān)工作后,會將這些畫面(代理質(zhì)量或最高質(zhì)量)提交給剪輯或校色環(huán)節(jié),不再需要和原始圖像素材發(fā)生Confor m(套底)過程。
如果視效部門只是急需相關(guān)素材,用于視效制作的預(yù)審視,目的是為了確認(rèn)拍攝素材的質(zhì)量能否用于未來高精度視效制作的話,則DIT部門可以完成原始圖像素材的3D立體同步校驗后,向視效部門提供代理文件質(zhì)量的轉(zhuǎn)碼輸出,用于提高彼此的工作效率。
本文介紹了4K3D60fps格式電影前期拍攝的實驗測試和DIT處理,針對隨機出現(xiàn)的“時間碼一致但畫面內(nèi)容不一致”的技術(shù)問題,做了分析和后期制作測試,提出了相應(yīng)的解決思路和技術(shù)方案。但是完整的4K3 D60fps格式后期制作流程,仍然需要進一步的描述和分析,我們后續(xù)會在相關(guān)文章中進一步討論。