AI生成式音樂在影視創(chuàng)作中的應(yīng)用

摘要：基于AI發(fā)展的大背景，本文結(jié)合影視、動(dòng)漫行業(yè)未來的發(fā)展方向和從業(yè)者需求，對AI的應(yīng)用創(chuàng)作進(jìn)行探索和思考。

關(guān)鍵詞：AI生成式；AI；影視創(chuàng)作

中圖分類號(hào)：J91文獻(xiàn)標(biāo)識(shí)碼：A文章編號(hào)：2096-7357（2024）33-00-03

在影視藝術(shù)不斷發(fā)展的今天，音樂作為重要的組成部分，對于提升影視作品的情感表達(dá)和氛圍營造起著至關(guān)重要的作用。隨著AI技術(shù)的飛速發(fā)展，生成式AI也不斷獲得發(fā)展，其中生成式音樂開始走進(jìn)影視創(chuàng)作領(lǐng)域，這為創(chuàng)作者帶來了新的機(jī)遇與挑戰(zhàn)。本文探討了AI生成式音樂在影視創(chuàng)作中的實(shí)際應(yīng)用，并結(jié)合實(shí)際案例分析了AI生成音樂的優(yōu)勢與不足，以期為影視創(chuàng)作的未來發(fā)展提供參考。

一、研究背景

當(dāng)今，生成式AI正在飛速發(fā)展，得到了各行各業(yè)的關(guān)注，大小公司、工作室、獨(dú)立藝術(shù)家都開始嘗試使用生成式AI輔助創(chuàng)作，甚至出現(xiàn)了從文案、視頻、音樂等全部可以由AI完成的作品。隨著社會(huì)的發(fā)展，智能手機(jī)與互聯(lián)網(wǎng)的普及，使人們能夠接觸到各類娛樂作品，甚至自己動(dòng)手成為創(chuàng)作者。特別是現(xiàn)今智能手機(jī)配備了攝像頭、錄音機(jī)等硬件，加上剪輯軟件的幫助，這使獨(dú)立的個(gè)人也有能力成為創(chuàng)作者。目前短劇、短視頻已經(jīng)開始發(fā)力，在影視行業(yè)中占據(jù)重要位置，加上AI的出現(xiàn)，以往的創(chuàng)作方式和觀念開始改變。

二、研究目的和意義

創(chuàng)作類行業(yè)，如影視制作屬于復(fù)合型產(chǎn)業(yè)，需要多個(gè)工種相互合作完成最終成品，其中包含了劇本、分鏡、概念圖、配樂、表演、美術(shù)等環(huán)節(jié)。個(gè)人要想掌握各個(gè)環(huán)節(jié)，需要長時(shí)間的學(xué)習(xí)成本，且實(shí)際拍攝創(chuàng)作的時(shí)候也難有精力兼顧，而AI的出現(xiàn)為個(gè)人創(chuàng)作者和小工作室提供了一條新的道路。

目前，生成式AI已經(jīng)開始應(yīng)用于公司、工作室、獨(dú)立創(chuàng)作者的創(chuàng)作，包括生成圖、生成音樂、生成文案、生成視頻等相關(guān)用途。同時(shí)，市面上的各類視頻剪輯、修圖軟件開始提供生成式AI功能，以供一般創(chuàng)作者使用，其中包括了AI生圖、AI朗讀、AI音樂、AI視頻等功能。由此可見，使用AI工具輔助創(chuàng)作如今已經(jīng)成為獨(dú)立創(chuàng)作者創(chuàng)作內(nèi)容的重要手段。

三、研究手段

對于新興的技術(shù)產(chǎn)品，其最好的評(píng)價(jià)方式便是親身試用。通過實(shí)際使用、測試各類AI音樂模型產(chǎn)品，研究者可以學(xué)習(xí)如何使用相關(guān)模型，并參與相關(guān)AI音樂大賽檢驗(yàn)創(chuàng)作成果。通過將研究學(xué)習(xí)和實(shí)際創(chuàng)作相結(jié)合，研究者可以加深對生成式AI的了解，積累使用經(jīng)驗(yàn)。同時(shí)，只有通過總結(jié)生成式AI的不足之處，才能得到一個(gè)對生成式AI產(chǎn)品相對客觀的評(píng)價(jià)。

四、AI生成式音樂在影視創(chuàng)作上的應(yīng)用

目前，AI生成式音樂能夠解決創(chuàng)作者對配樂、音效的需求，因此在各類創(chuàng)作領(lǐng)域都有較大的發(fā)揮空間。下面主要介紹AI生成式音樂在影視創(chuàng)作方面的一些應(yīng)用。

快速形成多種風(fēng)格的音樂小樣：在電影的前期制作中，AI生成式音樂可以被用于快速生成配樂的初稿。導(dǎo)演在前期構(gòu)思和粗剪階段，可以利用AI音樂生成工具，根據(jù)不同的場景和情節(jié)氛圍，生成多種風(fēng)格的音樂小樣，并從中挑選符合自身預(yù)期的版本，將其提交給專業(yè)配樂師。配樂師根據(jù)導(dǎo)演提供的小樣，能夠更好地了解導(dǎo)演的需求，從而減少溝通成本，幫助他們更高效地創(chuàng)作出貼合電影情感和節(jié)奏的配樂。

自動(dòng)生成背景音樂和音效：具體來說，AI音樂技術(shù)能夠根據(jù)影視作品的情感、氛圍和場景需求，自動(dòng)生成與之相匹配的背景音樂和音效。例如，在緊張刺激的戰(zhàn)斗場景中，AI可以生成激昂澎湃的背景音樂，使觀眾能感受到場景的緊張氛圍；而在溫馨感人的家庭場景中，AI則能創(chuàng)作出輕柔悠揚(yáng)的旋律，為觀眾營造出一種溫暖、舒適的觀影氛圍。這種技術(shù)不僅大幅提高了音樂創(chuàng)作的效率，還能夠?yàn)橛耙曌髌穾砀觽€(gè)性化和貼合的音樂效果[1]。

在影視創(chuàng)作中進(jìn)行輔助作曲：AI在影視創(chuàng)作中可以通過多種方式輔助作曲，包括生成旋律、和弦，調(diào)整和優(yōu)化音樂，以及提供個(gè)性化的音樂創(chuàng)作?。首先，AI能夠根據(jù)預(yù)設(shè)的音樂風(fēng)格和情感基調(diào)，生成符合影視場景需求的旋律和和弦。其次，AI還具備調(diào)整和優(yōu)化音樂的能力。在生成初步旋律后，作曲家還可以利用AI工具對旋律進(jìn)行微調(diào)，以達(dá)到更加貼合影視情感和節(jié)奏的效果。這種調(diào)整可以涉及音樂的節(jié)奏、音高、音色等多個(gè)方面，使得音樂更加符合影視作品的整體氛圍。最后，AI還能通過機(jī)器學(xué)習(xí)技術(shù)，從大量現(xiàn)存的音樂作品中學(xué)習(xí)到模式和結(jié)構(gòu)，從而創(chuàng)作出具有創(chuàng)新性和復(fù)雜性的音樂。這種技術(shù)不僅能夠模仿不同作曲家的風(fēng)格，還能根據(jù)特定的情感需求來創(chuàng)作個(gè)性化音樂，從而為影視作品提供獨(dú)一無二的音樂配樂。

?提高音樂制作效率?：傳統(tǒng)的音樂制作過程需要耗費(fèi)大量的時(shí)間和精力，而AI音樂的出現(xiàn)則大幅縮短了這一周期。AI技術(shù)可以在短時(shí)間內(nèi)生成大量高質(zhì)量的音樂作品，從而為影視創(chuàng)作提供了更多的選擇和可能性?。例如，通過?數(shù)據(jù)驅(qū)動(dòng)進(jìn)行創(chuàng)作，AI可以利用大量的音樂和音效數(shù)據(jù)，包括已有電影的原始音頻、音樂樂譜等，作為訓(xùn)練模型的基礎(chǔ)。在音樂創(chuàng)作過程中，AI還可以自動(dòng)化地完成許多煩瑣的任務(wù)，如音樂元素的提取、音樂規(guī)律的分析、旋律和和聲的生成等，這大幅縮短了人工干預(yù)的時(shí)間，提高了創(chuàng)作效率。AI還能根據(jù)輸入的參數(shù)，如音樂風(fēng)格、節(jié)奏、音調(diào)等，自動(dòng)生成具有個(gè)性化特征的音樂作品，以便進(jìn)一步滿足影視創(chuàng)作的多樣化需求。通過利用深度學(xué)習(xí)技術(shù)，AI可以訓(xùn)練出高效的音樂生成模型。這些模型能夠快速地生成符合要求的音樂和音效，且其質(zhì)量隨著訓(xùn)練迭代而不斷提高。

綜上所述，在創(chuàng)作領(lǐng)域，AI生成式音樂能夠提高創(chuàng)作者的效率，提高不同環(huán)節(jié)的對接效率。AI生成式音樂為影視創(chuàng)作帶來了前所未有的變革。它打破了傳統(tǒng)影視音樂創(chuàng)作依賴專業(yè)人員，耗費(fèi)大量時(shí)間、人力、物力的局限，開啟了一種更高效、更便捷且更多元的創(chuàng)作模式。通過先進(jìn)的技術(shù)手段，影視創(chuàng)作者能夠快速獲得符合各種情節(jié)、情感和風(fēng)格要求的音樂，使影視音樂創(chuàng)作不再局限于少數(shù)專業(yè)作曲家的靈感與能力范圍，拓寬了創(chuàng)作的可能性邊界。

在音樂風(fēng)格的創(chuàng)新上，AI能夠融合不同地域、時(shí)期、風(fēng)格的音樂元素，創(chuàng)造出前所未有的音樂風(fēng)格組合，從而為影視作品營造出獨(dú)特的氛圍，使觀眾獲得煥然一新的視聽感受。在創(chuàng)作流程方面，AI可以融入影視創(chuàng)作的各個(gè)環(huán)節(jié)，從前期的粗剪版本配樂、輔助把握節(jié)奏情感，到具體的虛擬歌手制作、畫面、動(dòng)畫生成與音樂配合，再到后期的視頻剪輯，依據(jù)音樂進(jìn)行更自然流暢的畫面切換等，都體現(xiàn)了其對傳統(tǒng)影視創(chuàng)作流程的重塑。隨著時(shí)代科技的進(jìn)步，越來越多的人能夠接觸到手機(jī)、電腦。因此，利用手機(jī)、電腦進(jìn)行內(nèi)容創(chuàng)作的獨(dú)立作者也越來越多，利用軟件輔助創(chuàng)作已成為當(dāng)下的熱門趨勢。

總體來說，AI音樂在影視創(chuàng)作上的應(yīng)用正在不斷改變著傳統(tǒng)的音樂創(chuàng)作和配樂方式，為影視作品帶來了更多的可能性和創(chuàng)新性。隨著技術(shù)的不斷進(jìn)步和應(yīng)用場景的拓展，AI音樂有望在影視創(chuàng)作領(lǐng)域發(fā)揮更加重要的作用?。

五、實(shí)際操作流程

使用AI生成音樂的主要流程如下：明確需求—文案生成—歌詞設(shè)計(jì)—歌曲輸出。

創(chuàng)作者通過以上流程，并結(jié)合各類軟件工具，即可輸出音樂。本文結(jié)合SunoAI和ChatGpt講解了如何利用現(xiàn)有的生成式AI工具創(chuàng)作一首AI音樂。

（一）明確需求

創(chuàng)作者需要對即將生成的音樂有清晰的構(gòu)想，要確定音樂的應(yīng)用場景，是為電影創(chuàng)作配樂，還是為廣告打造背景音樂，抑或是為個(gè)人的原創(chuàng)歌曲尋找靈感起點(diǎn)。不同的劇情、作品需要表達(dá)的情感是不一樣的，這就需要?jiǎng)?chuàng)作者有一個(gè)前期的整體預(yù)設(shè)。

創(chuàng)作者需要考慮目標(biāo)受眾的喜好與審美傾向。針對年輕群體的流行音樂項(xiàng)目，創(chuàng)作者的音樂需要注重節(jié)奏感強(qiáng)、旋律抓耳且融合當(dāng)下流行元素的風(fēng)格。若是為古典音樂愛好者打造音樂會(huì)曲目，創(chuàng)作者就要嚴(yán)格遵循古典音樂的曲式結(jié)構(gòu)、和聲規(guī)則。

創(chuàng)作者還要明確音樂的時(shí)長、風(fēng)格偏好等細(xì)節(jié)：是偏好3分鐘左右的簡潔流行曲，還是10分鐘以上的宏大交響樂；是想要搖滾、民謠、電子等現(xiàn)代風(fēng)格，還是想要巴洛克、浪漫主義等古典風(fēng)格。這些都需要先精準(zhǔn)界定，再投入實(shí)際生成。

（二）文案生成

在明確需求后，創(chuàng)作者需要將抽象的需求轉(zhuǎn)化為具體的文字描述，以便AI能夠理解并依此進(jìn)行創(chuàng)作。創(chuàng)作者可以將音樂的風(fēng)格特點(diǎn)、情感訴求、主題意象等以文案的形式呈現(xiàn)，最終輸入SunoAI。

（三）歌詞設(shè)計(jì)

搭建合理的歌詞框架是創(chuàng)作優(yōu)秀歌詞的基礎(chǔ)。不同類型的影視歌曲，在歌詞結(jié)構(gòu)上有著各自的特點(diǎn)。歌詞結(jié)構(gòu)往往包含前奏引入、主歌鋪墊、副歌高潮及結(jié)尾升華等部分。創(chuàng)作者需要基于需求進(jìn)行歌詞創(chuàng)作，在這一步，創(chuàng)作者可以將之前設(shè)定的文案導(dǎo)入ChatGpt，使其輔助生成歌詞，并檢查字?jǐn)?shù)、時(shí)長、韻腳是否通順。

（四）歌曲輸出

當(dāng)歌詞設(shè)計(jì)初步完成后，AI生成音樂便進(jìn)入歌曲輸出的關(guān)鍵階段。創(chuàng)作者需要將音樂文案、歌詞數(shù)據(jù)輸入SunoAI，進(jìn)行最終輸出。

SunoAI會(huì)根據(jù)設(shè)定的風(fēng)格選取適配的樂器和音色。若是鄉(xiāng)村風(fēng)格，則會(huì)以吉他、班卓琴、小提琴等原聲樂器為主；若是電子音樂，則會(huì)大量調(diào)用合成器、鼓機(jī)等電子設(shè)備產(chǎn)生獨(dú)特音效。SunoAI依據(jù)提供的文案、歌詞構(gòu)建鼓點(diǎn)節(jié)奏，確定節(jié)拍、速度及強(qiáng)弱變化，為歌曲搭建穩(wěn)固的節(jié)奏框架。在和聲方面，SunoAI遵循既定的音樂風(fēng)格規(guī)則，生成和諧、豐富的和弦，增強(qiáng)音樂的層次感與豐滿度。

在音樂輸出完畢后，創(chuàng)作者對成曲進(jìn)行試聽，若在試聽過程中發(fā)現(xiàn)某個(gè)段落存在問題，如情感表達(dá)不到位、歌詞存在錯(cuò)誤、旋律與歌詞的配合銜接存在問題、整體樂風(fēng)與需求不同，可反饋給SunoAI，使其重新優(yōu)化該部分，或者再次生成新曲。通過多樂曲生成，創(chuàng)作者可以挑選相對符合自身設(shè)想的版本，并在此基礎(chǔ)上進(jìn)行深化，最終輸出歌曲，完成全部的創(chuàng)作[2]。

六、基于當(dāng)前的AI生成創(chuàng)作所存在的隱患

目前，AI生成領(lǐng)域已經(jīng)可以幫助創(chuàng)作者生成文本、圖片、影像乃至聲音，但伴隨而來的各類問題也是創(chuàng)作者和相關(guān)部門需要思考如何應(yīng)對的。如果不能妥善處理這些問題，則容易觸發(fā)各種風(fēng)險(xiǎn)。

（一）作品版權(quán)歸屬爭議

對于使用AI直接生成的作品，其版權(quán)歸屬難以界定。目前，普遍認(rèn)為AI輸出的音樂不能直接當(dāng)作享有版權(quán)的作品，只有在其啟發(fā)下經(jīng)人類重新創(chuàng)作的內(nèi)容才可獲版權(quán)保護(hù)，這就導(dǎo)致創(chuàng)作者在使用AI生成音樂時(shí)易引發(fā)版權(quán)糾紛。然而，在實(shí)際創(chuàng)作中，因?yàn)閯?chuàng)作者本人精力有限、AI創(chuàng)作的作品往往不會(huì)直接聲明、侵權(quán)內(nèi)容存在隱蔽性，所以通常情況下侵權(quán)行為難以被發(fā)現(xiàn)，創(chuàng)作者的權(quán)益不能得到有效的保障。

（二）質(zhì)量與藝術(shù)價(jià)值問題

1．情感表達(dá)有所欠缺

AI生成的音樂往往缺乏真實(shí)的情感和靈魂，難以像人類創(chuàng)作者那樣將深刻的情感、獨(dú)特的經(jīng)歷和感悟融入作品，使聽眾產(chǎn)生情感共鳴。藝術(shù)創(chuàng)作本質(zhì)上是創(chuàng)作者自身的表達(dá)，觀眾在鑒賞作品時(shí)也更青睞于有著獨(dú)特表達(dá)和個(gè)人見解的作品。

2．風(fēng)格與創(chuàng)意受限

AI通?；谝延械臄?shù)據(jù)和模式生成音樂，可能導(dǎo)致作品風(fēng)格趨于同質(zhì)化、標(biāo)準(zhǔn)化，缺乏獨(dú)特性和創(chuàng)新性，難以突破傳統(tǒng)音樂風(fēng)格的束縛，這就限制了音樂行業(yè)的創(chuàng)新發(fā)展。

3．藝術(shù)價(jià)值爭議

部分人認(rèn)為AI生成式音樂只是對已有音樂元素的重組和模仿，缺乏人類創(chuàng)作所蘊(yùn)含的藝術(shù)價(jià)值和創(chuàng)造力，不能替代人類音樂家的創(chuàng)作，其大量出現(xiàn)可能會(huì)降低整個(gè)音樂行業(yè)的藝術(shù)水準(zhǔn)。

（三）常見案例

1．歌詞銜接存在問題

由于AI生曲需要基于歌詞生成，但AI缺乏對歌曲旋律的掌控，對于操作者提供的歌詞會(huì)全盤生成，因此這容易使歌詞斷句出錯(cuò)、歌詞與高潮不匹配、歌曲拖沓的問題存在。

2．旋律缺少記憶點(diǎn)

AI生曲需要?jiǎng)?chuàng)作者本身對其進(jìn)行精確的指定和反復(fù)調(diào)整，最終逐漸接近創(chuàng)作者心中的樣子。對于AI直接產(chǎn)生的作品，其旋律缺少雕琢，難以形成記憶點(diǎn)。

3．難以修改

AI生曲依賴關(guān)鍵詞，創(chuàng)作者通過輸入關(guān)鍵詞得到音樂，這類直出的音樂素材難以二次修改、編輯。使用AI生曲的創(chuàng)作者本身大都沒有作曲、配樂的能力，因此即使發(fā)現(xiàn)實(shí)際音樂不符預(yù)期，創(chuàng)作者也難以修改和補(bǔ)救，最終仍然需要真人參與修改。

綜上所述，生成式AI雖然可以解決創(chuàng)作者的一些問題，提高效率，但如果不能妥善處理其缺陷，最終產(chǎn)出的作品將不盡如人意。

七、結(jié)束語

當(dāng)前，隨著生成式AI和影視創(chuàng)作的融合，個(gè)人內(nèi)容創(chuàng)作者的崛起將是未來的趨勢，但當(dāng)前AI技術(shù)存在諸多問題，這就需要從業(yè)者、技術(shù)研發(fā)人員去克服和優(yōu)化這些問題，還需要解決創(chuàng)作設(shè)計(jì)的素材版權(quán)的合法性、公正性等問題。無論是真人生成還是使用軟件輔助，創(chuàng)作者都需要保持藝術(shù)的初心，將自身的藝術(shù)審美和創(chuàng)作理念與新的技術(shù)相結(jié)合。只有做“有溫度”的作品，才能得到市場和觀眾的認(rèn)可。監(jiān)管部門也應(yīng)當(dāng)及時(shí)跟進(jìn)，出臺(tái)相關(guān)的政策法規(guī)，引導(dǎo)行業(yè)健康、有序地發(fā)展。新的技術(shù)可以為創(chuàng)作帶來新的可能性，創(chuàng)作者應(yīng)當(dāng)保持謹(jǐn)慎、樂觀的心態(tài)，充分挖掘新的技術(shù)帶來的潛力，從而推動(dòng)行業(yè)的發(fā)展。

參考文獻(xiàn)：

[1]王朝洋.AI“歌手”翻唱類音視頻的情緒價(jià)值、技術(shù)隱憂及應(yīng)對策略[J].西部廣播電視，2023，44（17）：55-57.

[2]李靚.人工智能在傳統(tǒng)音樂領(lǐng)域中的應(yīng)用與探索[J].當(dāng)代音樂，2022，（03）：191-194.

作者簡介：楊瀚森（1996-），男，浙江寧波人，碩士研究生，助教，從事影視動(dòng)畫研究。