每經(jīng)記者｜石普寧    每經(jīng)編輯｜唐元    

“撥開塵污和泥土，我會(huì)讓她復(fù)活”……

在成都城市音樂廳上演的“致敬音樂劇《金沙》20年音樂劇場(chǎng)”中，當(dāng)男主角“沙”的扮演者沙寶亮唱起劇中經(jīng)典的《總有一天》，舞臺(tái)大屏幕上出現(xiàn)了一位身著劇中服飾的“女主角”——“金”的形象，與他對(duì)望、合唱。那是姚貝娜，通過AI數(shù)字人的形態(tài)，實(shí)現(xiàn)了一次特殊的“回歸”。

20年前，《金沙》作為中國(guó)首部大型原創(chuàng)音樂劇問世，當(dāng)時(shí)還是學(xué)生的姚貝娜被相中，隨之成為女主角“金”的首位扮演者。她的故事，與《金沙》緊密相連。

這次由AI技術(shù)支持的舞臺(tái)“重逢”，在引發(fā)觀眾復(fù)雜情感的同時(shí)，也將項(xiàng)目本身置于“AI復(fù)活”這一話題討論中。

這類應(yīng)用的背后，涉及怎樣的技術(shù)過程與倫理考量？通過“揭秘”由行者AI提供技術(shù)支持的“成都樣本”，或可一窺該領(lǐng)域當(dāng)前的技術(shù)現(xiàn)實(shí)與待解難題。

合唱背后的技術(shù)路徑拆解

實(shí)現(xiàn)一場(chǎng)舞臺(tái)級(jí)的數(shù)字表演，并非簡(jiǎn)單依靠自動(dòng)化程序。行者AI聯(lián)合創(chuàng)始人、技術(shù)副總裁江天宇在接受《每日經(jīng)濟(jì)新聞》記者采訪時(shí)，還原了這次合作中聲音與視覺部分的技術(shù)實(shí)現(xiàn)路徑。

先看聲音的還原。其首要面對(duì)的，是數(shù)據(jù)源的難題。

江天宇表示，團(tuán)隊(duì)很難獲得姚貝娜純凈的干聲（即無伴奏人聲），“例如她演唱時(shí)的聲音，其實(shí)是混了各種各樣的環(huán)境音。”因此，團(tuán)隊(duì)需要先通過技術(shù)手段，從現(xiàn)有的混合音源中“還原出一個(gè)她的干聲”，再用AI模型去生成最終的聲音。這并非簡(jiǎn)單的聲音克隆，而是要讓AI能夠在舞臺(tái)上與真人“合唱”，且須遵循特定的旋律和節(jié)拍。

圖片來源：演出視頻截圖

江天宇表示，此次采用的技術(shù)路徑是為AI模型輸入“曲譜”，讓其能夠依據(jù)旋律進(jìn)行演唱，“歌唱會(huì)比平常說話更難，因?yàn)樗枰M包含換氣、音色起伏在內(nèi)的更多細(xì)節(jié)，這要求AI模型對(duì)音樂元素有更深度的處理能力。”

在視覺形象的構(gòu)建上，團(tuán)隊(duì)面臨的是如何在大屏幕上呈現(xiàn)一個(gè)既真實(shí)又能被觀眾接受的形象。

一個(gè)業(yè)內(nèi)普遍存在的難點(diǎn)是數(shù)字人形象的逼真度問題，“如果你做得七八十分‘像’，那是最麻煩的，觀眾會(huì)產(chǎn)生所謂的‘恐怖谷效應(yīng)’。”

據(jù)江天宇介紹，為達(dá)到舞臺(tái)呈現(xiàn)所需的可信度，團(tuán)隊(duì)首先利用AI技術(shù)對(duì)姚貝娜出演《金沙》時(shí)期的老舊照片進(jìn)行高分辨率提升，再結(jié)合當(dāng)年她佩戴過的頭冠實(shí)物等素材，由人工進(jìn)行精細(xì)化的三維建模，盡可能還原其當(dāng)年的舞臺(tái)形象和神態(tài)。

姚貝娜AI數(shù)字人 圖片來源：每經(jīng)記者 石普寧 攝

從接手到最終呈現(xiàn)，江天宇和團(tuán)隊(duì)耗時(shí)約三個(gè)月。他坦言，在解決了聲音和視覺的基礎(chǔ)技術(shù)問題后，一個(gè)綜合性的挑戰(zhàn)隨之而來：如何讓一個(gè)AI“演員”真正融入一場(chǎng)高規(guī)格的現(xiàn)場(chǎng)音樂會(huì)？

他舉例說，此前團(tuán)隊(duì)自評(píng)能做到80分的技術(shù)效果，但在合作的專業(yè)聲樂老師看來，“就只有60分”。而正是這種來自藝術(shù)領(lǐng)域的專業(yè)反饋，驅(qū)動(dòng)團(tuán)隊(duì)在專家指導(dǎo)下，對(duì)AI的換氣、情感注入等表演細(xì)節(jié)進(jìn)行了更為精細(xì)的調(diào)校和打磨。

最終，這個(gè)被精細(xì)調(diào)校的數(shù)字表演，與沙寶亮的現(xiàn)場(chǎng)演唱、交響樂團(tuán)的伴奏實(shí)現(xiàn)同步，完成了在技術(shù)穩(wěn)定性和藝術(shù)融合度上的一次綜合考驗(yàn)。

數(shù)字記憶的倫理邊界 

記者注意到，當(dāng)前AI“復(fù)活”類技術(shù)大體落地呈現(xiàn)出兩條路徑。一是面向特定機(jī)構(gòu)和項(xiàng)目的高規(guī)格、定制化數(shù)字內(nèi)容創(chuàng)作。二是面向個(gè)人用戶（C端）的情感慰藉類服務(wù)。

不過，據(jù)公開報(bào)道，C端服務(wù)也引發(fā)了部分擔(dān)憂。有業(yè)內(nèi)人士指出，一來其涉及復(fù)雜的倫理悖論和法律風(fēng)險(xiǎn)，二來技術(shù)對(duì)人性復(fù)雜性的簡(jiǎn)化處理，也可能導(dǎo)致數(shù)字形象喪失真實(shí)意義。這些現(xiàn)象都顯示出，該領(lǐng)域的技術(shù)探索正與復(fù)雜的倫理規(guī)范問題并行。

面對(duì)這些復(fù)雜的背景，江天宇在采訪中談到，團(tuán)隊(duì)在處理《金沙》這一項(xiàng)目時(shí)，從授權(quán)獲取到內(nèi)容使用，都有明確的邊界。此外，雙方也確定了生成內(nèi)容的使用范圍。“僅限于此次音樂劇使用，而不會(huì)用作其他項(xiàng)目，”江天宇表示，未來也不會(huì)主動(dòng)進(jìn)行二次開發(fā)。

圖片來源：成都交響樂團(tuán)

將視線放至行業(yè)層面，該領(lǐng)域依然存在諸多待解的議題。

正如英國(guó)劍橋大學(xué)研究員Katarzyna Nowaczyk-Basinska在媒體采訪時(shí)指出，AI“復(fù)活”仍是一場(chǎng)“巨大的技術(shù)文化實(shí)驗(yàn)”，其長(zhǎng)短期心理影響尚不可知。

技術(shù)的進(jìn)步與公眾的情感接受度之間也存在張力，如此次演出中，部分觀眾“寧愿看錄像也不愿看AI”的觀點(diǎn)，就反映出公眾對(duì)“原真性記憶”的堅(jiān)守與技術(shù)“再創(chuàng)造”之間的潛在矛盾。

歸根結(jié)底，當(dāng)技術(shù)開始介入承載著復(fù)雜情感的個(gè)人記憶時(shí)，它所開啟的對(duì)話才剛剛開始。如何讓技術(shù)發(fā)展與社會(huì)倫理、公眾情感更好地協(xié)同，是整個(gè)行業(yè)需要持續(xù)面對(duì)和探索的課題。