國(guó)內(nèi)網(wǎng)劇AI換臉術(shù)首秀:“五毛特效”引吐槽,大型“車(chē)禍”的鍋誰(shuí)來(lái)背?
編者按:本文來(lái)自微信公眾號(hào)“機(jī)器之能”(ID:almosthuman2017),36氪經(jīng)授權(quán)發(fā)布。
作者 | 力琴、徐丹
編輯| 四月
最近玄幻網(wǎng)劇《三千鴉殺》AI 換臉的五毛特效吸引了一波吃瓜群眾。經(jīng)過(guò) AI 換臉處理后的劇中角色——面部扭曲、表情生硬、脖子和頭顏色完全分離。曾經(jīng)紅遍大江南北的「AI 換臉」為何在該劇中表現(xiàn)得如此不如人意。
2017 年,AI 換臉技術(shù)「DeepFakes」在國(guó)外興起,通過(guò)一款簡(jiǎn)單的教程,即便是技術(shù)小白也能將明星或熟悉人的臉替換到影視作品中。
2019 年,B 站 up 主「換臉哥」將《射雕英雄傳》中朱茵的臉替換成楊冪,ZAO App Store 一夜之間刷爆朋友圈,換臉潮流蔓至國(guó)內(nèi),與之相對(duì)應(yīng)的黑產(chǎn)也快速生長(zhǎng),各種兜售換臉情色視頻和軟件教程層出不窮,越來(lái)越多的人開(kāi)始抵制 AI 換臉。
《三千鴉殺》的播出,意味著 AI 換臉技術(shù)首次在正統(tǒng)的影視作品中落地,帶來(lái)實(shí)實(shí)在在的商業(yè)價(jià)值。但首次落地效果并不盡如人意,被吐槽效果像恐怖片。
AI 換臉究竟是如何運(yùn)作的?已經(jīng)日趨成熟的技術(shù)為何運(yùn)用在電視劇中還是如此青澀?爭(zhēng)議與期待并行,AI 換臉未來(lái)會(huì)走向何方?
一AI 換臉影視「首秀」,效果驚悚惹爭(zhēng)議
網(wǎng)劇《三千鴉殺》播出后,比劇更快火起來(lái)的是劇中「青青」角色的 AI 換臉。原本飾演者劉露的臉被換成了另一名演員張鼎鼎。
左為原劇飾演者劉露,右為 AI 換臉對(duì)象張鼎鼎
換臉技術(shù)并非新事物,早在 2017 年,國(guó)外就已經(jīng)有人將明星的臉換到成人電影女主角中,這種技術(shù)稱(chēng)為「DeepFakes」,2019 年,楊冪版《射雕英雄傳》和 ZAO 軟件的出現(xiàn)讓換臉技術(shù)流傳到了國(guó)內(nèi)。
但是,上述的換臉技術(shù)依然局限在用戶(hù)自?shī)首詷?lè)的范圍,視頻也只在自媒體平臺(tái)傳播,而《三千鴉殺》中的換臉是該技術(shù)第一次真正被用在影視行業(yè)中。
原飾演青青一角的是演員劉露,2019 年 9 月 18 日,微博爆出劉露在行李過(guò)安檢時(shí)攜帶的易燃易爆噴霧被扣,但她卻趁安檢人員不注意,執(zhí)意攜帶噴霧入站;事后還與現(xiàn)場(chǎng)工作人員產(chǎn)生激烈爭(zhēng)執(zhí);最終劉露因阻礙鐵路執(zhí)法人員執(zhí)行公務(wù),擾亂公共場(chǎng)所秩序被鐵路警方行政拘留 5 日。
隨后,芒果 TV 發(fā)出解約聲明,劉露被雪藏封殺。
有了行政拘留的案底記錄,也就意味著她登上了「劣跡藝人」名單,為新劇免受打壓等牽連影響,這次出品方用上了 AI,將劉露的臉換成了另一名演員。
但 AI 換臉技術(shù)在影視行業(yè)的「首秀」卻并不能令人滿(mǎn)意,甚至有些驚悚,換臉過(guò)后的青青面部扭曲、表情生硬、脖子和頭顏色完全分離。
網(wǎng)劇《三千鴉殺》中的 AI 換臉動(dòng)圖呈現(xiàn)
替代者的五官正臉照違和感濃厚,側(cè)臉看起來(lái)就更加嚇人。在演員側(cè)身轉(zhuǎn)過(guò)去時(shí),五官卻脫節(jié)依然停留在正臉位置,暴露得最為明顯的地方就是嘴巴。
該劇中的青青只是一個(gè)小角色,原本不會(huì)引人注意,但拙劣的換臉技術(shù)讓這個(gè)角色迅速出圈,該劇目前在豆瓣評(píng)分只有 6.1,熱評(píng)第一就表示,「是 AI 換臉吸引了我」,還有不少網(wǎng)友說(shuō),換臉之后的角色讓人「有恐怖片的感覺(jué)」。
二AI換臉術(shù)應(yīng)用已久 ,利用隱私牟利成黑產(chǎn)
換臉術(shù)應(yīng)用在影視素材中已經(jīng)不是新鮮事物。
它可以追溯到 2017 年,國(guó)外一個(gè)名為「DeepFakes」的用戶(hù)在 Reddit 上發(fā)布了一個(gè)「假視頻」,利用深度學(xué)習(xí)和 AI 新技術(shù),將蓋爾·加朵的臉換到了成人電影上。
蓋爾·加朵被換臉到成人影片
制作人員時(shí)國(guó)外的一名程序員,他在網(wǎng)上炮制了無(wú)數(shù)明星換臉的小視頻。并且都免費(fèi)發(fā)布了自己的成果和換臉視頻教程。
按照教程,制作一個(gè)明星換臉視頻非常簡(jiǎn)單。只需要在網(wǎng)上收集這個(gè)明星足夠多的面部角度的圖片和視頻,把它們和你自己的小視頻交給人工智能做深度學(xué)習(xí),人工智能就可以根據(jù)視頻里人物的面部輪廓、表情、嘴型等等自動(dòng)把明星的臉替換上去。
即使只是一個(gè)新人也能在幾個(gè)小時(shí)內(nèi)做出一部換臉視頻,并且越多人使用教程,人工智能換臉的精準(zhǔn)度就越高。
之后人們?yōu)榱思o(jì)念他的貢獻(xiàn),也用他的名字命名了 AI 換臉技術(shù),稱(chēng)之為「DeepFakes」。
但換臉風(fēng)波并沒(méi)有就此而止,兩年后還風(fēng)靡到了國(guó)內(nèi)。2019 年年初,B 站 UP 主「換臉哥」將一段 94 版射雕英雄傳視頻中的朱茵的臉換成了楊冪,迅速在網(wǎng)上發(fā)酵并引起了軒然大波,B 站視頻截止刪除前點(diǎn)擊量超出 20 萬(wàn),微博話題閱讀量 1.3 億。讓 AI 換臉技術(shù)在國(guó)內(nèi)真正火了起來(lái)。
目前該視頻已下架,看從流傳出的動(dòng)圖看,整個(gè)片段毫無(wú)違和感,角色面部表情極其自然,如果事先不被告知,完全看不出來(lái)這是換臉視頻。
除了楊冪版 AI 換臉,還有網(wǎng)友利用 AI 技術(shù)將某平臺(tái)女主播瞬間變成劉亦菲、楊冪、范冰冰等形象。
隨后,換臉技術(shù)軟件 ZAO 也在國(guó)內(nèi)興起,用戶(hù)只需要在 App 中上傳一張照片,就能將自己的臉替換成視頻中「謝爾頓」、「周潤(rùn)發(fā)」、「白展堂」等人的臉,幾乎可以以假亂真。
在 AI 換臉剛剛出現(xiàn)的時(shí)候,更多的是給某個(gè)電視劇或者電影的主角臉換成自己喜歡的明星或者自己想看的人的臉,但隨著 AI 換臉技術(shù)的不斷發(fā)展,技術(shù)門(mén)檻降低,許多電腦小白也能在短期內(nèi)學(xué)會(huì)如何進(jìn)行 AI 換臉。
門(mén)檻降低帶來(lái)的也就是魚(yú)龍混雜,許多人看到了「商機(jī)」,對(duì)情色片進(jìn)行換臉并打包售賣(mài),逐漸形成了 AI 黑產(chǎn)。據(jù)《智東西》記者 2019 年調(diào)查,在國(guó)內(nèi),AI 換臉儼然已經(jīng)形成了一個(gè)黑產(chǎn)產(chǎn)業(yè)鏈,上游提供軟件及技術(shù)、中游提供視頻、照片定制、下游售賣(mài)成品視頻,也有的商家做全產(chǎn)業(yè)鏈的生意。
貼吧、QQ 群等地方均有相關(guān)產(chǎn)品售賣(mài),包括成品情色視頻、售賣(mài)定制視頻和售賣(mài)軟件及教程等,成品情色視頻價(jià)格從 2 元 1 部到 30 元 46 部、100 元 150 部和 100 元 200 部不等,一般都是打包售賣(mài),視頻以國(guó)內(nèi)一、二線女明星為主。
除了侵犯名人隱私和助長(zhǎng)虛假情色信息泛濫外,換臉技術(shù)對(duì)每個(gè)使用的人都有侵權(quán)隱患。在 ZAO App 中,用戶(hù)無(wú)法使用名人肖像,只能上傳自己照片換臉,而且在軟件隱私協(xié)議中,用戶(hù)照片的使用權(quán)已經(jīng)移交給了軟件。
另外,據(jù)《新京報(bào)》分析,換臉技術(shù)還有可能會(huì)導(dǎo)致詐騙,不法分子可以利用某個(gè)人照片假裝其被綁架,向父母索要錢(qián)財(cái)。
所以,從這一技術(shù)誕生起,針對(duì)他的爭(zhēng)議和限制就從未停止過(guò)。Deep Fakes 視頻發(fā)出以后的好幾個(gè)星期,網(wǎng)絡(luò)上不斷有人發(fā)表文章和報(bào)道,抨擊這一換臉技術(shù)。該技術(shù)會(huì)給很多無(wú)辜清白的人(像那些無(wú)故出現(xiàn)在成人電影中的藝人)造成困擾;「假視頻」會(huì)加劇虛假新聞的散播,進(jìn)而將大大損壞視頻作為證據(jù)的可信度。斯嘉麗約翰遜等受害明星也在發(fā)聲,稱(chēng)這種技術(shù)已經(jīng)損害了自身肖像權(quán)。
去年,F(xiàn)acebook 還聯(lián)合微軟、麻省理工大學(xué)等業(yè)界和學(xué)界的伙伴共同置辦「Deepfake 檢測(cè)挑戰(zhàn)賽」(DFDC),旨在找到一款能檢測(cè)視頻是否被換過(guò)臉的工具,并且它能被每個(gè)人便捷操作。
在我國(guó),2019 年 5 月底,國(guó)家網(wǎng)信辦會(huì)同有關(guān)部門(mén)發(fā)布《數(shù)據(jù)安全管理辦法(征求意見(jiàn)稿)》,其中要求,網(wǎng)絡(luò)運(yùn)營(yíng)者利用大數(shù)據(jù)、人工智能等技術(shù)自動(dòng)合成新聞、博文、帖子、評(píng)論等信息,應(yīng)以明顯方式標(biāo)明「合成」字樣;不得以謀取利益或損害他人利益為目的自動(dòng)合成信息。
三「以假亂真」的換臉技術(shù)究竟如何運(yùn)作?
技術(shù)本身并無(wú)好壞之分,關(guān)鍵在于我們?nèi)绾问褂?,就影視行業(yè)而言,AI 換臉是有一定助力作用的,《三千鴉殺》本應(yīng)該是這一技術(shù)正確使用的例子,但相比用戶(hù)自制的「完美無(wú)缺」的視頻,為什么《三千鴉殺》呈現(xiàn)出來(lái)的結(jié)果非常粗糙?
Al 換臉顧名思義就是在圖像或視頻中把一張臉替換成另一張臉。首先需要做的就是數(shù)據(jù)準(zhǔn)備,也就是收集原始人臉的圖像和目標(biāo)人臉的圖像。其次還需要捕捉不同的臉部姿態(tài)、角度、表情以及光照的臉部圖像,需要進(jìn)行專(zhuān)門(mén)的數(shù)據(jù)處理,以達(dá)到「以假亂真」的效果。最后,計(jì)算機(jī)系統(tǒng)需要對(duì)人臉表情變化的關(guān)鍵點(diǎn)進(jìn)行面部捕捉,比如眼睛、鼻子、下巴、顴骨、臉頰等,進(jìn)而依照這些特征點(diǎn)進(jìn)行臉部替換。
目前用戶(hù)自制的換臉視頻主要是用 DeepFakes、Face2Face 和 CycleGAN 技術(shù)。
DeepFakes 使用的主要過(guò)程包括,人臉定位、人臉轉(zhuǎn)換、圖像拼接。其中人臉定位已經(jīng)非常成熟,一般定位算法可以生成人臉的特征點(diǎn),例如左右眉毛、鼻子、嘴和下巴等等。人臉轉(zhuǎn)換也就是采用 GAN 或 VAE 等生成模型,目標(biāo)是生成擁有 A 表情的 B 臉。最后的圖像拼接則是將人臉融合原圖的背景,從而達(dá)到只改變?nèi)四樀男Ч?/p>
Face2Face 利用面部追蹤技術(shù)和圖像算法,將一個(gè)人的面部表情、說(shuō)話時(shí)肌肉的變化復(fù)制到另一個(gè)視頻中的目標(biāo)人臉上,從而實(shí)現(xiàn)面部重演。CycleGAN 則是一種無(wú)需成對(duì)示例便可自動(dòng)進(jìn)行圖像到圖像轉(zhuǎn)換的技術(shù)。
普通人用 AI 換臉自?shī)首詷?lè)尚且可行,但一旦進(jìn)入到專(zhuān)業(yè)領(lǐng)域,技術(shù)的運(yùn)用就沒(méi)有那么簡(jiǎn)單。在影視劇中,「換臉」一直是一件高成本的事。
據(jù)娛樂(lè)自媒體「娛哩」,在影視劇中常用的比較精致的換臉技術(shù)是手動(dòng)換臉,但市場(chǎng)價(jià)格在十幾萬(wàn)元每分鐘,明顯不是一部小成本網(wǎng)劇可以承擔(dān)的,而 AI 換臉的價(jià)格大概是 1.5 萬(wàn)元每分鐘,相差了十倍左右。最后從畫(huà)面上來(lái)看,《三千鴉殺》沒(méi)有選擇手動(dòng)換臉,而是用 AI 技術(shù),程序自動(dòng)導(dǎo)出。
但是 AI 換臉技術(shù)在影視中的應(yīng)用并不成熟,需要一定的專(zhuān)業(yè)背景。
把朱茵替換成楊冪的人在早期采訪中提到,制作那段幾分鐘的視頻他整整用了一星期左右,而整個(gè)操作過(guò)程還需要一個(gè)比較好的 PC、一個(gè)特別好的顯卡,甚至要租(海外)服務(wù)器使用,「普通電腦是做不了的,這項(xiàng)技術(shù)對(duì)民用來(lái)說(shuō),難度還是很大的。」
一位特效制作人在接受媒體采訪時(shí)表示,《三千鴉殺》效果現(xiàn)在看起來(lái)不協(xié)調(diào),是因?yàn)橘N合度不夠。「這個(gè)技術(shù)真的很難的,目前他們只做到了跟上,做不到徹底、完美的貼合。
從影視制作、日常娛樂(lè)視頻再到換臉黑產(chǎn),換臉技術(shù)影響行業(yè)的方方面面。簡(jiǎn)單易用的技術(shù)讓用戶(hù)可以任意生成內(nèi)容,在豐富內(nèi)容創(chuàng)造工具與素材的同時(shí),卻也讓個(gè)人隱私與黑色產(chǎn)業(yè)問(wèn)題被放大。但技術(shù)被利用得到仍然可以帶來(lái)積極影響,比如這次為就「問(wèn)題」演員的新劇上檔解了燃眉之急。
但從目前效果來(lái)看,AI 換臉技術(shù)從娛樂(lè)到真正的規(guī)?;蜕虡I(yè)化應(yīng)用,仍有明顯差距。