應(yīng)用

技術(shù)

物聯(lián)網(wǎng)世界 >> 物聯(lián)網(wǎng)新聞 >> 物聯(lián)網(wǎng)熱點新聞
企業(yè)注冊個人注冊登錄

5s換臉吳彥祖!爆紅AI應(yīng)用ZAO仍面臨技術(shù)困境,你的“臉”被授權(quán)了嗎?

2019-09-04 08:54 大數(shù)據(jù)文摘
關(guān)鍵詞:ZAO換臉APP信息安全

導(dǎo)讀:實現(xiàn)這一這款名叫ZAO的場景化換臉軟件,并且迅速在一夜之間,攀升至app免費娛樂榜榜單第2名,超越了愛奇藝等視頻軟件。#Zao AI 換臉# 話題甚至一度快速登上微博熱搜榜第7位。

ZAO一夜之間就火了。

前晚,文摘菌的朋友圈被各種經(jīng)典影視劇的片段刷屏,有意思的是,這些視頻的男女主角都被換上了朋友們的“臉”。

比如,和自己的女裝大佬版演對角戲??

或者,給自己換一個吳彥祖或者金城武的身體??

實現(xiàn)這一這款名叫ZAO的場景化換臉軟件,并且迅速在一夜之間,攀升至app免費娛樂榜榜單第2名,超越了愛奇藝等視頻軟件。#Zao AI 換臉# 話題甚至一度快速登上微博熱搜榜第7位。

文摘菌也和朋友們迅速去試用了一下,你可以在“ZAO”上選定想要換臉的視頻或表情包,上傳自拍或本地圖片,即可一鍵完成“換臉”。方便快捷,而且,如果照片足夠清晰的話,效果還不錯。

整個使用過程中,文摘菌發(fā)現(xiàn)了幾個有意思的點:

首先,如果你授權(quán)了app訪問你的照片庫,那么其會非常迅速的查找你的所有照片,并自動找到其中清晰度合適的頭像定位。

此外,一張清晰度過關(guān)的照片就能合成各類視頻,而且合成速度非???,即使是在使用高峰期,也基本不超過10秒鐘!

創(chuàng)建這家app的公司是大家早已熟知的陌陌。不過據(jù)新浪報道,ZAO官方表示的精髓在于加好友,其定位主要在于社交而不僅僅是換臉工具。

其實早在今年四月份,類似的AI換臉就曾經(jīng)風(fēng)靡海外。今年4月份,一款可幫助用戶變臉、變性的應(yīng)用Facetify火遍全球,這款app實際上也是主打換臉,稱能讓用戶看到“30年后的自己”。

這樣的技術(shù)和場景看似新鮮,但熟悉文摘菌的讀者一定都知道,其背后的“換臉”技術(shù)已經(jīng)火了一段時間了。雖然ZAO沒有直接表示其技術(shù)來自deepfake,但二者有極大的相似性。

爆火的同時,這款app也將deepfake技術(shù),以及其面臨的法律和道德窘境,更進一步的帶到了國內(nèi)公眾面前。

新瓶老酒:換臉背后的技術(shù)支撐——Deep fakes

換臉技術(shù)如此成熟,離不開一個名為Deep fakes的軟件被匿名開源發(fā)布。它本質(zhì)上是一種使用AI深度學(xué)習(xí),能夠?qū)⒁粡垐D片中人的臉換到其他人的圖片上的技術(shù)。通過這種技術(shù),我們可以創(chuàng)建一個非常逼真的“假”視頻或圖片,“換臉”因此得名。

這項技術(shù)對硬件和視頻、換臉人圖片的質(zhì)量甚至是數(shù)量要求極高,在硬件方面,盡量1060往上,內(nèi)存至少8g,這只是標(biāo)配,當(dāng)然低于這個配置也能運行,但是效果怎么樣就不好說了。而且在標(biāo)準(zhǔn)配置下,圖片訓(xùn)練時間至少為6小時。

其實說,視頻在此技術(shù)用也是被拆分為圖片了,所以它和換臉人的圖片要求基本一樣,視頻要清晰,但是也不用過分清晰,視頻中要只出現(xiàn)被換臉人的一個人的臉,如果有其他人的臉,需要把它去掉。

有了數(shù)據(jù)和質(zhì)量的要求,如果你想自己訓(xùn)練一個AI換臉模型需要3個步驟:一是提取數(shù)據(jù),二是訓(xùn)練,三是轉(zhuǎn)換。其中第一和第三步都需要用到數(shù)據(jù)預(yù)處理,另外第三步還用到了圖片融合技術(shù)。所以主要包含的內(nèi)容有:圖像預(yù)處理、網(wǎng)絡(luò)模型、圖像融合。

具體原理思路為:對于每張臉,都訓(xùn)練一套編碼器和相應(yīng)的解碼神經(jīng)網(wǎng)絡(luò)。編碼時,使用的是第一個人的圖片。而解碼時,卻是使用第二個人解碼器。

也就是說,既然我們想要將兩張臉互換,那么我們可以設(shè)計兩個不同的解碼網(wǎng)絡(luò),也就是使用一個編碼網(wǎng)絡(luò)去學(xué)習(xí)兩張不同人臉的共同特征,而使用兩個解碼器去分別生成他們。

如上圖,也就是設(shè)計一個輸入端或者說一個編碼器,分別輸入兩個不同的臉,然后兩個輸出端或者說兩個解碼器,這樣我們就可以通過隱含層來分別生成兩張不同的人臉了。

對于訓(xùn)練部分,在這個網(wǎng)站中,其用復(fù)仇者聯(lián)盟里面的明星來做訓(xùn)練很容易,畢竟有大量的網(wǎng)絡(luò)公開圖片視頻。

圖片不足時,還可以從現(xiàn)有視頻中提取。在神經(jīng)網(wǎng)絡(luò)訓(xùn)練并學(xué)習(xí)了關(guān)于每個人面部的特征之后,它自己就能預(yù)測想出這個人還沒擺出來的姿勢。

比如,訓(xùn)練生成John Oliver。


在此技術(shù)出現(xiàn)之前,人們想換個臉只能依賴手動PS。這就要花費很多人工和時間,而且想在視頻里換個臉更難,每一幀都得換。

但自從這個叫做“deep fakes”的軟件被匿名開源發(fā)布,一切都不一樣了。

類似的換臉軟件還有一款叫做DeepFaceLab

在Github上有開源??

鏈接:https://github.com/iperov/DeepFaceLab

DeepFaceLab是一種利用機器學(xué)習(xí)來替換視頻中的面部的工具,通過運行腳本可以直接使用。收集原圖像和替換圖像的大量視頻和圖片素材,將素材剪輯成為段視頻,替換data_src.mp4和data_dst.mp4,然后使用一些腳本修改其中的參數(shù),可以得到訓(xùn)練之后的模型,最后會將換臉后的圖片合成視頻。

在法律邊緣試探:換臉技術(shù)的一系列版權(quán)+用戶隱私問題

deepfake大火之后就曾帶來侵犯隱私等一系列法律問題。

更遭受爭議的deepfake例子例如最近走紅網(wǎng)絡(luò)的一鍵生成裸照軟件DeepNude,只要輸入一張完整的女性圖片就可自動生成相應(yīng)的裸照,由于廣泛傳播而造成了預(yù)料之外的后果,開發(fā)者最終將APP下架。

被一鍵脫衣的霉霉

這幾個例子背后都用到了深度偽造技術(shù),即一種利用AI程序和深度學(xué)習(xí)算法實現(xiàn)視、音頻模擬和偽造的技術(shù),投入深度學(xué)習(xí)的內(nèi)容庫越大,合成的視音頻真實性越高,甚至可以達到以假亂真的程度。

更值得一提的是,深度偽造技術(shù)目前已經(jīng)不僅能實現(xiàn)換臉(face swap),更可以通過深度學(xué)習(xí)模擬真人聲音、創(chuàng)造出現(xiàn)實不存在的人物肖像。利用該技術(shù),可以以視頻這一較為可信的方式讓某人說不曾說過的話,做不曾做的事,達到混淆觀眾的目的。具備極高欺騙性的深度偽造也引發(fā)諸多爭議,例如楊冪換臉,AI軟件自動生成裸照,奧巴馬、普京等政治人物的深度偽造視頻等等,給個人和社會帶來風(fēng)險挑戰(zhàn)。

前段時間,美國眾議院議長Nancy Pelosi的一段深度偽造的談話視頻出現(xiàn)在社交媒體上,這段視頻經(jīng)由特朗普總統(tǒng)分享,在Facebook上獲得了超過250萬次的瀏覽量。早些的時候,美國前總統(tǒng)奧巴馬的臉被“借用”來攻擊特朗普總統(tǒng),該視頻在網(wǎng)站上也獲得480萬的瀏覽量。特朗普總統(tǒng)本人也難逃一劫,西雅圖電視網(wǎng)曾播放過一段深度偽造的特朗普演講視頻,視頻中特朗普總統(tǒng)滿臉通紅,還不時做一些滑稽的表情。由于深度偽造技術(shù)可以運用在包括總統(tǒng)在內(nèi)的任何官員身上,美國兩黨開始擔(dān)心該技術(shù)將成為針對美國和其他西方國家發(fā)起虛假信息戰(zhàn)爭的最新武器。

2019年6月13日,美國眾議院情報委員會召開關(guān)于人工智能深度偽造的聽證會,公開談?wù)摿松疃葌卧旒夹g(shù)對國家、社會和個人的風(fēng)險及防范和應(yīng)對措施。

和deepfake一樣,ZAO的大火也讓更多中國公眾了解了這一“偽造”技術(shù),是否會因此而引發(fā)相應(yīng)問題,我們還不得而知。

但更重要的是,ZAO作為一款帶有視頻編輯功能的軟件,其還需要面臨兩個方面的法律問題,視頻素材的版權(quán)問題和用戶的隱私問題。

ZAO APP的官方版權(quán)說明表示:ZAO產(chǎn)品上存在的短視頻和表情等素材,除了特別聲明是ZAO跟合作方進行版權(quán)合作的之外,均來源于ZAO用戶自發(fā)的上傳,ZAO不享有素材的商業(yè)版權(quán)。

ZAO上面有很多網(wǎng)友們“喜聞樂見”的視頻素材,用戶可以上傳一張照片就將這些素材里面的人物換成自己或者其他人的臉,這些應(yīng)該就是ZAO所說的官方版權(quán)合作。

但是當(dāng)文摘菌隨便點進去一個《武林外傳》的視頻,點擊視頻右下角有個版權(quán)說明的按鈕時,顯示是“404 not found”。

另外是用戶上傳的視頻素材,按照ZAO官方聲明的說法,版權(quán)是屬于上傳者的,ZAO不享有素材的商業(yè)版權(quán),但是在注冊APP時需要同意的“用戶協(xié)議”中,用戶對于自己上傳的視頻擁有所有權(quán),同時也承擔(dān)責(zé)任,但是ZAO以及其用戶在全球范圍內(nèi)享有完全免費、不可撤銷、永久、可轉(zhuǎn)載授權(quán)和可再生的權(quán)利,也就是說:用戶上傳的視頻素材版權(quán)歸用戶所有,但是其他任何人都可以進行修改和編輯,然后再進行傳播。

這引發(fā)了一眾網(wǎng)友的擔(dān)心,這會不會產(chǎn)生新的網(wǎng)絡(luò)詐騙手段?


圖片來源:知乎

而在用戶隱私方面,ZAO有一個單獨的隱私協(xié)議,這個隱私協(xié)議和其他APP的協(xié)議并沒有太多差別,包括采集一些瀏覽信息、設(shè)備信息、位置信息來進行用戶畫像和推送。

但是由于ZAO主打的是視頻換臉這樣的功能,隱私保護除了考慮用戶數(shù)據(jù)的泄露,還應(yīng)該考慮到用戶的照片、聲紋等信息是否會被不法利用,畢竟這是一個支付寶能刷臉支付的時代。

圖片來源:知乎

其實,我國的有關(guān)部門也充分注意到了這一點,日前,全國人大常委會審議的《民法典人格權(quán)編(草案)》里,正式加了一條:任何組織和個人不得以利用信息技術(shù)手段偽造的方式侵害他人的肖像權(quán)。

而草案的第八百零三條也被修改為:其他人格權(quán)的許可使用和自然人聲音的保護,參照適用本章的有關(guān)規(guī)定。

如果草案通過了正式的立法流程審核,民法典正式頒布施行,如果你不經(jīng)過別人的同意,隨便的把明星或者其他公眾的肖像進行處理,妥妥的,你違法了。另外,不僅是臉,根據(jù)草案的第八百零三條,聲音也是不能隨便換的!

如果情節(jié)嚴(yán)重的還可能觸犯刑法,例如《刑法》第246條:“以暴力或者其他方法公然侮辱他人或者捏造事實誹謗他人,情節(jié)嚴(yán)重的,處以三年以下有期徒刑、拘役、管制或者剝奪政治權(quán)利。”

也就是說,如果用DeepFakes、鬼畜等各種方式處理別人的臉,還沒經(jīng)過別人同意。很有可能觸及到“惡意誹謗”、“惡意剪輯”、“侵犯名譽權(quán)”等刑法管轄范圍。

這樣看來,也就能理解為什么ZAO會對用戶協(xié)議規(guī)定的如此復(fù)雜了。

最后,文摘菌還是想提醒大家:圖片千萬張,謹(jǐn)慎最保險,換臉一時爽, 親人兩行淚。