摘要:上周,Avatarify的爆火與下架再次將AI換臉技術帶上風口浪尖。
文/ 智能相對論(ID:aixdlun)
作者/ 離離
上周,Avatarify的爆火與下架再次將AI換臉技術帶上風口浪尖。其實,這項技術早已出現,人們也不是第一次為AI換臉相關應用如此瘋狂。
像是前陣子最流行的自拍模式——“迪士尼公主臉”和“二次元漫畫臉”,就是利用AI生成的。
去年,騰訊光影研究室在QQ小世界、微視App、微博等社交平臺上推出的“王者臉”、“童話臉”等各類AI特效應用。便結合了生成對抗網絡GAN算法與3D卡通風格、游戲人物風格,可以將照片和直播視頻中的人物立刻變成游戲角色、真人“芭比”或“在逃公主”。
百度的AI平臺也基于生成對抗網絡,結合人臉檢測、頭發分割、人像分割等技術,推出人像動漫化服務。現已和B612咔嘰美顏相機合作,為用戶提供量身定做的二次元漫畫頭像定制。不少主播和網紅都曾在直播中使用這類特效,運用這類貼紙來自拍,也作為一種新的“打碼”方式形成潮流。
AI換臉熱
AI換臉的興起可追溯至2016年,德國研究團隊研發出一款名為Face2Face的應用,可實現實時的面部圖像轉換。2017年,一位名為Deepfake的用戶利用AI換臉技術將“神力女超人”Gal Gadot的臉“嫁接”到成人影片的角色上,引起軒然大波。代碼開源后,這個被統稱為DeepFake的技術開始流行。
國內的“AI換臉熱”則是從2019年Bilibili上出現的一段將94年版《射雕英雄傳》中朱茵飾演的黃蓉換成楊冪的視頻開始,當時微博話題#將朱茵的黃蓉換成楊冪的臉#閱讀量過億。雖然這段影片因侵犯肖像權而下架,卻無法阻擋AI換臉的熱潮。
2019年八月底,陌陌公司推出了主打AI換臉視頻制作的ZAO。這款應用支持用戶將自己的臉“移植”到明星demo身上,上線后便迅速成為蘋果App Store免費應用排行榜的第一名。
然而好景不常,上線不到一周,ZAO的運營方就因為用戶隱私協議不規范,存在數據泄露風險等網絡數據安全問題引發各界質疑,并被工信部約談,該應用也遭到下架。
最近,類似的故事再度上演。
上周,以“Ma-i-a hi~Ma-i-a hu~Ma-i-a ho~Ma-i-a ha-ha……”這段歡快、洗腦的旋律為背景音樂的短視頻在各大社交媒體上瘋狂刷屏。
網上流行的影片中,做出夸張表情、搖頭晃腦的有馬斯克、扎克伯格、巴菲特、馬云、馬化騰等商界大佬;陳奕迅、甄子丹、吳京、蔡卓妍、寧靜等一眾明星;甚至還包含蒙娜麗莎、貓貓狗狗等畫中人物及小動物。
制作出這款魔性特效,并讓這首2003年在羅馬尼亞發行的暢銷老歌《Dragostea Din Tei》再次傳遍世界的,是一款名為Avatarify的AI變臉軟件。
Avatarify起初是俄羅斯程序員Ali Aliev為了捉弄一起開視頻會議的同事而研發的玩笑之作。這款應用能將別人的照片“嫁接”到自己的臉上,還能藉由將靜止的人臉套入視頻demo,操縱照片中人物的表情,讓他們“動起來”,并生成短影片。
去年7月,Avatarify正式登上蘋果App Store。今年二月中旬,這款App在中國區的排名突然上升,并于二月二十五日超越微信、微博、抖音,成為IOS應用商店免費App下載排行榜第一名,且持續多天“霸榜”。
「智能相對論」看到,截至目前,應用這款App制作的特效在抖音話題#螞蟻呀嘿#中的視頻播放量超過27.8億次;微博的相關話題#螞蟻呀嘿視頻大賽#也達到4500萬閱讀量。作為Avatarify視頻制作輔助工具的“剪映”和“騰訊加速器”也隨著Avatarify的爆紅水漲船高,下載量也迅速攀升,在應用排行榜上名列前茅。
經歷了七天的爆紅后,現在,Avatarify已在App Store中國區遭到下架,官方并未說明下架原因。
即便ZAO和Avatarify曇花一現、DeepFake遭到美國國會限制,人類對“換臉”技術的熱忱仍持續上漲。畢竟,這類充滿話題的視頻所引起的“病毒式”傳播效應,對依附流量的影視創作、電商購物、短視頻社交產業而言,是絕佳的引流渠道。近年來,AI對“臉”的改造依然主要應用在社交娛樂場景。隨著相關技術的發展,各式各樣的換臉、造臉App和服務也層出不窮。
據「智能相對論」觀察,現有的AI換臉相關應用大致可分為三類:第一類是向騰訊“童話臉”、百度“人像漫畫化”等商業應用較為成熟的人臉“虛擬化”,即通過人臉識別、圖像生成技術,用戶的臉變成客制化的卡通動漫形象。
由于“卡通化”的形象娛樂性強,與真人差異較大、易于分辨,因此這類技術的爭議較小。大廠們面向B端出售這類技術服務,形成了按照使用量或不同功能付費的、較為成熟的商業模式。
第二類則是像Avatarify一樣,在人像臉上做出“幾可亂真”的表情與面部置換。 一般通過免費增值服務模式收費,或是作為引流手段吸引客群,引導用戶為其他功能付費。
例如由在線家譜公司MyHeritage開發的Deep Nostalgia(深度懷舊),便是一款具有“生成動態表情”功能的AI應用。這項服務能將靜態的舊照片制作成幾秒的小視頻,利用科技讓用戶觀看逝者栩栩如生的表情,希望能借此慰藉用戶對親人的思念之情。
想要讓靜止的照片動起來,需要先使用生成對抗網絡GAN對低頻圖像進行降噪、重建,補全圖像中有關高頻細節的內容,提高圖片的分辨率,使之變得清晰。現在的照片修復技術也是利用這類深度生成算法還原圖像細節,甚至連馬賽克的部份都能還原。
接下來,使用動作遷移算法,利用訓練過的AI模型實時提取視頻人物中的關鍵點,并為照片中的人臉標記上相應的關鍵點,再將二者對應,便能做到讓另一段影片中的人物動作遷移到照片中的人物上。
現在,MyHeritage公司的AI模塊已能在Twitter上使用,作為營銷手段引發Twitter用戶跟風懷舊。騰訊微視也曾上線“老照片竟然可以動起來”的功能,通過上傳照片,就能基于照片內容制作出一段動態影像,有如《哈利波特》中的魔法照片。
Bilibili和Youtube上也曾經出現利用AI技術讓杜甫、朱元璋、徐悲鴻、林黛玉、戴珍珠耳環的少女、蒙娜麗莎、維納斯等一系列畫作中的人像“動起來”的視頻與教程。國內也有up主利用百度飛槳的開源項目PaddleGAN和 DFDNet讓黑白人物照片“恢復色彩”并作出動態面部表情。
載舟亦能覆舟的DeepFake
無論是Avatarify、Deep Nostalgia還是ZAO,這些AI換臉應用惹人爭議的原因皆是由于DeepFake技術的以假亂真與面部識別帶來的個人隱私泄露及濫用。
自2014年生成式對抗網絡(GAN)出現至今,電腦圖像和影片合成技術不斷取得驚人效果。雖說技術是中立的,但從2017年Reddit用戶使用此技術來偽造神力女超人的色情影片開始,Deepfake造假逐漸滲透到政治、娛樂、傳媒等多個領域,甚至還對美國總統大選造成威脅。
據安全分析公司Sensity調查顯示,2018年12月以來,Deepfake偽造品數量逐年增長,約半年就增長一倍。截至2020年6月,造假影片多達49,081個,同比增長330%以上。其中,以色情影片占比最高,目標對象大多來自影視娛樂業、政治界與商業界。
去年,一名馬來西亞政治家因為一段涉嫌從事同性戀活動的影片而被判入獄,但后來證實影片為Deepfake偽造。雖然以這項技術為基礎制作的搞笑影片曾帶來一些歡樂,但就目前使用結果而言,Deepfake技術對人們的影響似乎是弊大于利。
因此,Facebook、Google、微軟等互聯網巨頭開始致力于開發與Deepfake抗衡的檢測技術。Facebook釋出有史以來最大的Deepfake數據庫,甚至舉辦了Deepfake偵測競賽(Deepfake Detection Challenge)。AI換臉相關的第三類應用——“假臉甄別”產品與API就此誕生。
由于肉眼已難以分辨較為成熟的Deepfake造假影片,要破解AI換臉技術還得依靠AI。已有的方法如檢測影片目標的心跳、血液流動等生物學信號,藉由分析該信號的殘差來確定真假,目前該方法的準確率已達到97.29%,同時還可以檢測背后所用的Deepfake模型。
國內大廠也紛紛推出此類應用,如百度大腦AI開放平臺推出的“人臉檢測”、“H5視頻活體檢測”、“在線活體檢測”API,具備人臉合成圖鑒別能力?;谏疃葘W習算法,可識別摩爾紋、成像畸形等圖像特征,防止靜態圖片、屏幕或視頻翻拍等作弊攻擊,提升業務安全性。目前此功能已廣泛應用于房產交易身份認證;保險投保、核保及理賠輔助核驗;運營商實名制開卡,汽車租賃等各種業務。
阿里安全圖靈實驗室也為此打造了基于多實例學習的檢測算法Sharp-MIL(S-MIL),只需視頻級別的標注,就能對deepfake作品進行檢測。
騰訊云AI視覺則推出AntiFakes假臉甄別技術,基于圖像算法和視覺AI,可對圖片或視頻中的人臉真偽進行檢測分析,鑒別圖片中的人臉是否為AI換臉算法、App所生成的假臉,最終對圖像或視頻的風險等級進行評估。
情緒辨識網絡(Emotion Recognition Network)也是測定方法之一,透過檢測臉部情緒是否與場景上下文或音訊內容相匹配,來確定影片真偽。其他還有對比人臉區域與背景區域,尋找微小差異以辨別真假的背景差異檢測;以及將假臉重新混入目標圖像或影片,以從中尋找邊界的人臉X 射線(Face X-ray)檢測。經過FaceForensics數據集上測試,人臉X 射線的精準度可達99% 以上。
雖然基于Deepfake的AI換臉技術可制造巨大流量,能作為不錯的營銷手段。在發展出相應的監管制度之前,這類無法確保用戶隱私數據安全的應用仍無法逃離下架的命運,反而為Deepfake防治軟件帶來許多商機。除了上述產品,還有Sensity、Deepware,以及微軟Video Authenticator等商業用的應用程序編程接口。
AI換臉技術可說是打開了潘多拉的魔盒,在為一些人帶來消遣的同時,也成為不法之徒傷害他人的工具。如何妥善運用這把雙面刃,在娛樂消遣和隱私安全中取得平衡,是人類在科技發展過程中必須面對的問題。
此內容為【智能相對論】原創,
僅代表個人觀點,未經授權,任何人不得以任何方式使用,包括轉載、摘編、復制或建立鏡像。
部分圖片來自網絡,且未核實版權歸屬,不作為商業用途,如有侵犯,請作者與我們聯系。
2024年11月,南方黑芝麻獲全球領先的新經濟產業第三方數據挖掘和分析機構iiMedia Resea...
叮當快藥董事長楊文龍表示:“我們希望通過與一心堂的戰略合作,實現線上線下優勢互補,攜手共創醫藥新零售...
近日,蘋果公司CEO蒂姆·庫克年內第三次來華訪問登上熱搜,他仍把供應鏈管理作為重點提及,強調中國市場...
面向未來,游族網絡將持續秉承“科技傳頌文明”之使命,不斷深化人工智能技術的應用,積極完善AI布局,推...
此活動在全國范圍內迅速掀起了一股強勁的法律知識普及浪潮,同時也開啟了智能法律服務體驗的全新風尚,讓民...
投資家網(www.51baobao.cn)是國內領先的資本與產業創新綜合服務平臺。為活躍于中國市場的VC/PE、上市公司、創業企業、地方政府等提供專業的第三方信息服務,包括行業媒體、智庫服務、會議服務及生態服務。長按右側二維碼添加"投資哥"可與小編深入交流,并可加入微信群參與官方活動,趕快行動吧。