大數(shù)據(jù)文摘出品

作者：Caleb

在線工作正在逐漸正式進(jìn)入我們的生活。

根據(jù)數(shù)據(jù)公司 Emsi Burning Glass 統(tǒng)計(jì)，2020 年初紐約全市 16 萬 3000 個(gè)招聘崗位中，只有 6700 個(gè)允許在線工作，占總崗位數(shù)量的4%；但到去年 12 月，全市 24 萬 3000 個(gè)招聘崗位中，在線工作的崗位數(shù)量增至 2 萬 5800 個(gè)，已占到總崗位數(shù)量的10.6%。

不過俗話說得好，人心隔肚皮，更何況現(xiàn)在還多隔了一層屏幕，誰也保不準(zhǔn)Neso 事件不會(huì)再次發(fā)生。

這不，最近根據(jù)美國聯(lián)邦調(diào)查局調(diào)查，越來越多的人正在竊取別人的個(gè)人身份信息，以及利用 deepfake 來申請(qǐng)遠(yuǎn)程工作崗位。也正是由于 deepfake 技術(shù)使用人工智能或機(jī)器學(xué)習(xí)來生成圖像、視頻或音頻等內(nèi)容，其很難與真實(shí)材料區(qū)分開來。

比如，根據(jù)外媒報(bào)道，有位詐騙者一直遠(yuǎn)程工作的求職過程中借助了 deepfake，以試圖進(jìn)入 IT 工作，訪問他們的客戶或財(cái)務(wù)數(shù)據(jù)，以及企業(yè) IT 數(shù)據(jù)和專業(yè)信息等。

無獨(dú)有偶，根據(jù)其他公司爆料，有些求職者的個(gè)人信息更是完全屬于另外一個(gè)人。

視頻語音都被 deepfake，識(shí)破他們到底難不難？

6 月 28 日，F(xiàn)BI 網(wǎng)絡(luò)犯罪投訴中心在一次公共咨詢中表示，最近有關(guān)被冒充求職的投訴案件數(shù)量增加。詐騙者一直利用 deepfake 技術(shù)以及從受害者那里盜取的個(gè)人身份信息，騙過雇主雇傭他們進(jìn)行遠(yuǎn)程或居家辦公工作。

這些工作涉及到IT、計(jì)算機(jī)編程、數(shù)據(jù)庫以及軟件相關(guān)的職位。

deepfake 實(shí)現(xiàn)的身份偽裝往往難辨真?zhèn)危p騙者也就能夠從公司內(nèi)部竊取有價(jià)值的詳細(xì)信息，以及實(shí)施其他身份欺詐計(jì)劃。

甚至根據(jù)聯(lián)邦執(zhí)法機(jī)構(gòu)補(bǔ)，在調(diào)查過程中，他們還發(fā)現(xiàn)了在線面試中使用面試者的語音也經(jīng)過了 deepfake 偽造。

目前尚不清楚有多少人利用這種方式成功入職，被舉報(bào)的在其中占了多少。

要識(shí)別 deepfake 也并非完全不可能。聯(lián)邦調(diào)查局表示，雇主可以通過某種方式來檢測深度偽造。在日常工作中，員工們?nèi)匀恍枰獣r(shí)不時(shí)地與雇主進(jìn)行視頻以匯報(bào)工作進(jìn)度等，當(dāng)他們開口說話時(shí)，也就是缺陷顯露之時(shí)。

" 在鏡頭前，如果接受采訪的人的動(dòng)作和嘴唇運(yùn)動(dòng)與聲音無法完全保持同步 "，" 比如突然的咳嗽、打噴嚏或其他聽覺行為與視覺呈現(xiàn)的內(nèi)容不一致"，那往往就是識(shí)破 deepfake 的關(guān)鍵。

但是真正要去識(shí)破 deepfake 并沒有那么容易，尤其是在你不特別去注意的情況下。根據(jù)卡內(nèi)基梅隆大學(xué)研究人員最近的一份報(bào)告，旨在檢測被篡改的視頻的人工智能的準(zhǔn)確率可能在30% 到 97%之間，人類有辦法檢測出假視頻，特別是一旦他們被訓(xùn)練成能夠觀察到某些視覺故障，如影子不正常或皮膚紋理有問題等。

deepfake 用得怎么樣，還得看人

deepfake 用得好不好，到底是不是用在了 " 刀刃 " 上，還得看人。

2021 年，前披頭士成員 Paul McCartney 就利用 deepfake 技術(shù)讓自己 " 重返青春 "。在與 Beck 合作的 MV 中，觀眾看到的是一個(gè)年輕的、靈活的、歲月沒有在他身上留下任何痕跡的 McCartney。

上個(gè)月馬斯克也被 deepfake 了一把。

在 TED 主席 " 克里斯 · 安德森 " 采訪馬斯克的這段視頻中，馬斯克表示，一個(gè)名為 BitVex 的加密貨幣交易平臺(tái)是他自己創(chuàng)建的，并承諾在三個(gè)月內(nèi)，任何加密貨幣存款每天都有 30% 的回報(bào)率。

deepfake 也有做好事的時(shí)候。

最近，在荷蘭一項(xiàng)重啟調(diào)查的案件中，為了找到 13 歲的 Sedar Soares 和朋友們一起扔雪球時(shí)被槍殺的真相，在 Sedar Soares 家人的允許下，警方利用 deepfake 制作了一個(gè) Sedar Soares 的視頻，以此向公眾征集線索，尋找目擊證人。在這一分鐘長的視頻中出現(xiàn)了 Soares 的生活圖像，他向攝像機(jī)打招呼并撿起一個(gè)足球。就在視頻發(fā)布的第二天，荷蘭鹿特丹警方發(fā)言人 Lillian van Duijvenbode 說 : " 我們已經(jīng)收到了數(shù)十條線索，這一事實(shí)非常積極。"

還是那句話，技術(shù)的價(jià)值取向取決于使用該技術(shù)的人。

鍛煉自己的 deepfake 識(shí)別能力

作為一種 AI 深度學(xué)習(xí)工具，deepfake 能夠?qū)⒁粡垐D片中人的臉換到其他人的圖片上的技術(shù)，從而創(chuàng)建一個(gè)非常逼真的 " 假 " 視頻或圖片，" 換臉 " 因此得名。

研究人員使用自動(dòng)編碼器神經(jīng)結(jié)構(gòu)，使這一想法成為現(xiàn)實(shí)。基本思路非常簡單：對(duì)于每張臉都訓(xùn)練一套編碼器和相應(yīng)的解碼神經(jīng)網(wǎng)絡(luò)。編碼時(shí)，使用的是第一個(gè)人的圖片。而解碼時(shí)，卻是使用第二個(gè)人解碼器。

為了幫助人們更好地識(shí)破 deepfake 騙局，研究人員也從 Kaggle 公開比賽中托管的100,000個(gè) deepfake 視頻和19,154 個(gè)真視頻中，訓(xùn)練了一系列神經(jīng)網(wǎng)絡(luò)來檢測 deepfake。

總的來說，沒有完全絕對(duì)的方法來幫助識(shí)別，但在 deepfake 中有幾個(gè)點(diǎn)是值得注意的：

注意臉部：高端的 DeepFake 操縱幾乎都是基于面部的；

注意臉頰和額頭：皮膚是否顯得太光滑或太有皺紋？皮膚老化程度是否與頭發(fā)和眼睛老化程度一致？deepfake 在某些方面往往是不協(xié)調(diào)的；

注意眼睛和眉毛：陰影的位置是否正確？deepfake 通常無法完全正確地復(fù)制出自然物理學(xué)的場景；

注意眼鏡：是否存在任何眩光？是否存在太多眩光？當(dāng)人移動(dòng)時(shí)，眩光的角度是否改變？再一次，DeepFakes 常常不能完全代表照明的自然物理學(xué)；

注意面部毛發(fā)或缺乏毛發(fā)的情況：面部毛發(fā)看起來是否真實(shí)？deepfake 可能會(huì)添加或去除胡子、鬢角或胡須，但這樣的行為往往會(huì)帶來違和感；

注意面部的痣：痣看起來真實(shí)嗎；

注意眨眼：這個(gè)人的眨眼次數(shù)是否足夠或過多；

注意嘴唇的大小和顏色：大小和顏色是否與此人面部的其他部分相匹配。

這八個(gè)問題都能幫助人們檢查并識(shí)別 deepfake。

高質(zhì)量的 deepfake 并不容易辨別，但通過練習(xí)，人們可以建立起一種基于 deepfake 的真假的直覺，相信直覺，并加以適當(dāng)?shù)妮o助驗(yàn)證即可。