作 者丨耿康祁

華商韜略出品丨ID：hstl8888

" 人工智能之父 " 杰弗里 · 欣頓做了個末日預言：

(資料圖片僅供參考)

人工智能可能對人類構(gòu)成巨大威脅，因為 " 很難找到防止壞人用它做壞事的方法 "。

不幸的是，掌握人工智能的壞人，越來越多了。

4 月 20 日 11 時 40 分左右，福州市某科技公司法人代表郭先生，遭遇了一場高端騙局。

一位好友，突然打了個微信視頻：

" 老郭，我一個朋友在外地競標，需要 430 萬保證金。你看看能不能先走你的公司賬戶，幫忙過個賬？"

好友說錢已打過來，還發(fā)了銀行轉(zhuǎn)賬底單截圖。因為是視頻聊天，郭先生就沒核實錢是否到賬，直接給對方賬戶轉(zhuǎn)了 430 萬。

事后，郭先生給好友打了電話，稱 " 事情辦妥了 "，對方卻十分驚訝，回應完全沒有這回事。

9 分鐘，430 萬沒了！坑了郭先生的，是一起典型的 AI 詐騙。

這個騙局分三步：

1，不法分子用 AI 機器人騷擾電話，獲取目標的聲音素材，然后進行聲音偽造；

2，盜取目標的社交賬號，尋找受害人；

3，用 AI 換臉技術(shù)，和受害人視頻通話，博取信任，實施詐騙。

這個詐騙手段環(huán)環(huán)相扣、用時短、難防范。它標志著詐騙犯罪的升級，進入了 AI 智能化、定制化的時代。

傳統(tǒng)互聯(lián)網(wǎng) " 發(fā)個語音 "、" 打個視頻 " 的防詐手段，在 AI 詐騙面前基本失效。更可怕的是，掌握 AI 詐騙的騙子，越來越多了！

公開信息顯示，自 2021 年以來多個省份都出現(xiàn)了 AI 詐騙及不當牟利案件。中國互聯(lián)網(wǎng)協(xié)會 5 月 24 日稱，利用 "AI 換臉 ""AI 換聲 " 等進行詐騙、誹謗的違法行為屢見不鮮。

AI 詐騙不只盯著數(shù)百萬的 " 肥肉 "，幾千元的 " 蒼蠅肉 " 也來者不拒。假扮大學同學、親戚、供貨商等視頻借錢案件，層出不窮。

如果覺得從不借錢便不會中招，就太天真了。

當騙子偽裝成領(lǐng)導，以匯款、資金周轉(zhuǎn)等緊急理由，要求下屬立即轉(zhuǎn)賬，很少有人能頂住壓力。更有甚者，騙子直接偽造子女、父母車禍入院等借口，利用親人感情實施欺詐。

2006 年，搞了 20 多年的中國臺灣詐騙集團，把目光投向互聯(lián)網(wǎng)普及不久的大陸。他們在東南亞等國家建立詐騙基地，招募員工進行人設(shè)、話術(shù)包裝的統(tǒng)一培訓。

最終，誘導戀愛或裸聊的 " 殺豬盤 "、非法買彩票、網(wǎng)上賭場、借貸騙局等發(fā)明，開始橫掃內(nèi)地。

電信詐騙，由此成了懸在 14 億人頭頂?shù)囊话牙小Ｉ踔劣腥藨蚍Q，從未接到過詐騙電話的，都有可以去買彩票的運氣。

不過，大部分人仍對電信詐騙，沒太大概念。傳統(tǒng)認知里，其受騙對象多是經(jīng)不起誘惑、社會經(jīng)驗少的 " 冤大頭 "，以及一些不常上網(wǎng)的老年人。

比如上世紀 80 年代最知名的尼日利亞王子來信，以及最近令人笑掉大牙的 " 上門槍斃 " 通知短信。這些夸張劇本，似乎只為篩選那些 " 缺乏基本辨識能力 " 的群體。

但正如微博大 V@全民防詐騙所說：" 你目前還沒被騙，并不是因為你多聰明，也不是因為你沒錢，而是適合你的‘劇本‘還在路上。"

只要給幾張照片和幾秒語音，就能復刻出 " 假人 " 的 AI 詐騙，以細思極恐的手段，讓每個人都可能難逃一劫。

據(jù)湖北網(wǎng)警巡查執(zhí)法公布消息，AI 技術(shù)新騙局詐騙成功率竟接近 100%，其成功率之高、涉案金額之大、詐騙速度之快令人咋舌。

比如安徽安慶經(jīng)開區(qū)發(fā)生的一起 AI 詐騙案中，詐騙分子只用一段 9 秒智能 AI 換臉視頻佯裝 " 熟人 "，就順利從受害人手上騙走 245 萬元。

更令人毛骨悚然的是，信息泄露、隱私不安全的普遍現(xiàn)實，為 AI 詐騙造就了 " 天然溫床 "。

2 月 15 日，一則 " 幾乎無人幸免，疑似 45 億條電商或快遞信息泄露 " 的消息，沖上熱搜。有網(wǎng)友稱，" 自己 10 年前的收貨信息，都被扒出來了。"

對此，人們?nèi)滩蛔⊥虏鄣溃? 要有多強的防范意識，才能想到跟你視頻通話的親友，不是一個大活人啊？要有多強的隱私意識，才能保證自己信息不泄露或被竊取？"

AI 詐騙的降維打擊，也引發(fā)了社會的廣泛關(guān)注和部分恐慌情緒。"AI 詐騙在全國爆發(fā) " 的話題，一度登頂熱搜，引爆超 2 億閱讀。

隨即，公安部門專門進行了辟謠，稱 AI 詐騙案件目前占比仍較低。同時，承諾已注意到此犯罪新手法，并將加大力度開展技術(shù)反制和防范宣傳。

數(shù)據(jù)顯示，公安機關(guān) 2022 年全年破獲電信網(wǎng)絡(luò)詐騙案件 46.4 萬起，緊急攔截涉案資金 3180 余億元。從詐騙案件量級及涉案金額來看，其仍然是一塊社會 " 頑疾 "。

一個悲觀預期是，新型 AI 詐騙的降臨及加速迭代，可能讓 " 人人警惕，全民反詐 "，成為未來社會不得不面對的嚴峻問題之一。

4 月末的一天，美國一位叫詹妮弗 · 德斯特凡諾的母親接到一通陌生電話。

" 媽媽，救命！" 大女兒布里安娜，似乎陷入了大麻煩。

詹妮弗嚇呆了，一個低沉的男人聲音威脅到：" 如果你打電話報警，就永遠別想再見到她了！"

掛斷后，身邊朋友勸她報警。詹妮弗卻急著給贖金，因為 " 女兒 " 的哭泣聲實在太真實且撕心裂肺。幸運的是，女兒正好打來電話，騙局 " 不攻自破 "。

但心有余悸的詹妮弗，仍無比驚訝：" 就算隔一棟樓，我也不會認錯自己孩子的哭泣聲。"

詹妮弗絕對想不到，突飛猛進的 AI 技術(shù)，早已比一個母親更了解自己的孩子。而騙子支付的代價，可能還不到每月 5 美元。

2017 年，名為 "Deepfakes" 的社交網(wǎng)站用戶，利用 AI 技術(shù)發(fā)布了將色情演員換臉成蓋爾 · 加朵、泰勒 · 斯威夫特、斯嘉麗 · 約翰遜等名人的視頻片段，引發(fā)軒然大波。

此后，AI 換聲及換臉技術(shù)進入大眾視野，并被稱為 " 深度偽造 "（Deepfake）。

2018 年，美國不法分子還主要通過使用非法機器人呼叫，偽裝成慈善機構(gòu)或谷歌數(shù)據(jù)服務代理，進行詐騙。

但機器人語音系統(tǒng)，往往存在卡頓、音色機械化、多輪對話 " 鬼打墻 " 等問題，" 唬人 " 能力有限。

此后，AI 換聲迅猛發(fā)展到克隆級別。2019 年 3 月，一詐騙犯冒充一家英國能源公司大老板，強勢要求公司 CEO 立即將 22 萬歐元，轉(zhuǎn)到匈牙利的供應商銀行賬戶。

這位高管毫不猶豫照做了，因為大老板的語調(diào)一如平時，甚至連他 " 微妙的德國口音 " 也毫無破綻。這一事件，被認為是全球首例涉及人工智能的詐騙案。

其實，AI 技術(shù)流行的美國、歐洲等發(fā)達國家，AI 詐騙也早已一馬當先。

過去一年里，美國 AI 詐騙同比上漲了 50% 到 75%。美國聯(lián)邦調(diào)查局年度報告顯示，2022 年美國網(wǎng)絡(luò)詐騙損失達 103 億美元，創(chuàng)五年來新高，面向老年人的 AI 語音騙局則是重災區(qū)。

世界經(jīng)濟論壇研究與分析主管布魯內(nèi)曼稱，" 在過去一年里，26% 的小公司和 38% 的大公司經(jīng)歷過深度偽造欺詐 "。她甚至預測到 2026 年，超 90% 的網(wǎng)絡(luò)攻擊內(nèi)容都將是 AI 合成。

AI 技術(shù)快速升級，不僅讓換聲、換臉越來越以假亂真。相應的，AI 詐騙技術(shù)的門檻和成本，卻在不斷降低。

美國加州大學伯克利分校教授法里德表示，AI 聲音合成一兩年前還需要大量音頻數(shù)據(jù)，現(xiàn)在僅需十幾秒的短視頻或錄音。收集人臉信息則更簡單，一張照片就可實現(xiàn)。

相應的 AI 程序使用費，卻僅需每月 5 美元到數(shù)百美元不等。恐怖的是，任何人都能由此進行不法活動。

AI 詐騙受害對象從老年人到精英人群，從普通人到明星偶像無所不包，甚至章程規(guī)范的商業(yè)公司、學校機構(gòu)，也極易中招。

智能化程度更高的 AI 技術(shù)，還使得騙局變得花樣更多、更難防范。

通過信息收集及大數(shù)據(jù)分析，AI 可以智能篩選出 " 易騙人群 "。比如進行金融詐騙時，經(jīng)常搜集投資信息的人群會成為潛在目標。

甚至，AI 還能分析目標的社交網(wǎng)絡(luò)，進而掌握其個性化表達方式、人際關(guān)系、興趣愛好等生活習慣，實現(xiàn) " 詐騙劇本 " 定制化。

法里德驚呼：" 這很可怕，就像一場完美的風暴，具備了釀成大禍的所有條件。"

更可怕的是，盡管風險顯而易見，AI 語音及視頻合成技術(shù)卻仍在狂奔。科技巨頭的 AI 競賽，也在持續(xù)加碼。

今年 1 月，微軟團隊發(fā)布了 AI 語音合成模型 VALL-E。只需 3 秒指定素材，即可精確地模擬說話者聲音，甚至連環(huán)境背景音也能準確還原。

AI 簽名、AI 聲音克隆、AI 換臉……這些新技術(shù)，本來是創(chuàng)造美好和便利的象征。

但當這類高端技術(shù)變得廉價且輕易獲取，并被不法分子惡意利用時，無數(shù)人和機構(gòu)的財產(chǎn)、信息及現(xiàn)實安全卻形同 " 裸奔 "，又會是多么巨大的風險？

全球大爆發(fā)的 AI 詐騙，無疑給人類敲響了警鐘。

" 現(xiàn)在已經(jīng)到了，大規(guī)模、集中化討論 AI 風險的關(guān)鍵時刻 "，清華大學教授沈陽如此呼吁。

其實，對 AI 詐騙的警惕與治理方案，早已在路上。

美國安全中心發(fā)布的《人工智能與國家安全》，明確將人工智能偽造技術(shù)列為威脅國家安全的重點技術(shù)。中國也開始通過政策管理和技術(shù)限制等途徑，來應對其潛在安全風險。

但 AI 詐騙，似乎是打不死的 " 小強 "。

比如美國聯(lián)邦貿(mào)易委員會近年來加強了對非法機器人電話的監(jiān)管行動，但數(shù)據(jù)顯示，2019 年美國境內(nèi)民眾接到的 " 機器人騷擾電話 " 總數(shù)超過 500 億個，即平均每個美國人每月至少接到 15 個 " 機器人騷擾電話 "。

一個怪圈出現(xiàn)了——美國不斷升級法案打擊電信詐騙，機器人來電數(shù)量卻屢創(chuàng)歷史新高。

根本原因，還是法律法規(guī)制定、推廣的護欄建設(shè)速度，趕不上 AI 技術(shù)迭代和傳播速度。產(chǎn)業(yè)、大眾對 AI 危害的反應，也很容易慢半拍。

甚至于，AI 騙局已經(jīng)超出 " 詐騙 " 范疇，蔓延到人類社會的各個角落。

3 月份，一組由 Midjourney 生成的特朗普 " 被捕照 " 傳遍全球。一覺醒來，人們看著這位美國前總統(tǒng)被警察包圍并按倒在地的狼狽狀態(tài)，深感不可思議。

但這，不過是一網(wǎng)站創(chuàng)始人艾略特 · 希金斯精心制作的 "AI 假照片 "。盡管他的賬號被查封，人們當時無比真實的震撼和驚訝，卻因此成為 " 笑話 "。

這更像是，AI 騙局對人類分辨能力和真實情感的 " 嘲弄 "。很快，人們又經(jīng)歷了更嚴重的被戲耍。

5 月 22 日，一張五角大樓附近發(fā)生爆炸的照片，廣泛流傳。這張?zhí)摷僬掌某鋈Γ踔翆е聵似?500 指數(shù)瞬間從漲轉(zhuǎn)跌。

在國內(nèi)，假新聞、假圖片案件也甚囂塵上。

5 月 7 日，甘肅省平?jīng)鍪泄簿志W(wǎng)安大隊成功破獲了一起 AI 造假案件。不法分子利用 ChatGPT，偽造了一條 " 今晨甘肅一列火車撞上修路工人，導致 9 人死亡 " 的虛假新聞，即刻獲得超 1.5 萬次點擊量。

5 月 24 日，科大訊飛受一篇名為《科大訊飛出現(xiàn)重大風險的警示文》的文章影響，股價也迅速跳水。公司緊急回應稱，股價下跌系某生成式 AI 寫作虛假 " 小作文 " 導致。

人們越來越驚恐地發(fā)現(xiàn)，自己被 AI 置身于一個 " 沒有真相的時代 "。

造假，甚至成為某種普遍且必要的 " 謀生手段 "。一項國外調(diào)查報告指出，全是由 AI 生成的假新聞網(wǎng)站已有 49 家之多。且這些信息受眾并不少，粉絲大多超 10 萬量級。

無處不在的造假熱潮，更讓無論是普通人還是明星都難以阻擋。

一邊是，幾十元的 "AI 換臉教程 " 大行其道；一邊是，在地鐵上被 "AI 一鍵脫衣 " 造謠的女性，無力申訴。偽裝成 " 楊冪 "" 迪麗熱巴 "" 成龍 " 等明星的直播帶貨，更肆忌憚。

面對鋪天蓋地的 "AI 孫燕姿 " 合成視頻，佛系的孫燕姿無奈表示，" 你跟一個每幾分鐘就推出一張新專輯的‘人’，還有什么好爭的？"

真相被 " 捏造 " 已經(jīng)夠可怕，人們無力分辨則讓現(xiàn)實變得愈發(fā)混亂。

4 月 13 日索尼世界攝影獎頒獎禮，大獎得主卻沖上舞臺奪過話筒，悲憤地說這是 AI 偽作。他的反問發(fā)人深思，" 如果索尼世界攝影獎的評委都分不清真假照片，其他人還能怎么辦？"

當 AI 騙局從專業(yè)級走向 " 平民化 "，熟悉的親友、日常的新聞、權(quán)威的知識、眼見為實的原則甚至是集體記憶等，原本刻在骨子里的 " 確信 " 都在被逐一顛覆。

AI 監(jiān)管，由此愈加任重道遠。畢竟人類不能沒有真相，就像時鐘不能沒有指針。

[ 1 ] 《AI 換臉風暴：騙局、產(chǎn)業(yè)與技術(shù)防守》36 氪

[ 2 ] 《"AI 換臉 " 詐騙，怎么防？》人民日報

[ 3 ] 《警惕！美國發(fā)生多起 AI 語音詐騙案件，聯(lián)邦機構(gòu)將加強監(jiān)管》第一財經(jīng)