文 | 趣解商業(yè)，作者 | 張語格

" 去年國慶假期，有人過了 7 天假，被我整整罵了 8 天。"

近日，雷軍在兩會(huì)期間提到自己去年被網(wǎng)友用 AI 換臉、擬聲，做各類視頻的 " 嘴替 " 和 " 臉替 "；雷軍直言，對(duì)于這些 " 盜版 " 雷軍，自己想通過法律維權(quán)，卻發(fā)現(xiàn)對(duì)此沒有專門的立法，只能用隱私權(quán)、肖像權(quán)、名譽(yù)權(quán)等法律起訴，而這些都要量化損失，因此深受其擾。

圖源：抖音截圖

如今社交平臺(tái) AI 視頻屢見不鮮，由 AI 生成的真人形象已經(jīng)到了以假亂真的程度，在各種各樣的 "AI 騙局 " 里，雷軍還不算最大的受害者；面對(duì)這些 "AI 真人 " 的誘導(dǎo)，照單全收的幾乎都是無防備心的中老年人。

01."AI 孫子 " 硬控老年人

" 我奶奶沉迷抖音上的假孫子以后，我就失寵了。" 陸俊（化名）的奶奶今年 79 歲，從春節(jié)開始每天都要看胖小孩短視頻，視頻里的胖小孩穿著小棉襖、小肚兜，每喊一句 " 奶奶 "，陸俊的奶奶都會(huì)大笑起來。

仔細(xì)看視頻里的胖小孩，皮膚光滑到有些失真，背景局部模糊，手指長短和擺放位置也不自然，AI 創(chuàng)作痕跡極重，是很多年輕人眼里的 " 一眼假 "。

然而，中老年人幾乎沒有識(shí)別 AI 創(chuàng)作的能力。陸俊不止一次提醒奶奶這是 " 假的 "，是 AI 生成的，有些視頻下方會(huì)有 AI 創(chuàng)作的提示，但奶奶都不以為意。陸俊對(duì)此也十分無奈，" 我第一次提醒奶奶的時(shí)候，她有點(diǎn)震驚，但之后還是繼續(xù)看，她并不在乎小孩是真的還是假的，只覺得能讓自己開心的就是好東西。"

"AI 寶寶 "，瞄準(zhǔn)的是中老年群體被忽視的情感需求。有些網(wǎng)友甚至將 AI 寶寶當(dāng)成了懷孕許愿池，希望自己的家人也能有一個(gè)視頻里這樣的寶寶，并紛紛在評(píng)論區(qū)留言 " 接寶寶 "。

如果單純只是把這當(dāng)作消遣也無妨，令人擔(dān)心的是，這些 AI 形象說的話，家里老人全都信。劉然（化名）的外公經(jīng)常往家族群里轉(zhuǎn)發(fā)一些養(yǎng)生專家的科普，有次劉然點(diǎn)開看才發(fā)現(xiàn)，外公嘴里的專家其實(shí)是 AI 創(chuàng)作的數(shù)字人。

劉然醫(yī)學(xué)專業(yè)畢業(yè)，今年已經(jīng)是腎科博士學(xué)位在讀，但外公提到養(yǎng)生治病相關(guān)的話題還是會(huì)跟他抬杠。比起自己的親外孫，外公更相信短視頻里的數(shù)字人 " 專家 "，即使這個(gè)賬號(hào)里的專家并沒有任何權(quán)威認(rèn)證。

在很多年輕人看來，家里長輩信任數(shù)字人和當(dāng)初沉迷 " 反智營銷號(hào) " 一樣令人費(fèi)解。劉然對(duì)此非常無奈，外公當(dāng)初也是讀過大學(xué)的，" 網(wǎng)上所謂的‘老師’和‘專家’隨口說幾句，他們就覺得是真理，卻不愿意聽一聽身邊親人的實(shí)話。"

" 趣解商業(yè) " 觀察到，如今社交平臺(tái)上充斥著針對(duì)中老年群體的 AI 賬號(hào)，這些賬號(hào)的視頻內(nèi)容，大多是由 AI 生成的真人形象，通過套近乎、講哲理等 " 話術(shù) "，吸引中老年人的關(guān)注和信任；有些 AI 賬號(hào)，已經(jīng)靠這份 " 信任 " 通過櫥窗帶貨賺起了第一桶金。

圖源：視頻號(hào)截圖

例如上圖中的視頻號(hào) " · 古元 · "，瞄準(zhǔn)的就是渴望關(guān)懷的高齡女性。視頻大多以 " 我的寶貝姐姐開頭 "，發(fā)布的視頻大多圍繞老年女性的生活常態(tài)展開，" 我發(fā)覺姐姐近來面容憔悴，弟弟跑了好多地方，找到這款面霜特別適合姐姐 "，隨后引導(dǎo)用戶點(diǎn)擊主頁關(guān)注、下單。

雖然該賬號(hào)發(fā)布視頻數(shù)量不多，但櫥窗商品的銷量已突破三位數(shù)；評(píng)論區(qū)大多是對(duì)被視頻里 " 男人 " 溫柔話語打動(dòng)的用戶。

事實(shí)上，養(yǎng)生、情感內(nèi)容一直是 " 收割 " 老年人的重災(zāi)區(qū)，被騙的人通常與受教育程度無關(guān)，而是沉迷視頻帶來的情緒價(jià)值。

據(jù) " 藍(lán)鯨新聞 " 此前報(bào)道，收割老人的數(shù)字人視頻如今已經(jīng)發(fā)展成一條灰色產(chǎn)業(yè)鏈。市面上涌現(xiàn)出制作數(shù)字人的外包公司，服務(wù)價(jià)格在 5000-10000 元不等。商家會(huì)幫助客戶搭建數(shù)字人形象，指導(dǎo)運(yùn)營賬號(hào)。

很多 AI 賬號(hào)是利用老年人的同理心賣貨，但值得注意的是，隨著技術(shù)的快速迭代，針對(duì)中老年的 AI 換臉的詐騙案也開始頻繁出現(xiàn)。

兩會(huì)期間，除了雷軍吐槽自己被做成 AI，政協(xié)委員靳東也提到了 AI 換臉的危害，他表示，一些喜歡我影視劇的觀眾，被 AI 換臉視頻騙得很慘。

圖源：視頻截圖

據(jù) " 趣解商業(yè) " 了解，去年，就曾有一位江西老人被換臉視頻蒙蔽，要貸款 200 萬給網(wǎng)戀男友 " 靳東 " 拍戲。

02.AI 發(fā)展和治理 " 兩手抓 "

人們警惕提高的速度，跟不上技術(shù)進(jìn)步的速度；不僅老年人，有一定科技閱歷的年輕人也深受 AI 造假的迫害。

據(jù)《北京商報(bào)》報(bào)道，2024 年 2 月有詐騙犯運(yùn)用 Deepfake 深度偽造技術(shù)，制作出公司高層發(fā)言視頻，誘導(dǎo)職員先后 15 次將 2 億港元轉(zhuǎn)至指定賬戶。

除此之外，還有用 AI 換臉真人制作色情影片、盜刷醫(yī)保的違法案例。

杭州曾有人通過 AI 換臉偽造女明星涉黃視頻，甚至還組建群聊，滿足定制換臉色情影片的需求，根據(jù)時(shí)長、視頻難度收取相應(yīng)的費(fèi)用，杭州蕭山檢察最終在該群內(nèi)查獲的淫穢視頻高達(dá) 1200 余部。

圖源：央視新聞截圖

AI 讓造假越來越容易。詐騙能根據(jù)后果量刑，但想要根除互聯(lián)網(wǎng)上 AI 虛假信息卻并不容易。

在去年底的西藏定日發(fā)生地震后，一張 " 小男孩被埋 " 的圖片在社交媒體上瘋狂流傳，但最后被證實(shí)是 AI 生成；今年 1 月洛杉磯爆發(fā)山火，好萊塢標(biāo)志牌著火的照片，在國內(nèi)外社交平臺(tái)上瘋傳，隨州這張照片也被官方媒體辟謠說是由 AI 偽造。令人憂慮的是，在官方辟謠定論之后，至今仍有不少網(wǎng)友將這些 AI 圖片當(dāng)作真實(shí)照片。

圖源：微博截圖

無底線造假必然要付出代價(jià)。北京周泰律師事務(wù)所張子航律師表示，在公共事件中，故意歪曲事實(shí)，用 AI 或者其他技術(shù)手段制作圖片、視頻，并在社交平臺(tái)傳播造成負(fù)面影響的，首先要追究的是制作者的責(zé)任，制作者面臨的可能是行政責(zé)任，也可能是刑事責(zé)任。此外，發(fā)布虛假信息的社交平臺(tái)，也有可能要承擔(dān)法律責(zé)任。

"AI 安全 " 同樣也是今年的兩會(huì)熱詞。全國政協(xié)委員、奇安信科技集團(tuán)董事長齊向東提議，針對(duì)人工智能安全問題，要從技術(shù)保障、制度保障、成果應(yīng)用三方面入手，系統(tǒng)提升安全能力。

全國政協(xié)委員、360 集團(tuán)創(chuàng)始人周鴻祎認(rèn)為，傳統(tǒng)網(wǎng)絡(luò)安全的解題方法解決不了人工智能的安全問題。智能體的安全、知識(shí)數(shù)據(jù)的安全、客戶端的安全、基座模型的安全，構(gòu)成人工智能安全的新領(lǐng)域。他建議，應(yīng)由既懂安全又懂 AI 的企業(yè)牽頭，以模制模，通過打造安全大模型來解決大模型的應(yīng)用安全問題。

如今，各平臺(tái)都在加強(qiáng)對(duì) AI 內(nèi)容的治理。抖音、視頻號(hào)、小紅書等都推出了針對(duì) AI 治理的管理政策。" 趣解商業(yè) " 了解到，騰訊等互聯(lián)網(wǎng)公司已經(jīng)在研究檢測 AIGC 的第三方工具，這些工具根據(jù)相似檢索、內(nèi)容檢測和水印追溯等方法，支持文本、圖片等 AI 生成內(nèi)容的檢測。

在頭部互聯(lián)網(wǎng)公司從事 AI 研究的 Lisa 表示，如今生成內(nèi)容越來越逼真，真實(shí)圖片與生成圖片的特征差異越來越小，檢測工具的模型學(xué)習(xí)難度其實(shí)也在增加。

想要減少被 AI 蒙騙的發(fā)生，需要平臺(tái)監(jiān)管、用戶意識(shí)提高以及相關(guān)法律法規(guī)完善等多方合力。

2024 年 9 月 14 日，國家互聯(lián)網(wǎng)信息辦公室發(fā)布了《人工智能生成合成內(nèi)容標(biāo)識(shí)辦法（征求意見稿）》公開征求意見的通知，以規(guī)范人工智能生成合成內(nèi)容標(biāo)識(shí)，維護(hù)國家安全和社會(huì)公共利益，保護(hù)公民、法人和其他組織的合法權(quán)益。多項(xiàng)規(guī)定和監(jiān)管政策的相繼落地，讓剛性治理有了更多具體的抓手。

新的技術(shù)進(jìn)步呼吁新的監(jiān)管體系，而這一點(diǎn)并不能完全指望科技商業(yè)公司的自我約束，需要監(jiān)管方、平臺(tái)方的共同努力。盡管 AI 的應(yīng)用范圍廣泛且難以限定，但法律和道德的邊界始終清晰；未來，政策監(jiān)管和平臺(tái)審核的力度必然會(huì)更加深入，社交平臺(tái)上的內(nèi)容生態(tài)還會(huì)因此發(fā)生哪些改變，值得進(jìn)一步關(guān)注。