">
首頁|必讀|視頻|專訪|運(yùn)營(yíng)|制造|監(jiān)管|大數(shù)據(jù)|物聯(lián)網(wǎng)|量子|低空經(jīng)濟(jì)|智能汽車|特約記者
手機(jī)|互聯(lián)網(wǎng)|IT|5G|光通信|人工智能|云計(jì)算|芯片|報(bào)告|智慧城市|移動(dòng)互聯(lián)網(wǎng)|會(huì)展
首頁 >> 人工智能 >> 正文

技術(shù)滲透帶來的新型欺詐:AI換臉/語音克隆能不能治?

2025年3月12日 07:10  CCTIME飛象網(wǎng)  作 者:遠(yuǎn)山

飛象原創(chuàng)(遠(yuǎn)山/文)當(dāng)一段視頻通話中的領(lǐng)導(dǎo)以急事為由要求轉(zhuǎn)賬,當(dāng)社交媒體上突然出現(xiàn)明星代言的虛假廣告,當(dāng)父母收到子女聲淚俱下的求助語音……這些看似荒誕的場(chǎng)景,正隨著AI換臉與語音克隆技術(shù)的普及,成為新型犯罪的溫床。

技術(shù)的光影之下,人性的貪婪與法律的滯后交織成一張復(fù)雜的網(wǎng),既時(shí)刻威脅著個(gè)體的權(quán)益,同時(shí)也拷問著社會(huì)治理的智慧。

技術(shù)濫用的現(xiàn)實(shí)圖景:從個(gè)案到現(xiàn)象

2025年春節(jié)前夕,西安市雁塔區(qū)法院審理的一起案件引發(fā)關(guān)注。某公司未經(jīng)授權(quán)使用AI換臉技術(shù),將一名女演員的肖像嫁接至帶貨視頻中,誤導(dǎo)消費(fèi)者認(rèn)為其與商品存在代言關(guān)系。法院最終判決該公司賠償經(jīng)濟(jì)損失并公開道歉。

這僅是冰山一角。更惡劣的案例中,杭州的虞某利用AI換臉制作并傳播淫穢視頻,非法牟利超百萬元,最終被判處七年三個(gè)月有期徒刑。

技術(shù)的易得性與犯罪的低成本形成鮮明對(duì)比——廣州南沙區(qū)法院2024年判決的一起案件中,五名被告人僅憑購買教程和開源軟件,便搭建起一條通過偽造人臉識(shí)別視頻非法修改系統(tǒng)數(shù)據(jù)的黑色產(chǎn)業(yè)鏈,涉案金額高達(dá)120萬元。

而更具迷惑性的,是技術(shù)對(duì)人際信任的瓦解。天津市民李先生接到領(lǐng)導(dǎo)視頻電話,畫面中對(duì)方神態(tài)自若,聲音與慣常無異。在眼見為實(shí)的心理暗示下,他分三次轉(zhuǎn)賬95萬元,直到次日當(dāng)面確認(rèn)才知受騙。

類似案件中,江西一位老人甚至因網(wǎng)戀假靳東”AI換臉視頻,不惜貸款200萬元資助偶像拍戲,最終血本無歸。這些案例揭示了一個(gè)殘酷現(xiàn)實(shí):當(dāng)技術(shù)能夠完美復(fù)刻人類的外貌與聲線,傳統(tǒng)的社會(huì)信任機(jī)制正在遭遇降維打擊。

技術(shù)雙刃劍:重構(gòu)認(rèn)知與沖擊秩序

AI換臉與語音克隆的負(fù)面影響早已超越個(gè)體受害范疇,演變?yōu)橄到y(tǒng)性風(fēng)險(xiǎn)。首先是對(duì)人格權(quán)的全面侵蝕!睹穹ǖ洹访鞔_肖像權(quán)與聲音權(quán)受法律保護(hù),但實(shí)踐中,一張照片、一段錄音便足以讓技術(shù)偽造出以假亂真的數(shù)字分身。2023年河北李先生遭遇的案例中,詐騙者利用其社交照片制作虛假色情視頻實(shí)施敲詐,致其社會(huì)評(píng)價(jià)斷崖式下跌。

其次是經(jīng)濟(jì)秩序的混亂。廣州南沙案件中,犯罪團(tuán)伙通過篡改企業(yè)認(rèn)證數(shù)據(jù),幫助未達(dá)標(biāo)公司非法獲取資質(zhì),直接擾亂市場(chǎng)競(jìng)爭(zhēng)環(huán)境。類似通過AI技術(shù)手段進(jìn)行不當(dāng)牟利的事件還有很多,已經(jīng)對(duì)正常的經(jīng)濟(jì)秩序造成越來越顯著的危害。

更深層的危機(jī)在于社會(huì)認(rèn)知基石的動(dòng)搖。當(dāng)有圖有真相淪為過去式,公眾對(duì)信息真實(shí)性的集體焦慮可能催生普遍的懷疑主義,甚至削弱司法取證的公信力。一旦整個(gè)社會(huì)的認(rèn)知基礎(chǔ)受到削弱,隨之而來的就是因信任成本抬升而讓整個(gè)社會(huì)彌漫著低效、遲鈍與悲觀的氣氛。

我們不得不認(rèn)識(shí)到,技術(shù)濫用的危害鏈條仍在延伸。從個(gè)人隱私泄露到網(wǎng)絡(luò)詐騙,從商業(yè)詆毀到政治謠言,技術(shù)的每一次迭代都在為犯罪提供新工具,而技術(shù)革新的步伐是不可阻擋的,存在可能為潛在的犯罪行為提供機(jī)會(huì)的漏洞也是在所難免。

據(jù)公安部網(wǎng)安局統(tǒng)計(jì),2024年利用深度合成技術(shù)實(shí)施的詐騙案件同比激增230%,單案最高損失逾千萬元。這種技術(shù)黑產(chǎn)的蔓延速度,已遠(yuǎn)超傳統(tǒng)法律規(guī)制的反應(yīng)周期。

如何治理:法治框架的補(bǔ)位與革新

面對(duì)技術(shù)狂飆,法律必須成為勒住韁繩的手。現(xiàn)行法律體系已具備初步規(guī)制能力:《民法典》第1019條明確禁止利用信息技術(shù)偽造他人肖像,第1034條將生物識(shí)別信息納入個(gè)人信息保護(hù)范疇;《刑法》中詐騙罪、侵犯公民個(gè)人信息罪等條款可覆蓋多數(shù)技術(shù)濫用行為。杭州虞某案與廣州南沙案的判決表明,司法機(jī)關(guān)正通過擴(kuò)大解釋將新型犯罪納入傳統(tǒng)罪名框架。

但專項(xiàng)立法的缺位仍顯尷尬。全國(guó)政協(xié)委員靳東在2025年兩會(huì)期間直言:現(xiàn)有法律對(duì)AI換臉侵權(quán)的低成本與維權(quán)高難度失衡,客觀上縱容了技術(shù)濫用。這種困境在《慶余年》AI剪輯侵權(quán)案中尤為突出——盡管法院判定侵權(quán),但維權(quán)方需耗費(fèi)數(shù)月完成技術(shù)鑒定,而侵權(quán)者僅需幾分鐘即可生成新內(nèi)容。

治理創(chuàng)新已在路上。技術(shù)治理層面,數(shù)字水印技術(shù)的推廣為內(nèi)容溯源提供可能。該技術(shù)可在視頻中嵌入隱形標(biāo)識(shí),記錄創(chuàng)作者與版權(quán)信息,一旦內(nèi)容被篡改即可追蹤源頭。

立法層面,2025年實(shí)施的《互聯(lián)網(wǎng)信息服務(wù)深度合成管理規(guī)定》要求AI生成內(nèi)容添加顯著標(biāo)識(shí),這為平臺(tái)審核提供了抓手。

司法實(shí)踐層面,多地法院開始探索舉證責(zé)任倒置,要求技術(shù)使用者自證合法性,減輕被侵權(quán)方舉證壓力。

行業(yè)新范式:在規(guī)制與創(chuàng)新間尋找平衡點(diǎn)

規(guī)范技術(shù)應(yīng)用絕不等于扼殺創(chuàng)新。歷史經(jīng)驗(yàn)表明,印刷術(shù)催生了版權(quán)制度,互聯(lián)網(wǎng)孕育了數(shù)據(jù)安全法,每一次技術(shù)革命都伴隨著法律體系的適應(yīng)性進(jìn)化。

關(guān)鍵在于劃定清晰的技術(shù)紅線:對(duì)于影視特效、醫(yī)療仿真等正向應(yīng)用,應(yīng)通過許可制與行業(yè)標(biāo)準(zhǔn)予以鼓勵(lì);而對(duì)身份偽造、內(nèi)容篡改等高風(fēng)險(xiǎn)場(chǎng)景,則需建立分級(jí)分類監(jiān)管體系。全國(guó)人大代表雷軍提出的建立AI換臉技術(shù)備案庫建議,正是試圖在開放創(chuàng)新與風(fēng)險(xiǎn)管控間找到平衡。

企業(yè)的技術(shù)倫理建設(shè)同樣重要。部分平臺(tái)已推出生物特征脫敏工具,允許用戶上傳照片時(shí)自動(dòng)模糊關(guān)鍵特征,既滿足社交需求又降低濫用風(fēng)險(xiǎn)。這種隱私設(shè)計(jì)(Privacy by Design理念,將合規(guī)性嵌入技術(shù)開發(fā)生命周期,或?qū)⒊蔀樾袠I(yè)新范式。

多元共治:3.15視角下的治理緊迫性

2025“3.15國(guó)際消費(fèi)者權(quán)益日來臨之際,治理AI技術(shù)濫用更具現(xiàn)實(shí)意義。據(jù)中消協(xié)最新調(diào)查,67%的消費(fèi)者遭遇過AI合成內(nèi)容誤導(dǎo),其中超三成造成直接經(jīng)濟(jì)損失。

當(dāng)技術(shù)欺詐成為消費(fèi)侵權(quán)的重災(zāi)區(qū),不僅全社會(huì)應(yīng)提高對(duì)技術(shù)欺詐的警惕性,相關(guān)管理職能部門更應(yīng)強(qiáng)化防范與治理的措施。對(duì)于技術(shù)欺詐行為,治理行動(dòng)或可根據(jù)具體情況從三方面發(fā)力。

一是強(qiáng)化平臺(tái)責(zé)任,要求社交、電商平臺(tái)部署深度合成內(nèi)容識(shí)別系統(tǒng),對(duì)未標(biāo)注“AI生成標(biāo)識(shí)的內(nèi)容限流或下架,同時(shí)也應(yīng)完善甄別與補(bǔ)救措施,避免對(duì)正常內(nèi)容的限制與誤傷;

二是完善救濟(jì)機(jī)制,建立“AI侵權(quán)快速響應(yīng)通道,簡(jiǎn)化電子證據(jù)取證流程,并與相關(guān)管理職能部門進(jìn)行聯(lián)動(dòng);

三是提升公眾素養(yǎng),通過案例宣傳揭露常見技術(shù)騙局,培養(yǎng)多重驗(yàn)證的安全習(xí)慣——正如公安部網(wǎng)安局提示:涉及轉(zhuǎn)賬務(wù)必通過電話、見面等二次確認(rèn)

技術(shù)的列車不會(huì)停歇,但軌道必須延伸在法治與倫理的基石之上。從兩會(huì)代表呼吁專項(xiàng)立法,到法院判決樹立裁判規(guī)則,從企業(yè)探索技術(shù)合規(guī),到公眾提升防范意識(shí),多元共治的格局正在形成。

唯有讓技術(shù)創(chuàng)新在陽光下奔跑,才能避免技術(shù)利維坦的陰影籠罩人類的未來。

編 輯:章芳
飛象網(wǎng)版權(quán)及免責(zé)聲明:
1.本網(wǎng)刊載內(nèi)容,凡注明來源為“飛象網(wǎng)”和“飛象原創(chuàng)”皆屬飛象網(wǎng)版權(quán)所有,未經(jīng)允許禁止轉(zhuǎn)載、摘編及鏡像,違者必究。對(duì)于經(jīng)過授權(quán)可以轉(zhuǎn)載,請(qǐng)必須保持轉(zhuǎn)載文章、圖像、音視頻的完整性,并完整標(biāo)注作者信息和飛象網(wǎng)來源。
2.凡注明“來源:XXXX”的作品,均轉(zhuǎn)載自其它媒體,在于傳播更多行業(yè)信息,并不代表本網(wǎng)贊同其觀點(diǎn)和對(duì)其真實(shí)性負(fù)責(zé)。
3.如因作品內(nèi)容、版權(quán)和其它問題,請(qǐng)?jiān)谙嚓P(guān)作品刊發(fā)之日起30日內(nèi)與本網(wǎng)聯(lián)系,我們將第一時(shí)間予以處理。
本站聯(lián)系電話為86-010-87765777,郵件后綴為cctime.com,冒充本站員工以任何其他聯(lián)系方式,進(jìn)行的“內(nèi)容核實(shí)”、“商務(wù)聯(lián)系”等行為,均不能代表本站。本站擁有對(duì)此聲明的最終解釋權(quán)。
相關(guān)新聞              
 
人物
vivo胡柏山:手機(jī)行業(yè)是最典型的新質(zhì)生產(chǎn)力代表
精彩專題
聚焦2025全國(guó)兩會(huì)
2025年世界移動(dòng)通信大會(huì)
低空經(jīng)濟(jì)2025:助力中國(guó)經(jīng)濟(jì)騰飛,成就高質(zhì)量發(fā)展
2024通信業(yè)年終盤點(diǎn)
CCTIME推薦
關(guān)于我們 | 廣告報(bào)價(jià) | 聯(lián)系我們 | 隱私聲明 | 本站地圖
CCTIME飛象網(wǎng) CopyRight © 2007-2024 By CCTIME.COM
京ICP備08004280號(hào)-1  電信與信息服務(wù)業(yè)務(wù)經(jīng)營(yíng)許可證080234號(hào) 京公網(wǎng)安備110105000771號(hào)
公司名稱: 北京飛象互動(dòng)文化傳媒有限公司
未經(jīng)書面許可,禁止轉(zhuǎn)載、摘編、復(fù)制、鏡像