如今一些不法分子利用“AI換臉”技術(shù)實(shí)施詐騙,已成為一種新型騙局。利用AI技術(shù)制作換臉視頻或合成聲音來(lái)實(shí)施詐騙的確讓人防不勝防,那么如何防范這種風(fēng)險(xiǎn)呢?有關(guān)部門正在開發(fā)相關(guān)的反制技術(shù)和手段。
據(jù)央視網(wǎng)報(bào)道,AI換臉詐騙檢測(cè)與預(yù)警技術(shù)正在測(cè)試中。
工業(yè)和信息化部反詐工作專班專家李坤表示:“我們正在會(huì)同行業(yè)內(nèi)的手機(jī)終端企業(yè),將推出AI 換臉詐騙風(fēng)險(xiǎn)提醒功能,這項(xiàng)功能僅在手機(jī)端來(lái)本地運(yùn)行,能夠有效保護(hù)用戶數(shù)據(jù)不泄露。經(jīng)過用戶授權(quán)后,可為用戶提供AI換臉詐騙風(fēng)險(xiǎn)預(yù)警提醒。”
在測(cè)試體驗(yàn)中,當(dāng)用AI換了臉的技術(shù)人員與記者發(fā)起視頻通話時(shí),測(cè)試手機(jī)終端提示“對(duì)方疑似假冒身份”。點(diǎn)擊檢測(cè)按鈕,經(jīng)過圖像掃描,系統(tǒng)提示“AI換臉合成概率93%”。
據(jù)了解,AI換臉主要是使用深度合成技術(shù)。《互聯(lián)網(wǎng)信息服務(wù)深度合成管理規(guī)定》提出了算法備案、安全評(píng)估的手段,要求深度合成服務(wù)提供者對(duì)深度合成的內(nèi)容添加顯式或隱式水印。中國(guó)信通院人工智能所安全與元宇宙部專家陳文弢稱:“要對(duì)生成合成的內(nèi)容去添加一些水印,這個(gè)水印的本質(zhì)其實(shí)就是要一方面去提示公眾這個(gè)內(nèi)容是由AI生成或者合成的,另一方面也是要追溯它的來(lái)源。”