首頁|必讀|視頻|專訪|運(yùn)營|制造|監(jiān)管|大數(shù)據(jù)|物聯(lián)網(wǎng)|量子|低空經(jīng)濟(jì)|智能汽車|特約記者
手機(jī)|互聯(lián)網(wǎng)|IT|5G|光通信|人工智能|云計(jì)算|芯片|報(bào)告|智慧城市|移動(dòng)互聯(lián)網(wǎng)|會(huì)展
首頁 >> 人工智能 >> 正文

研究稱ChatGPT搜索功能存在被操縱風(fēng)險(xiǎn):可被惡意網(wǎng)站誘導(dǎo)輸出不可信內(nèi)容

2024年12月26日 10:06  IT之家  作 者:清源

根據(jù)英國《衛(wèi)報(bào)》當(dāng)?shù)貢r(shí)間 24 日發(fā)布的一項(xiàng)調(diào)查,OpenAI 的 ChatGPT 搜索工具可能會(huì)被隱藏內(nèi)容操控,甚至返回惡意代碼。

《衛(wèi)報(bào)》測(cè)試了 ChatGPT 如何應(yīng)對(duì)包含隱藏內(nèi)容的網(wǎng)頁摘要。這些隱藏內(nèi)容可能包括來自第三方的指令,干擾 ChatGPT 的回應(yīng)(IT之家注:被稱為“提示注入”),或是包含旨在影響回應(yīng)的內(nèi)容,如大量隱藏的文字推銷某個(gè)產(chǎn)品或服務(wù)的優(yōu)點(diǎn)

這種技術(shù)可以被惡意使用,例如讓 ChatGPT 即使在頁面上有負(fù)面評(píng)論的情況下,也返回對(duì)某個(gè)產(chǎn)品的積極評(píng)價(jià)。一位安全專家還發(fā)現(xiàn),ChatGPT 有可能返回從其搜索的網(wǎng)站中提取的惡意代碼。

測(cè)試中,ChatGPT 被提供了一個(gè)偽造的相機(jī)產(chǎn)品頁面的鏈接,AI 工具被要求判斷這款相機(jī)是否值得購買。對(duì)于普通頁面,返回的是一個(gè)平衡的評(píng)估,指出了產(chǎn)品的優(yōu)缺點(diǎn)。

然而,當(dāng)隱藏的文本包含指令要求 ChatGPT 給予正面評(píng)價(jià)時(shí),回答總是完全積極的,即使頁面上有負(fù)面評(píng)論,隱藏文本也可以覆蓋真實(shí)的評(píng)價(jià)。

即便第三方只是簡(jiǎn)單地添加隱藏文本而沒有指令,也能確保得到積極評(píng)價(jià)。例如,一項(xiàng)測(cè)試中,隱藏的極為正面的虛假評(píng)論就影響了 ChatGPT 的總結(jié)結(jié)果。

CyberCX 的網(wǎng)絡(luò)安全專家 Jacob Larsen 表示,如果 ChatGPT 的搜索系統(tǒng)按現(xiàn)有狀態(tài)全面發(fā)布,可能會(huì)存在“高風(fēng)險(xiǎn)”,有人會(huì)專門設(shè)計(jì)網(wǎng)站來欺騙用戶。不過他也指出,搜索功能只是最近推出的,OpenAI 會(huì)繼續(xù)測(cè)試并修復(fù)這些潛在問題!癘penAI 擁有一支非常強(qiáng)大的 AI 安全團(tuán)隊(duì),到時(shí)等該功能對(duì)所有用戶開放時(shí),他們應(yīng)該已經(jīng)嚴(yán)格測(cè)試過這些問題!

搜索引擎(如谷歌)曾懲罰使用隱藏文本的網(wǎng)站,這些網(wǎng)站因此排名下降,甚至可能被完全移除。SR Labs 的首席科學(xué)家 Karsten Nohl 表示,“如果你要做一個(gè)谷歌的競(jìng)爭(zhēng)者,SEO 中毒無疑是一個(gè)很大的挑戰(zhàn)!薄癝EO 中毒者與谷歌、必應(yīng)等搜索引擎的對(duì)抗已經(jīng)持續(xù)了多年!比缃 ChatGPT 的搜索能力也面臨同樣挑戰(zhàn),但并非大語言模型的問題,而是因?yàn)樗鼈兪撬阉黝I(lǐng)域的新入局者。

編 輯:章芳
飛象網(wǎng)版權(quán)及免責(zé)聲明:
1.本網(wǎng)刊載內(nèi)容,凡注明來源為“飛象網(wǎng)”和“飛象原創(chuàng)”皆屬飛象網(wǎng)版權(quán)所有,未經(jīng)允許禁止轉(zhuǎn)載、摘編及鏡像,違者必究。對(duì)于經(jīng)過授權(quán)可以轉(zhuǎn)載,請(qǐng)必須保持轉(zhuǎn)載文章、圖像、音視頻的完整性,并完整標(biāo)注作者信息和飛象網(wǎng)來源。
2.凡注明“來源:XXXX”的作品,均轉(zhuǎn)載自其它媒體,在于傳播更多行業(yè)信息,并不代表本網(wǎng)贊同其觀點(diǎn)和對(duì)其真實(shí)性負(fù)責(zé)。
3.如因作品內(nèi)容、版權(quán)和其它問題,請(qǐng)?jiān)谙嚓P(guān)作品刊發(fā)之日起30日內(nèi)與本網(wǎng)聯(lián)系,我們將第一時(shí)間予以處理。
本站聯(lián)系電話為86-010-87765777,郵件后綴為cctime.com,冒充本站員工以任何其他聯(lián)系方式,進(jìn)行的“內(nèi)容核實(shí)”、“商務(wù)聯(lián)系”等行為,均不能代表本站。本站擁有對(duì)此聲明的最終解釋權(quán)。
相關(guān)新聞              
 
人物
中國移動(dòng)副總經(jīng)理張冬:5G揚(yáng)帆開新篇,數(shù)智遠(yuǎn)航啟新程
精彩專題
2024通信業(yè)年終盤點(diǎn)
2024數(shù)字科技生態(tài)大會(huì)
2024年度中國光電纜優(yōu)質(zhì)供應(yīng)商評(píng)選活動(dòng)
2024全球6G發(fā)展大會(huì)
CCTIME推薦
關(guān)于我們 | 廣告報(bào)價(jià) | 聯(lián)系我們 | 隱私聲明 | 本站地圖
CCTIME飛象網(wǎng) CopyRight © 2007-2024 By CCTIME.COM
京ICP備08004280號(hào)-1  電信與信息服務(wù)業(yè)務(wù)經(jīng)營許可證080234號(hào) 京公網(wǎng)安備110105000771號(hào)
公司名稱: 北京飛象互動(dòng)文化傳媒有限公司
未經(jīng)書面許可,禁止轉(zhuǎn)載、摘編、復(fù)制、鏡像