研究人員發現ChatGPT可以在重復某些詞語的狀況下泄露敏感信息


谷歌的一組研究人員發現,OpenAI旗下的人工智能聊天機器人ChatGPT可以泄露其訓練數據中的敏感信息,比如真人的個人信息。據悉,ChatGPT是OpenAI於2022年11月30日推出的一種新型AI聊天機器人工具,可根據用戶的要求快速生成文章、故事、歌詞、散文、笑話,甚至代碼,並回答各類疑問。


在推出僅兩個月後,ChatGPT的月活躍用戶數就達到1億,成為歷史上增長最快的消費者應用之一。在今年11月6日舉行的OpenAI首屆開發者大會上,OpenAI CEO薩姆•奧爾特曼(Sam Altman)宣佈,ChatGPT的周活躍用戶數已達到1億。

就像所有所謂的大語言模型(LLM)一樣,支持ChatGPT的底層機器學習模型也是使用從互聯網上抓取的大量數據來進行訓練的。但令人擔憂的是,一些被提取的訓練數據包含真實人物的識別信息,包括姓名、電子郵件地址和電話號碼。

谷歌的研究人員找到一種方法,即通過要求ChatGPT“永遠”重復某些單詞,就讓ChatGPT透露一些被用於訓練的數據,這些數據包括私人信息(比如,個人姓名、電子郵件、電話號碼等)、研究論文和新聞文章的片段、維基百科頁面等等。

Google Brain的高級研究科學傢Katherine Lee表示:“我們在7月份發現這個漏洞,並在8月30日通知OpenAI,在標準的90天披露期之後,我們發佈這個漏洞。既然我們向OpenAI披露這一點,現在的情況可能會有所不同。”研究人員表示,OpenAI在8月30日修補這個漏洞。

外媒稱,谷歌研究人員發現的有關ChatGPT的漏洞引起嚴重的隱私問題,特別是對於那些在包含敏感信息的數據集上進行訓練的模型而言。


相關推薦

2024-01-31

向用戶和整個ChatGPT社區致歉。2023年11月份,谷歌的一組研究人員發現,通過要求ChatGPT“永遠”重復某些單詞,可讓ChatGPT泄露被用於訓練的數據,包括私人信息(比如,個人姓名、電子郵件、電話號碼等)、研究論文和新聞文章

2023-02-13

prompt生成的提示語看起來很合理,但是都有相似的格式,研究人員將它們總結成三個候選prompt(如圖2),其中[SRC] 和 [TGT] 分別代表翻譯的源語言和目標語言。另外,研究人員在Tp2中增加一個額外命令,要求ChatGPT不要在翻譯的句

2023-12-05

12月5日消息,谷歌的一組研究人員聲稱,他們已經找到獲取OpenAI人工智能聊天機器人ChatGPT部分訓練數據的方法。在最新發表的論文中,谷歌研究人員表示,某些關鍵詞可迫使ChatGPT泄露其所接受訓練數據集的部分內容。他們舉例

2023-02-06

研究人員發現,流行的圖片創作模型很容易被指示生成可識別的真人圖片,可能會危及相關聯人的隱私。一些提示導致人工智能復制一張圖片,而不是重繪完全不同的內容。這些重新制作的圖片還可能包含受版權保護的材料。但

2023-04-11

的一個工作日,在廣告公司做營銷策劃的唐希第一次使用ChatGPT,彼時她正為給客戶的方案發愁。在對話框裡,她嘗試性地輸入指令:請寫一個關於某某客戶的廣告營銷競標方案。不到兩秒鐘,對話的另一端就給出一個非常詳細

2024-03-17

它們的通信是加密的,這看起來很安全。然而,以色列的研究人員發現黑客規避這種保護的方法。和其他優秀的助手一樣,人工智能對你如指掌。它知道你住在哪裡,在哪裡工作。它可能知道你喜歡吃什麼食物,這個周末打算做

2023-03-03

行的數據泄露庫和警報服務Have I BeenPwned。(發現該漏洞的研究人員與亨特分享數據,以便他能將其上傳到Have I BeenPwned。)去年年底,一位要求匿名的安全研究人員發現一個包含數據的服務器,結果發現該服務器被一個黑客(或一

2023-04-26

擺脫這一聲譽。馬裡蘭大學、清華大學和北京郵電大學的研究人員最近發表一篇有趣的論文,詳細介紹英特爾處理器上的一個新的側通道攻擊,與過去暴露的其他漏洞有很大不同。這個新的缺陷可以作為Meltdown的側通道來利用,

2023-03-15

2023年身份暴露報告證實這一點。根據該文件,該公司的研究人員在2022年發現7.215億個在線曝光的憑證。在這個數字中,50%來自僵屍網絡,這是一個由感染惡意軟件的計算機組成的網絡,由威脅者作為一個群體控制,部署信息竊

2023-03-10

排放量顯然高於太陽能或風力發電支持的數據中心。雖然研究人員已經統計創建單一模型所產生的碳排放量,有些公司也提供有關他們能源使用的數據,但他們沒有對這項技術的總用電量進行總體估計。AI公司Huging Face研究員薩

2024-02-20

消息,在針對Android14QPR3Beta1代碼進行深入挖掘後,開發者發現谷歌正在開發中的關於OTP(基於時間的一次性密碼)的安全功能,該功能預計會在Android15中上線。OTP 或者叫 TOTP 生成的六位數字通常作為 2FA 驗證,在開啟 2FA 驗證的情

2023-11-10

經濟價值的話。Clop 是一個講俄羅斯語的勒索軟件團夥,研究人員將其與以前涉及類似文件傳輸工具的大規模黑客攻擊事件聯系起來,包括 Fortra 的 GoAnywhere 文件傳輸工具和 Accellion 的文件傳輸應用程序。上周,Progress Software 在一

2023-01-22

上周,一名安全研究人員發現一臺不安全的服務器,其中包含美國政府的恐怖分子篩選數據庫和"禁飛名單"中數十萬人的身份。該服務器由被稱為maiaarsoncrimew的瑞士黑客找到,由美國區域航空公司CommuteAir持有

2024-02-14

快科技2月14日消息,今天,OpenAI官方宣佈ChatGPT的一項重要更新,增加記憶功能和新的用戶控制選項。OpenAI表示,GPT現在可以在與用戶的聊天中記住你們互動的所有信息,並在後續對話中利用這些信息來提供更相關和個性化的回