人工智能初創公司Anthropic采取措施防止選舉誤導


在2024年美國總統大選之前,Anthropic(一傢資金雄厚的人工智能初創公司)正在測試一種技術,當其GenAI聊天機器人的用戶詢問政治話題時,該技術就會檢測到,並將這些用戶重新引導到"權威"的投票信息來源。

anthropic-header.jpg

這項技術被稱為"提示盾"(Prompt Shield),它依賴於人工智能檢測模型和規則的結合,如果Anthropic公司的聊天機器人克勞德(Claude)的美國用戶詢問投票信息,它就會彈出一個窗口。彈出窗口會將用戶重定向到無黨派組織"民主工程"(Democracy Works)的資源庫 TurboVote,在那裡他們可以找到最新、準確的投票信息。

Anthropic說,由於克勞德在政治和選舉相關信息方面的缺陷,"Prompt Shield"是必要的。Anthropic 承認,克勞德沒有接受過足夠頻繁的培訓,無法提供有關具體選舉的實時信息,因此很容易對這些選舉產生幻覺,即捏造事實。

發言人通過電子郵件表示:"自 Claude 推出以來,我們就一直在使用'及時屏蔽'--它可以根據我們的可接受用戶政策標記出一些不同類型的危害。我們將在未來幾周內推出針對選舉的及時屏蔽幹預措施,我們打算監測其使用情況和局限性......[在開發過程中],我們與包括政策制定者、其他公司、民間社會和非政府機構以及針對選舉的顧問在內的各種利益相關者進行交流。"

目前這似乎隻是一個有限的測試。當媒體向Claude詢問如何在即將到來的大選中投票時,它並沒有彈出提示,而是吐出一份普通的投票指南。Anthropic 聲稱它正在對 Prompt Shield 進行微調,準備將其推廣給更多用戶。

Anthropic公司禁止在政治競選和遊說中使用其工具,它是最新一傢實施政策和技術以試圖防止選舉幹擾的GenAI供應商。時機絕非巧合,今年,全球將有比歷史上更多的選民參加投票,至少有 64 個國傢將舉行全國大選,這些國傢的總人口約占世界總人口的 49%。

今年 1 月,OpenAI 表示將禁止人們使用其病毒式人工智能聊天機器人 ChatGPT 創建冒充真實候選人或政府、歪曲投票方式或阻止人們投票的機器人。與 Anthropic 一樣,OpenAI 目前也不允許用戶使用其工具創建用於政治競選或遊說目的的應用程序--該公司上個月重申這一政策。

在與 Prompt Shield 類似的技術方法中,OpenAI 還采用檢測系統,將詢問有關投票的後勤問題的 ChatGPT 用戶引導到一個無黨派網站 CanIVote.org,該網站由全國國務卿協會維護。

在美國,盡管得到兩黨的支持,國會仍未通過立法來規范人工智能行業在政治中的作用。與此同時,在聯邦立法停滯不前的情況下,超過三分之一的美國州已經通過或提出法案,以解決政治競選中的深度偽造問題。

在監督機構和監管機構的壓力下,一些平臺正在采取措施阻止 GenAI 被濫用於誤導或操縱選民,以代替立法。

Google去年 9 月表示,將要求在 YouTube 及其他平臺(如Google搜索)上使用 GenAI 的政治廣告,如果圖像或聲音是經過人工合成的,則必須在顯著位置披露。Meta 還禁止政治活動在其旗下的廣告中使用 GenAI 工具(包括自己的工具)。


相關推薦

2023-04-27

國參議院情報委員會主席馬克·華納(MarkWarner)敦促幾傢人工智能(AI)公司或發力AI的科技巨頭的首席執行官們優先考慮安全措施,打擊偏見,從而負責任地推出新技術。“除行業承諾外,有必要在這一領域進行一定程度的監

2022-08-18

ok也不會急於審查其禁止唐納德·特朗普的決定。Facebook母公司Meta的全球事務總裁NickClegg在接受Politico采訪時表示,該公司將維持2023年1月7日這一日期就是否恢復特朗普的賬戶作出決定。當地時間周三,Meta向The Verge證實,該時間

2024-02-15

。但值得註意的是,這傢視頻共享巨頭並沒有宣佈任何與人工智能生成的深度偽造相關的選舉安全風險的新措施。近幾個月來,歐盟一直在加大對人工智能生成和政治造假的關註,並呼籲各平臺制定防范這類虛假信息的措施。在

2024-03-15

正式的信息請求(RFI),詢問它們如何處理與使用生成式人工智能相關的風險。這些要求涉及必應(Bing)、Facebook、Google搜索、Instagram、Snapchat、TikTok、YouTube 和 X。根據規定,這八個平臺被指定為超大型在線平臺(VLOPs),這意

2024-03-30

“印度總理莫迪警告比爾·蓋茨關於人工智能(AI)的危險”,“今日俄羅斯”電視臺(RT)3月29日以此為題註意到,莫迪與比爾·蓋茨近日舉行會談,討論新興技術、氣候等多項議題,期間,莫迪就AI的深度偽造技術發出警告。

2022-09-22

來,微軟正在采取一種根本不同的方法來打擊假新聞。該公司似乎非常不願意給假新聞貼上“虛假”的標簽,因為這可能被誤解為過度審查。與其追捕並將內容標記為故意的虛假和誤導,微軟可能會揭露從事創造和傳播宣傳的客

2023-11-21

11月21日消息,美國當地時間周一,人工智能研究公司OpenAI董事會成員兼首席科學傢伊利亞·蘇茨凱弗(IlyaSutskever)對自己參與解雇首席執行官薩姆·奧特曼(SamAltman)一事表示遺憾,此後有關OpenAI未來的質疑愈演愈烈。雪上加霜

2023-11-09

有著“OpenAI勁敵”之稱的人工智能初創公司Anthropic即將成為首批使用谷歌新一代TPU芯片的公司之一,在最近達成雲計算服務協議後,此舉進一步加深雙方的合作關系。兩傢公司當地時間周三表示,Anthropic將部署谷歌CloudTPUv5e芯片

2023-10-28

全球搜索引擎巨頭谷歌(GOOGL.US)近日承諾向人工智能初創公司Anthropic投資20億美元,鞏固該科技巨頭與這傢初創公司的關系,並進一步助推矽谷科技巨頭們對人工智能技術的投資狂潮。Anthropic的一位發言人證實,該交易的結構

2023-12-22

12月22日消息,據外媒報道,在OpenAI訓練的人工智能聊天機器人ChatGPT大火之後,包括谷歌在內的科技巨頭紛紛加大在人工智能聊天機器人和大語言模型上的投入,人工智能初創公司也成資本追捧的對象,多傢這一領域的初創公司

2024-03-28

馬遜正在進行其30年歷史上最大的外部投資,因其希望在人工智能競賽中獲得優勢。這傢科技巨頭表示,它將再斥資27.5億美元支持總部位於舊金山的初創公司Anthropic,該公司被廣泛視為生成人工智能的領跑者。它的大模型Claude是

2024-03-08

n)和維諾德·科斯拉(VinodKhosla),近期在X平臺激烈辯論人工智能應該開源還是閉源,此議題迅速成為矽谷最具爭議的焦點之一。安德森等人強烈支持開源人工智能,他們認為共享知識是科學進步的關鍵,提高透明度能夠防止大

2023-10-28

向OpenAI競爭對手Anthropic至多投資20億美元。此舉可能促使人工智能領域的初創公司加劇競爭,以爭取首先取得下一個重大突破。知情人士說,谷歌同意先期向Anthropic投資5億美元,並同意隨著時間的推移再增加15億美元。在這筆投

2023-02-04

Google和微軟之間關於科技界人工智能未來的競爭繼續升溫。當微軟與ChatGPT的創造者OpenAI牢牢糾纏在一起時,Google可能已經轉向一傢由OpenAI前員工創立的公司:鮮為人知的Anthropic。根據《金融時報》的報道,2022年底,Google向這傢