聊天神器ChatGPT還有這本事:“撰寫”論文摘要竟能騙過專傢


據預印本平臺bioRxiv12月底發佈的一份預印報告顯示,一篇由人工智能(AI)聊天機器人寫出的研究論文摘要,甚至最終能騙過專傢審核。這一報告一經發出就受到人們的廣泛關註,研究人員對該AI機器人的影響力有著巨大爭議。


聊天機器人ChatGPT的所有者是一傢位於舊金山的軟件公司OpenAI,該公司於11月30日發佈這款AI工具,並提供免費試用。

ChatGPT可以根據用戶的提示創建實際且智能的文本。它是一個“大型語言模型”,是一個基於神經網絡的系統,通過消化大量現有的人類生成的文本來學習並執行任務。

上周,有消息稱,美國科技巨頭微軟計劃向OpenAI投資高達100億美元,目前尚處於談判階段。

難以區分

自從它發佈以來,由於該機器人的大部分輸出內容就很難與人工書寫出的文本進行區分,研究人員一直在努力解決圍繞其使用的倫理問題。

現在,伊利諾斯州西北大學Catherine Gao領導的一個小組已經開展一項研究:使用ChatGPT生成研究論文摘要,以測試科學傢是否能發現它們。

研究人員要求ChatGPT根據發表在四大醫學頂刊《美國醫學會雜志》、《新英格蘭醫學雜志》、《英國醫學雜志》、《柳葉刀》以及《自然》子刊《自然醫學》上的精選文章,撰寫50篇醫學研究摘要。

隨後該小組通過抄襲檢測系統和人工智能輸出檢測器,將這些摘要與原始摘要混在一起匿名比較,要求一組醫學研究人員找出由ChatGPT輸出的摘要。

結果顯示,ChatGPT生成的摘要順利通過抄襲檢查:其原創性平均得分為100%,這表明沒有檢測到抄襲。人工智能輸出檢測器發現66%的由ChatGPT生成的摘要。

而人工審閱者錯誤地將32%的生成摘要識別為原始摘要。

重大爭議

Gao和他的同事在預印本報告中寫道,ChatGPT確實寫出可信的科學摘要,不過使用大型語言模型來幫助科學方面的寫作,其道德界限和可接受程度仍有待商榷。

英國牛津大學技術和監管領域學者Sandra Wachter不是此次研究的參與者,但是她對此表示非常擔心。她補充道,“如果我們現在處於連專傢都無法判斷真假的情況下,那麼我們就不會再看到那些能夠在復雜話題中指導我們的論文摘要。”

Wachter提醒道,如果由ChatGPT生成的論文內容無法確定是否正確,那可能會有“可怕的後果”。這不光會給研究人員帶來重大問題,因為他們閱讀的研究是被捏造出來的;而且對整個社會也有影響,因為科學研究在社會中扮演著重要角色。

Wachter警告,更嚴重的或許導致基於研究的政策決定出現失誤。

新澤西州普林斯頓大學的計算機科學傢Arvind Narayanan認為,“任何嚴肅的科學傢都不太可能使用ChatGPT來生成摘要。”

他補充道,“問題在於,該工具能否生成準確而令人信服的摘要。若是不能,那它的缺點是顯著的。”

Narayanan還表態,此類問題的解決方案不在ChatGPT本身,而是應該集中在導致這種行為的不良動機上,例如招聘和晉升審查時隻看論文的量、而不看質。

人工智能公司Hugging Face研究人員Irene Solaiman則認為,“這些AI模型是根據過去的信息進行訓練的,而社會和科學的進步往往來自於與過去不同的思維,或開放思維。”

Solaiman補充說,在醫學等關鍵領域,假信息可能危及人類的安全,所以一些期刊必須采取更嚴格的方法來驗證信息的準確性。

該預印報告的研究小組建議,那些評估科學傳播的人士應該制定政策,杜絕使用人工智能生成的文本。而要是機構選擇允許在某些情況下使用該技術,他們應該就披露建立明確的規則。


相關推薦

2023-01-29

1月29日消息,人工智能聊天機器人ChatGPT自從發佈以來,已經引發一番熱潮。房地產行業用它來自動生成房屋描述、回答客戶問題或計算還款額度。很多房地產中介甚至表示,他們現在無法想象沒有ChatGPT的工作。房地產中介在網

2023-02-01

ChatGPT到處“造假”作弊,現在搞得OpenAI官方都坐不住。就在今天,OpenAI緊急發佈官方打假工具:基於GPT打造,打開網頁就能用。好傢夥,這豈不是真·以己之矛攻己之盾?一經上線,那叫一個火爆,不少網友第一時間就沖過去測

2023-05-16

5月16日消息,自從聊天機器人ChatGPT爆火以來,許多人試圖利用這款強大的人工智能工具快速賺錢。許多網紅在視頻中教授人們如何使用這款工具,並鼓勵人們利用ChatGPT單獨設計的方案去賺錢。然而,創業傢和計算機科學傢們警

2023-02-07

現在科技圈沒啥比ChatGPT更火,當我們還在熱烈討論的時候,已經有人玩出各種新花樣,甚至已經開始以此賺錢。1會修bug能寫程序 還能拿到谷歌百萬年薪offer當然僅僅把ChatGPT當成聊天機器人就有點大材小用。近日,ChatGPT通過谷

2023-03-31

發的人工智能聊天機器人Bard正在用來自OpenAI聊天機器人ChatGPT的數據進行訓練。谷歌發言人則表示,“訓練Bard沒有用過任何來自ShareGPT或ChatGPT的數據。”據悉,用戶可以在ShareGPT這個平臺上發佈他們與聊天機器人ChatGPT所交流的信

2023-01-20

消息,自2022年年末推出以來,人工智能(AI)聊天機器人ChatGPT在教育、寫作、編程等領域火爆全球。現在,這款聊天機器人也在參加達沃斯論壇的公司老板中流行起來,他們利用其寫工作電子郵件。在線學習服務提供商Coursera首

2023-04-13

自從2022年底OpenAI發佈ChatGPT之後,一陣人工智能的颶風,席卷全球。這陣風之所以猛烈,一是因為ChatGPT在技術方面的突破足夠顛覆,二是它在應用端實現普通人可體驗,這意味著能夠對其強大能力有直接的感知。於是,我們很快

2023-10-31

的不斷發展,人們越來越擔心大型語言模型(LLM)(如 ChatGPT)被用於犯罪目的的可能性。人工智能將大大提高網絡釣魚郵件的成功率,這是黑客入侵人們的計算機、電子郵件賬戶和公司服務器的最具破壞性的有效技術。目前,9

2023-04-13

。至於這個漏洞被利用的後果,不說未來,隻看現在。在ChatGPT剛剛內測的時候,就已經有媒體開始使用 AI 來收集信息和編寫稿件。如果一傢媒體的 AI 抓取到這種精心構造的虛假信息,寫一篇虛假報道;然後這篇報道被更多 AI

2023-02-08

“日賺800美元不是夢!”、“月入6萬刀!”……用ChatGPT賺錢的“門道兒”,各路博主似乎已經整明白。在視頻網站中搜索“ChatGPT賺錢”,刷刷刷映入眼簾的全是各種免費教程,收益一個比一個大,點擊率一個比一個高。△圖源

2023-01-28

自打橫空出世以來,ChatGPT出盡風頭:這個由OpenAI推出的一種新型AI聊天機器人工具,可以根據用戶的要求快速生成文章、故事和歌詞甚至代碼,回答各類疑問等等。它在推出之際,就因為回答裡驚人的信息量和完成度,遭遇人們

2023-02-13

美國OpenAI公司去年推出的聊天機器人ChatGPT,近期成為全球矚目的焦點。人工智能將顛覆哪些行業,再次引發人們討論。這其中,一個不常在此類話題出現的領域,率先感受到ChatGPT的影響——教育。“也許這一次,對於知識型工

2023-03-14

——社交媒體應用Koo的創始人透露,會引入AI聊天機器人ChatGPT,幫用戶撰寫貼文。Koo聯合創始人MayankBidawatka解釋稱,用戶可直接在應用內通過ChatGPT撰寫文章,就當下事件或現象發表看法。Mayank Bidawatka還稱:“ChatGPT將會幫創作者

2024-04-08

安娜-蓋斯基(DianeGayeski)收到學生的作文時,她會通過ChatGPT運行其中的一部分,請人工智能工具進行點評,並提出如何改進作品的建議。她告訴美國有線電視新聞網(CNN):"看待人工智能評分的最佳方式是將其視為