時隔不到十天,OpenAI繼GPT-4後,再放出重磅消息。就在今日,OpenAI宣佈在ChatGPT中實現對插件的初始支持,幫助ChatGPT訪問最新信息、運行計算或使用第三方服務。與此同時,OpenAI親自上陣提供兩款插件:網絡瀏覽器和代碼解釋器。此外,OpenAI還開源知識庫檢索插件的代碼,由任何開發人員自行托管,提供他們希望增強ChatGPT的信息。
簡單來說就是,ChatGPT終於“聯網”,也可以通過第三方插件,在衣食住以及工作、學習等方方面面更好地為用戶提供服務。
需要註意的是,現在仍是“Alpha階段”,OpenAI將從候補列表中將插件逐步開放,最初將優先考慮少數開發人員和ChatGPT Plus用戶。
但是,OpenAI“更大規模地開放”,將隻是“時間的問題”。
如果說ChatGPT是AI的“iPhone時刻”,那麼就在今天,它又親手搭建起“App Store”。
終於“聯網”,NewBing尷尬?
此前,ChatGPT的訓練數據庫僅更新至2021年,GPT-4的訓練數據也隻追蹤到2021年9月。
而在今天,OpenAI親自下場推出“網絡瀏覽器”插件,這一“缺憾”將不復存在。
OpenAI表示,“在WebGPT、GopherCite、BlenderBot2、LAMDA2等一系列工作的激勵下,允許語言模型從互聯網上閱讀信息,這將嚴格地擴大其可以討論的內容量,從培訓語料庫直到當下的新鮮信息。”
以近期熱點,第九十五屆奧斯卡頒獎典禮為例。此前,ChatGPT會禮貌地指出,其訓練數據沒有包含足夠的信息來讓它回答。
如今在“網絡瀏覽器”的支持下,ChatGPT就可以檢索有關最新奧斯卡的最新信息,然後進行一番熟悉的ChatGPT詩歌表演,瀏覽成為一種附加體驗的方式。
需要註意的是,上述插件隻支持GET請求,不支持POST。也就是說,用戶使用這一插件的范圍隻限定在檢索信息,並不包括“事務性操作”,比如表單提交。
同時,OpenAI的“瀏覽”使用必應搜索API從網絡中檢索內容。得益於此,ChatGPT也繼承微軟在信息的來源可靠性和真實性以及防止檢索有問題內容的“安全模式”方面的大量工作。此外,該插件在獨立服務器中運行,因此ChatGPT的瀏覽活動將與基礎設施的其他部分分開。
雖說OpenAI與微軟關系匪淺,微軟也將ChatGPT整合至Bing搜索引擎,推出NewBing。截至3月20日的數據顯示,微軟NewBing以來,必應上的頁面訪問量增長15.8%,而Google搜索引擎的訪問量下降近1個百分點。
但是,伴隨“網絡瀏覽器”插件的發佈,NewBing的使用頻率自然也會受到影響。無需過分擔心,微軟早有準備。
微軟早在一周前就宣佈將通過Microsoft 365 Copilot,植入GPT-4模型。據瑞士信貸估計,如果微軟3.7億商用Office 365用戶中的10%升級為AI增強的版本,那麼未來5年將可以產生149億美元收入。
解數學題、數據可視化、格式轉換,更多用途待挖掘
除“網絡瀏覽器”插件,OpenAI親自推出的另一款插件為“代碼解釋器”。
具體而言,OpenAI在沙盒化、防火墻的執行環境中為模型提供一個工作的Python解釋器,以及一些臨時的磁盤空間。
由解釋器插件運行的代碼會在持續會話中進行評估,並且後續調用可以相互構建。目前,該功能支持將文件上傳到當前對話工作區並下載工作結果。
目前,OpenAI從最初的用戶研究中,確定使用代碼解釋器特別有用的例子:解決定量和定性等數學問題、進行數據分析和可視化、在格式之間轉換文件。
在相關演示視頻中,OpenAI主要演示三部分內容:通過函數來生成與修改圖表;解析CSV文件內容,並獲取、分析表格數據、生成可視化圖表;上傳圖片,動態調整圖片大小、灰度、色調,並生成下載鏈接。
不過,OpenAI也表示,這一代碼解釋器主要還是提供計算機的一些最基本的功能,為一些初級程序員和愛好者提供更順暢的接口。
後續,伴隨使用者的增加,這款代碼解釋器的更多用途功能,也將逐步被挖掘出來。
而在“安全性”方面,將ChatGPT模型連接到編程語言解釋器的首要防范措施是對執行進行適當的沙盒處理,以便AI生成的代碼不會在現實世界中產生意外的副作用。OpenAI會在安全環境中執行代碼,並使用嚴格的網絡控制來防止外部互聯網訪問執行代碼。此外,OpenAI對每個會話都設置資源限制。
除設置沙盒,保障隔離之外,OpenAI還聯合內外部人員進行多次紅隊演練,確保插件開發者不會進行prompt註入、發送詐騙和垃圾郵件、繞過插件防禦系統來安裝後門程序等行為。
衣食住行用全能,打造類“App Store”AI生態
在GPT-4發佈時,除性能的提升,OpenAI就表示已經有多傢公司將GPT-4搭載到他們的產品中。
包括:語言學習工具軟件多鄰國(Duolingo)、幫助視障用戶的軟件Be My Eyes、移動支付公司Stripe、國際性金融服務公司摩根士丹利(Morgan Stanley)和可汗學院(Khan Academy)。
此外,OpenAI還公佈GPT-4與冰島政府合作的服務場景。
如果說上述“落地”是對外賦能,相當於為他人做嫁衣。
那麼,OpenAI推出插件功能,就相當於內生性升級,以海納百川的姿態,最終形成龐大的生態。
目前,OpenAI首批開放可使用的第三方插件包括Expedia(旅行)、FiscalNote、Instacart(購物)、KAYAK(航班住宿出行)、Klarna、Milo、OpenTable(餐飲與外賣)、Shopify、Slack、Speak、Wolfram、Zapier。
需要註意的是,Zapier是無代碼自動化的領導者——與來自Google、Salesforce和微軟等合作夥伴的五千多個應用程序集成。
作為一款自動化工具,Zapier可以幫用戶創建自動化的工作流,幫你連接你的應用、軟件&各種服務。Zapier的整體理念就是通過觸發條件&執行條件來創建自動化的命令,“如果這個條件觸發,那麼就執行這個動作”。
而這也意味著,ChatGPT的體檢將會更便捷、更絲滑。
外界普遍認為,ChatGPT插件系統的上線,就如同蘋果開放App Store一樣。而OpenAI也正通過此舉,建立起自己的AI生態帝國。
對於開發者來說,ChatGPT插件若能像App Store那樣增加“付費”機制,也將會是“雙贏”的局面。
OpenAI創始人Sam Altman表示,“您可以安裝插件來幫助完成各種各樣的任務,我們很期待看到開發者創造什麼!”