北京時間2月15日上午消息，幾天前，谷歌聊天機器人演示活動現場翻車導致其股價當天暴跌逾7%，但微軟的演示活動同樣出現事實性錯誤。在微軟進行演示時，這項嵌入在必應搜索中的類ChatGPT技術分析Gap和Lululemon的財報。但業內人士將其給出的答案與財報原文對比後卻發現，這款聊天機器人遺漏一些數據，甚至會杜撰一些內容。
“必應AI在演示過程中給出一些完全錯誤的答案，但卻沒人註意到。”獨立搜索引擎研究員德米特裡·佈裡爾頓（Dmitri Brereton）寫道，“相反，大傢都對必應的宣傳歡欣鼓舞。”
佈裡爾頓發現，除財務數據上的錯誤外，微軟在演示中針對吸塵器規格和墨西哥旅行計劃的回答可能存在事實性錯誤。佈裡爾頓最初並不是為給微軟“挑刺”，他隻是在細致對比微軟和谷歌的答案時意外發現這些問題。
人工智能專傢稱這一現象為“幻覺”，也就是說，基於大語言模型生成的工具有杜撰內容的傾向。上周，谷歌推出一款與之競爭的人工智能工具，演示過程中同樣存在事實性錯誤——但當時的錯誤很快就被人發現。
這兩傢公司都在加緊將新型生成式人工智能整合進搜索引擎，希望在ChatGPT引爆行業熱潮後向世人展示自己在這方面的優勢。ChatGPT是去年11月由創業公司OpenAI推出的，他們已經通過微軟融資百億美元，與之競爭的Stability AI和Hugging Face等創業公司也在融資中獲得數十億美元的估值。
谷歌與微軟對待這項技術的態度差異明顯：由於擔心聲譽風險和安全問題，谷歌遲遲不願將AIGC（人工智能生成內容）技術整合進搜索引擎，而微軟卻在上周強調，有可能在短期內向部分公眾開放這項技術。
“我認為不能讓這項技術躺在實驗室裡，”納德拉說，“應該安全地推廣出去。”
但在必應AI的演示過程中，的確在公司財報數據上出現一些問題。
微軟營銷高管約瑟夫·梅赫蒂（Yusuf Mehdi）在演示過程中訪問Gap的投資者關系網站，然後讓必應AI根據這傢零售商11月發佈的第三季財報總結出“要點”。
“很酷，節約大量時間。”梅赫蒂說。
下面是微軟演示過程的屏幕截圖：
以下是這份總結中存在的錯誤：
-Gap報告的毛利率為37.4%。但在去除與Yeezy有關的費用後，調整後毛利率為38.7%。
-Gap的運營利潤率為4.6%，而非5.9%。5.9%這個數據在該公司的財報中根本沒有出現。
-調整後攤薄每股收益為0.71美元，而非0.42美元，後者同樣在財報中無法找到。Gap的財報包含一個調整後所得稅收益，約為0.33美元。
-Gap去年8月下調全年預期，並在第三季度財報中表示，“第四季度銷售額可能同比下滑個位數左右”。由此看來，全年營收應該下滑，而非“較低的兩位數增長”。並沒有營業利潤率或每股收益預期。
Gap2022財年第三季度財報
微軟表示，該公司知道這些錯誤，他們也預計必應AI會犯一些錯誤。
“我們知道這份報告，並且已經通過分析這一問題來改善體驗。”微軟發言人說，“我們承認仍然有一些工作要做，並且預計到該系統可能會在預覽期間犯一些錯誤，正因如此，反饋才至關重要，這可以幫助我們學習和改進模型。”
微軟隨後讓必應AI對比Gap和Lululemon的財報。梅赫蒂希望必應能將兩份財報的數據提取出來，制作成一份表格。
“看看效果多麼驚人。”他說，“就像這樣，一張表格，這個問題的答案有。可以想象一下，用其他方法需要花多長時間。”
下面是必應AI的結果：
下面是表格中出現的幾項錯誤，從利潤率開始：
-Lululemon的毛利率是55.9%，不是58.7%。
-該公司的運營利潤率是19%，不是20.7%
-Lululemon的攤薄每股收益為2美元，調整後每股收益為1.62美元，必應顯示的攤薄每股收益為1.65美元。
-Gap現金及現金等價物為6790萬美元，不是14億美元。
-Gap庫存為30.4億美元，不是19億美元。