翻車的不只谷歌？微軟必應聊天演示被指存在事實性錯誤

新浪科技訊 北京時間2月15日上午消息，幾天前，谷歌聊天機器人演示活動現場翻車導致其股價當天暴跌逾7%，但微軟的演示活動同樣出現了事實性錯誤。

在微軟進行演示時，這項嵌入在必應搜索中的類ChatGPT技術分析了Gap和Lululemon的財報。但業內人士將其給出的答案與財報原文對比后卻發現，這款聊天機器人遺漏了一些數據，甚至會杜撰一些內容。

“必應AI在演示過程中給出了一些完全錯誤的答案，但卻沒人注意到?！豹毩⑺阉饕嫜芯繂T德米特里·布里爾頓寫道，“相反，大家都對必應的宣傳歡欣鼓舞?！?/p>

布里爾頓發現，除了財務數據上的錯誤外，微軟在演示中針對吸塵器規格和墨西哥旅行計劃的回答可能存在事實性錯誤。布里爾頓最初并不是為了給微軟“挑刺”，他只是在細致對比微軟和谷歌的答案時意外發現了這些問題。

人工智能專家稱這一現象為“幻覺”，也就是說，基于大語言模型生成的工具有杜撰內容的傾向。上周，谷歌推出了一款與之競爭的人工智能工具，演示過程中同樣存在事實性錯誤——但當時的錯誤很快就被人發現。

這兩家公司都在加緊將新型生成式人工智能整合進搜索引擎，希望在ChatGPT引爆行業熱潮后向世人展示自己在這方面的優勢。ChatGPT是去年11月由創業公司OpenAI推出的，他們已經通過微軟融資百億美元，與之競爭的Stability AI和Hugging Face等創業公司也在融資中獲得了數十億美元的估值。

谷歌與微軟對待這項技術的態度差異明顯:由于擔心聲譽風險和安全問題，谷歌遲遲不愿將AIGC技術整合進搜索引擎，而微軟卻在上周強調，有可能在短期內向部分公眾開放這項技術。

“我認為不能讓這項技術躺在實驗室里，”納德拉說，“應該安全地推廣出去?！?/p>

但在必應AI的演示過程中，的確在公司財報數據上出現了一些問題。

微軟營銷高管約瑟夫·梅赫蒂在演示過程中訪問了Gap的投資者關系網站，然后讓必應AI根據這家零售商11月發布的第三季財報總結出“要點”。

“很酷，節約了大量時間?！泵泛盏僬f。

下面是微軟演示過程的屏幕截圖:

以下是這份總結中存在的錯誤:

-Gap報告的毛利率為37.4%。但在去除與Yeezy有關的費用后，調整后毛利率為38.7%。

-Gap的運營利潤率為4.6%，而非5.9%。5.9%這個數據在該公司的財報中根本沒有出現。

-調整后攤薄每股收益為0.71美元，而非0.42美元，后者同樣在財報中無法找到。Gap的財報包含一個調整后所得稅收益，約為0.33美元。

-Gap去年8月下調了全年預期，并在第三季度財報中表示，“第四季度銷售額可能同比下滑個位數左右”。由此看來，全年營收應該下滑，而非“較低的兩位數增長”。并沒有營業利潤率或每股收益預期。

Gap2022財年第三季度財報

微軟表示，該公司知道這些錯誤，他們也預計必應AI會犯一些錯誤。

“我們知道這份報告，并且已經通過分析這一問題來改善體驗?！蔽④洶l言人說，“我們承認仍然有一些工作要做，并且預計到該系統可能會在預覽期間犯一些錯誤，正因如此，反饋才至關重要，這可以幫助我們學習和改進模型?！?/p>

微軟隨后讓必應AI對比了Gap和Lululemon的財報。梅赫蒂希望必應能將兩份財報的數據提取出來，制作成一份表格。

“看看效果多么驚人?！彼f，“就像這樣，一張表格，這個問題的答案有了?？梢韵胂笠幌?，用其他方法需要花多長時間?！?/p>

下面是必應AI的結果:

下面是表格中出現的幾項錯誤，從利潤率開始:

-Lululemon的毛利率是55.9%，不是58.7%。

-該公司的運營利潤率是19%，不是20.7%

-Lululemon的攤薄每股收益為2美元，調整后每股收益為1.62美元，必應顯示的攤薄每股收益為1.65美元。

-Gap現金及現金等價物為6790萬美元，不是14億美元。

-Gap庫存為30.4億美元，不是19億美元。