翻車的不只谷歌?微軟必應聊天演示被指存在事實性錯誤

翻車的不只谷歌?微軟必應聊天演示被指存在事實性錯誤
2023年02月15日 11:39 新浪科技

安裝新浪財經客戶端第一時間接收最全面的市場資訊→【下載地址

  新浪科技訊 北京時間2月15日上午消息,幾天前,谷歌聊天機器人演示活動現場翻車導致其股價當天暴跌逾7%,但微軟的演示活動同樣出現了事實性錯誤。

  在微軟進行演示時,這項嵌入在必應搜索中的類ChatGPT技術分析了Gap和Lululemon的財報。但業內人士將其給出的答案與財報原文對比后卻發現,這款聊天機器人遺漏了一些數據,甚至會杜撰一些內容。

  “必應AI在演示過程中給出了一些完全錯誤的答案,但卻沒人注意到。”獨立搜索引擎研究員德米特里·布里爾頓(Dmitri Brereton)寫道,“相反,大家都對必應的宣傳歡欣鼓舞。”

  布里爾頓發現,除了財務數據上的錯誤外,微軟在演示中針對吸塵器規格和墨西哥旅行計劃的回答可能存在事實性錯誤。布里爾頓最初并不是為了給微軟“挑刺”,他只是在細致對比微軟和谷歌的答案時意外發現了這些問題。

  人工智能專家稱這一現象為“幻覺”,也就是說,基于大語言模型生成的工具有杜撰內容的傾向。上周,谷歌推出了一款與之競爭的人工智能工具,演示過程中同樣存在事實性錯誤——但當時的錯誤很快就被人發現。

  這兩家公司都在加緊將新型生成式人工智能整合進搜索引擎,希望在ChatGPT引爆行業熱潮后向世人展示自己在這方面的優勢。ChatGPT是去年11月由創業公司OpenAI推出的,他們已經通過微軟融資百億美元,與之競爭的Stability AI和Hugging Face等創業公司也在融資中獲得了數十億美元的估值。

  谷歌與微軟對待這項技術的態度差異明顯:由于擔心聲譽風險和安全問題,谷歌遲遲不愿將AIGC(人工智能生成內容)技術整合進搜索引擎,而微軟卻在上周強調,有可能在短期內向部分公眾開放這項技術。

  “我認為不能讓這項技術躺在實驗室里,”納德拉說,“應該安全地推廣出去。”

  但在必應AI的演示過程中,的確在公司財報數據上出現了一些問題。

  微軟營銷高管約瑟夫·梅赫蒂(Yusuf Mehdi)在演示過程中訪問了Gap的投資者關系網站,然后讓必應AI根據這家零售商11月發布的第三季財報總結出“要點”。

  “很酷,節約了大量時間。”梅赫蒂說。

  下面是微軟演示過程的屏幕截圖:

  以下是這份總結中存在的錯誤:

  -Gap報告的毛利率為37.4%。但在去除與Yeezy有關的費用后,調整后毛利率為38.7%。

  -Gap的運營利潤率為4.6%,而非5.9%。5.9%這個數據在該公司的財報中根本沒有出現。

  -調整后攤薄每股收益為0.71美元,而非0.42美元,后者同樣在財報中無法找到。Gap的財報包含一個調整后所得稅收益,約為0.33美元。

  -Gap去年8月下調了全年預期,并在第三季度財報中表示,“第四季度銷售額可能同比下滑個位數左右”。由此看來,全年營收應該下滑,而非“較低的兩位數增長”。并沒有營業利潤率或每股收益預期。

Gap2022財年第三季度財報Gap2022財年第三季度財報

  微軟表示,該公司知道這些錯誤,他們也預計必應AI會犯一些錯誤。

  “我們知道這份報告,并且已經通過分析這一問題來改善體驗。”微軟發言人說,“我們承認仍然有一些工作要做,并且預計到該系統可能會在預覽期間犯一些錯誤,正因如此,反饋才至關重要,這可以幫助我們學習和改進模型。”

  微軟隨后讓必應AI對比了Gap和Lululemon的財報。梅赫蒂希望必應能將兩份財報的數據提取出來,制作成一份表格。

  “看看效果多么驚人。”他說,“就像這樣,一張表格,這個問題的答案有了。可以想象一下,用其他方法需要花多長時間。”

  下面是必應AI的結果:

  下面是表格中出現的幾項錯誤,從利潤率開始:

  -Lululemon的毛利率是55.9%,不是58.7%。

  -該公司的運營利潤率是19%,不是20.7%

  -Lululemon的攤薄每股收益為2美元,調整后每股收益為1.62美元,必應顯示的攤薄每股收益為1.65美元。

  -Gap現金及現金等價物為6790萬美元,不是14億美元。

  -Gap庫存為30.4億美元,不是19億美元。

炒股開戶享福利,入金抽188元紅包,100%中獎!
海量資訊、精準解讀,盡在新浪財經APP

責任編輯:劉明亮

微軟 必應

VIP課程推薦

加載中...

APP專享直播

1/10

熱門推薦

收起
新浪財經公眾號
新浪財經公眾號

24小時滾動播報最新的財經資訊和視頻,更多粉絲福利掃描二維碼關注(sinafinance)

7X24小時

  • 02-20 華人健康 301408 --
  • 02-20 納睿雷達 688522 --
  • 02-17 潤普食品 836422 8.5
  • 02-17 宿遷聯盛 603065 --
  • 02-15 艾能聚 834770 5.98
  • 產品入口: 新浪財經APP-股票-免費問股
    新浪首頁 語音播報 相關新聞 返回頂部